返回搜索
档案
一种基于人工智能的MV端到端生成方法及系统
发明专利未知
10权利要求 · 3 独立
§ Ⅰ
卷宗概要
IPC 分类
H04N 21/854 (2011.01)H04N 21/81 (2011.01)H04N 21/84 (2011.01)H04N 21/43 (2011.01)G10L 25/18 (2013.01)
本申请涉及一种基于人工智能的MV端到端生成方法及系统,属于人工智能及数字媒体处理技术领域,该方法包括:获取音乐音频和主题文本数据进行特征编码,提取音频的节奏与结构信息生成时序控制参数,并结合文本语义生成视觉描述信息。在预训练模型潜在空间构建初始噪声,利用视觉描述引导画面生成方向,利用节奏信息调整运动幅度,去噪得到初始视频潜变量。根据结构信息确定过渡位置并对帧间特征平滑处理,得到目标视频潜变量。最后解码重建视频画面并与音频对齐合成,输出音乐视频文件。本申请能够满足用户对于个性化、专业化音乐视频内容的快速制作需求。
登录后阅读全文
已显示权利要求 1。免费注册即可阅读全部 10 项权利要求、说明书全文、全部附图、翻译和法律状态。
- 全部权利要求
- 技术领域
- 背景技术
- 发明内容
- 附图说明
- 具体实施方式