返回搜索
档案
一种文字匹配数字人口型的播报方法及系统
发明专利未知
9权利要求 · 2 独立
§ Ⅰ
卷宗概要
IPC 分类
G06T 13/40 (2011.01)G10L 13/02 (2013.01)G10L 13/10 (2013.01)G10L 21/10 (2013.01)
本申请公开了一种文字匹配数字人口型的播报方法及系统,方法包括:获取待播报文本序列及对应的语音特征;对两者进行跨模态对齐,得到语义与时域对齐的口型生成条件控制信息;将条件信息输入口型生成模型,生成中获取表征口型变化复杂度的状态信息以动态调整计算资源,生成匹配复杂度的逐帧唇形驱动参数;据此得到面部驱动参数序列并存入环形缓冲区;渲染时监测音画同步状态,若异常且驱动时刻超出缓冲区时序覆盖,则以历史面部参数外推预测当前驱动参数,否则从缓冲区读取;以所得参数驱动面部模型连续渲染。本申请通过自适应算力调节与异常自愈机制,兼顾口型保真度与播报稳定性。
登录后阅读全文
已显示权利要求 1。免费注册即可阅读全部 9 项权利要求、说明书全文、全部附图、翻译和法律状态。
- 全部权利要求
- 技术领域
- 背景技术
- 发明内容
- 附图说明
- 具体实施方式