甘孜藏族自治州科学技术信息研究所

本发明公开了一种基于康巴藏语方言的端到端气象播报数字人生成方法，包括：获取待处理气象文本信息；对康巴藏语方言气象文本信息进行文本特征抽取，获取文本语义特征，并对文本语义特征进行情感分类处理，获取情感类别标签；生成具有目标播报人员外貌特征的气象播报数字人分身视频；端到端气象播报数字人视频数据用于在气象信息发布平台进行播报输出。本发明通过语言类型识别与汉藏翻译，解决了康巴藏语气象播报语料匮乏及跨语种转换难题；利用目标播报人员数字映像数据进行语音驱动视频合成及多模态同步融合，生成了外貌逼真、音画同步的气象播报数字人分身视频，实现了从文本到视听一体化数字人播报的端到端自动化生成。