CNIPA.AI
검색으로 돌아가기
기록

融合深度学习的自然语音情感合成与识别方法及系统

발명유효
9조회수
10청구항 · 3 독립항
§ Ⅰ

개요

IPC 분류

G10L 25/63 (2013.01)G10L 25/30 (2013.01)G10L 25/03 (2013.01)G10L 15/16 (2006.01)G10L 15/18 (2013.01)G10L 13/08 (2013.01)G10L 13/027 (2013.01)G06F 40/30 (2020.01)G06F 18/23213 (2023.01)G06F 18/25 (2023.01)G06F 18/214 (2023.01)G06N 3/042 (2023.01)G06N 3/0464 (2023.01)G06N 3/08 (2023.01)

本发明提供融合深度学习的自然语音情感合成与识别方法及系统,涉及语音处理技术领域,包括获取待处理语音数据与对应文本内容,提取声学特征表示与语义特征表示,将声学特征的时序帧节点与语义特征的语义单元节点建立边连接,构建双向情感关联图并计算边权重,基于图卷积运算传播更新得到融合特征表示;将融合特征输入情感分类器得到情感状态标识,并根据边连接权重分布计算情感目标区域掩码,生成情感调控参数;基于情感调控参数执行语音合成并进行一致性校验,得到合成语音和情感偏差反馈信息。本发明通过双向情感关联图实现声学与语义的深度融合,提高了情感识别准确性和语音合成的情感表现力。