검색으로 돌아가기
기록
一种视频字幕生成方法、装置、设备及存储介质
발명알 수 없음
10청구항 · 4 독립항
§ Ⅰ
개요
IPC 분류
H04N 21/488 (2011.01)H04N 21/854 (2011.01)H04N 21/44 (2011.01)H04N 21/439 (2011.01)G10L 15/26 (2006.01)G10L 25/63 (2013.01)G06V 20/40 (2022.01)G06F 40/30 (2020.01)
本申请公开了一种视频字幕生成方法、装置、设备及存储介质,涉及视频处理技术领域,包括:将视频分解为视频帧序列、音频信号流以及语音转写文本;对视频帧序列、音频信号流以及语音转写文本进行特征提取,分别得到视觉特征向量序列、声学特征表示以及语义表示;融合视觉特征向量序列、声学特征表示以及语义表示得到多模态视频特征表示;根据多模态视频特征表示进行情绪识别与量化得到情绪向量,并根据情绪向量得到情绪强度;识别视频中的说话人身份以及视频的场景类型;根据情绪强度、说话人身份以及场景类型选择字幕样式参数;根据字幕样式参数渲染字幕。该方法能够提升效率,降低成本,提升字幕效果。