面向低带宽跨境场景的音视频分层编码翻译方法及系统

本发明涉及音视频通信与跨语言翻译技术领域，公开了一种面向低带宽跨境场景的音视频分层编码翻译方法及系统，其技术方案要点包括：获取原始音频数据和原始视频帧数据，通过内容分析预处理得到预处理数据包；基于预处理数据包，通过独立可伸缩分层编码得到分层码流集合；基于分层码流集合和网络反馈信息，通过优先级分层传输调度得到发送数据包集合；基于发送数据包集合，通过分层解码、时间对齐与跨模态融合翻译得到视频帧序列。本发明基于预处理数据包和分层码流集合，通过优先级分层传输调度与跨模态融合翻译，实现了低带宽跨境场景下翻译任务的视听双路信息保障，提高了翻译鲁棒性。