一种基于轻量化Conformer与方言嵌入的多方言语音识别方法

本发明提供了一种基于轻量化Conformer与方言嵌入的多方言语音识别方法及系统，该方法包括：对输入的方言语音数据进行预处理，提取Fbank特征并进行标准化；为每个语音样本附加方言ID标签，并输入到轻量级Conformer编码器中；轻量级Conformer编码器通过多个Conformer编码器层提取声学特征，采用跨层参数共享机制并添加Adapter模块，每层均进行归一化处理，形成编码器输出特征；将编码器输出特征传递到双解码器结构，包括CTC解码分支与注意力解码分支；对双解码器分支的输出特征进行加权融合，得到最终输出文本结果。该方法有效解决了多方言语音识别中的计算复杂度和方言适应性问题，适用于低资源环境下的高效语音识别应用。