一种基于情感原型驱动的多模态反事实情感识别方法和装置

本发明公开了一种基于情感原型驱动的多模态反事实情感识别方法和装置，涉及情感分析技术领域，包括：通过共享私有解耦编码将跨模态共享语义和模态专属情感信息分离，采用源模态可靠性同时动态反映模态间一致程度和情感强度归属明确程度，在共享语义空间中利用源模态可靠性调制同质图蒸馏边权并进行低可靠源模态抑制，在私有信息域中通过跨模态注意力实现异质增强图蒸馏，最终以联合文本、音频和视频的共享特征及私有增强特征进行可靠性感知多模态融合预测的基础情感强度预测值为基础引入受控的音视频门控残差校准，能够降低不可靠模态传播错误知识的风险，减少多模态融合中的噪声干扰和语义偏移，从而提高了多模态情感识别的准确性。