基于多模态融合的营业厅服务风险识别方法、装置及设备

本发明提供一种基于多模态融合的营业厅服务风险识别方法、装置及设备，涉及电力服务技术领域。该方法包括：当检测到目标客户的声音模态信息中存在预设预警信息时，根据声音模态信息相应的预警信息确定初始服务风险；基于声音模态信息，确定目标客户的服务时间段，并确定目标客户的多角度视频模态数据和传感器模态数据；将目标客户的多模态数据进行时间帧对齐，对每一时间帧的声音模态信息、多角度视频模态数据和传感器模态数据进行权重匹配，根据权重匹配结果计算每一时间帧的帧风险信息；根据初始服务风险和每一时间帧的帧风险信息，确定目标客户的服务风险信息，并基于服务风险信息进行风险预警。本发明能够有效提高服务风险的识别准确率。