一种基于人工智能大数据分析处理装置及方法

本发明公开了一种基于人工智能大数据分析处理装置及方法，包括：采集语音、图像及辅助数据并预处理，区分驾驶员与乘员，检测紧急关键词与声学事件生成紧急标记，输出带标签分离音频流，带标签音频流、图像及辅助数据输入端到端多任务Transformer模型，输出深度语义、面部及语音情绪序列及语义‑情感一致性评分，根据对话对象标签将意图流分离为主任务流和背景交互流，存在紧急标记时将相关指令提至最高优先级，基于语义‑情感一致性评分及面部与语音情绪差异计算模态矛盾度，输入时序推理模型结合历史状态推理深层情绪，依此与深度语义生成交互策略，当矛盾度超阈值时判定隐藏情绪并触发安抚或预警响应，最终经跨模态验证修正融合结果生成转化识别信息。