基于多模态感知的高处作业行为识别方法及其相关产品

本申请涉及计算机视觉技术领域，提供了一种基于多模态感知的高处作业行为识别方法及其相关产品。通过对多视角视频流进行时间同步及空间位姿标定获得感知数据帧组，根据感知数据帧组进行作业场景匹配及多视角三维定位获得肢体关节点坐标集及作业标准模板，根据肢体关节点坐标集及作业标准模板进行准备动作合规性校验及作业过程的违规行为识别获得准备动作合规数据及违规风险标识，根据准备动作合规数据及违规风险标识进行高处作业合规评估生成高处作业实训评分报告。本申请通过完成多视角对齐，再利用三维关节点位置对人员动作与装备状态进行关联分析，为高处作业实训考试提供可追溯与比较的识别结果。