基于机器视觉与传感信号融合的钻机钻杆计数系统与方法

本发明涉及一种基于机器视觉与传感信号融合的钻机钻杆计数系统与方法，属于煤矿钻机钻杆技术领域。先获取打钻面上钻杆的视频数据，逐帧提取图像并打标签；利用打标签图像训练目标检测模型；实时采集打钻面钻杆作业视频流，逐帧提取图像，按视频流时序向目标检测模型输入图像；通过目标检测模型输出每一图像帧中检测目标的中心坐标及定位框，并使用目标跟踪模型对每类检测目标进行轨迹关联，为每个检测目标分配唯一ID；根据目标检测模型对每一帧图像的检测结果，并依据上钻杆阶段钻机各部件运动轨迹，结合预设轨迹、预设平均推进速度区间和预设推进压力区间综合判断是否完成一次上钻；当同时满足预设条件时钻杆计数增加，计数结果同步进行显示。