一种面向牛只交互行为检测的关键帧分层选择与时序增强对齐相结合的动态ROI序列处理方法

本发明公开了一种面向牛只交互行为检测的关键帧分层选择与时序增强对齐相结合的动态ROI序列处理方法，步骤为：通过目标检测网络对视频帧进行目标检测；以每一帧目标ROI区域为观测数据，基于在线多目标跟踪算法为每个检测目标分配轨迹ID并更新轨迹状态；提取目标ROI序列，对每一帧计算关键帧综合评分；根据每一帧的关键帧综合评分按评分阈值进行关键帧的分层缓存；当关键帧的分层缓存累计达到目标长度且触发分类间隔满足要求，进行候选ROI序列构建，并对候选ROI序列进行时序增强与对齐；将经时序增强与对齐的ROI序列输入视频行为分类网络，输出行为类别信息。本发明提升行为特征序列的完整性与有效性，实现对爬跨行为的高精度识别。