一种基于增强现实的掌机游戏交互方法及系统

本发明涉及人机交互与增强现实技术领域，尤其为一种基于增强现实的掌机游戏交互方法及系统，其特征在于，包括以下步骤：步骤1：通过掌机的深度传感器实时采集手部图像序列，并进行图像预处理，包括去畸变、ROI提取与时序同步；步骤2：采用轻量级手部关键点检测网络对预处理后的图像进行特征提取，获得手部关键点坐标与置信度；步骤3：基于关键点序列计算每帧移动能量，并利用滑动窗口的中位数绝对偏差MAD构建自适应能量阈值，本发明中，通过“自适应能量检测 + 轻量时序验证”的双阶段流式分段策略，实现了连续自然手势流的精准边界检测，在光照、遮挡、手速差异及算力受限的条件下仍能保持低误触、低延迟与高鲁棒性。