一种多模态重载助行机器人及控制系统

本发明涉及机器人控制技术领域，具体涉及一种多模态重载助行机器人及控制系统。本发明的多模态重载助行机器人能够实现多模态信息融合，利用深度学习算法（目标检测、语义分割等）解析图像数据，结合激光雷达构建动态地图，识别活物（例如宠物等小型活物或行人等大型活物）、设备（可以按尺寸划分为小型设备和大型设备）等可能产生风险的潜在风险物体。本发明能够根据潜在风险物体采用相应的风险规避策略以实现智能导航与路径规划，基于激光雷达和图像传感器实现机器人本体的实时定位与探测地图构建（SLAM）。结合风险规避的相关算法，实现动态路径规划，智能避障。