검색으로 돌아가기
기록
一种控制方法及人工智能实验系统
발명유효
5조회수
10청구항 · 2 독립항
§ Ⅰ
개요
발명자
宋耀华; 何世强; 郑剑海
IPC 분류
G10L 15/22 (2006.01)G09B 9/00 (2006.01)B01L 9/02 (2006.01)G01D 21/02 (2006.01)G10L 15/26 (2006.01)G10L 15/18 (2013.01)B25J 11/00 (2006.01)G06V 10/82 (2022.01)G06N 3/0464 (2023.01)G06N 3/096 (2023.01)
本公开提供一种控制方法,应用于人工智能实验系统,至少包括机器人硬件平台,包括控制器、轮式机器人底盘和工业机械臂,方法包括:启动操作系统并执行硬件自检;加载大语言模型服务和传统AI模型,所述传统AI模型包括语音识别模型、目标检测模型和语义分析模型;接收用户的自然语言指令,采用语音识别模型将语音转换为结构化文本,利用大语言模型和语义分析模型解析指令意图并生成机器人控制参数,得到多模态交互控制信号;基于多模态交互控制信号,调用摄像头采集图像数据并通过目标检测模型识别机器人待抓取的目标对象位置和类别,结合激光雷达数据计算机器人移动路径和机械臂抓取轨迹,控制轮式机器人底盘和工业机械臂执行协调动作。