一种根据用户指令高效匹配系统动作的方法、系统及介质

本发明公开了一种根据用户指令高效匹配系统动作的方法、系统及介质，包括：获取多源系统文档，根据多源系统文档，基于语义解析生成系统全局知识图谱；基于系统预设的动作集，构建动作集中的实体到动作的索引；动作集包括若干动作，每个动作包括若干实体；获取用户指令，并对用户指令进行指令解析和实体提取，得到提取后的实体集；基于双模态动作检索法，将所述实体集中的实体与所述系统全局知识图谱中的实体进行映射匹配，根据所述实体到动作的索引生成候选动作；将候选动作输入LLM大语言模型中，结合用户指令和系统动作描述生成动作执行序列及参数。本发明显著提升了复杂操作场景下的用户指令与系统动作的高效匹配。