一种智能手机操作辅助方法及系统

本发明公开了一种智能手机操作辅助方法及系统，属于智能手机领域。所述方法包括：用户或管理员触发模式选择，所述模式包括学习模式和操作模式，其中，所述学习模式用于通过大语言模型学习用户或管理员的操作来积累操作知识，并构建与更新知识库，所述操作模式，用于根据所述知识库自动执行用户的指令；循环执行所选模式，直至达到预设的终止条件。本发明通过将大语言模型与多模态感知结合，能够基于用户的语音指令、屏幕内容以及上下文进行动态决策和操作指令生成，从而实现复杂的跨应用操作与智能化交互。