基于图像识别的绘本动态标注方法、装置及电子设备

本申请涉及智能教育与人机交互技术领域，公开了基于图像识别的绘本动态标注方法、装置及电子设备，方法包括：获取绘本图像与用户的多模态感知数据；处理绘本图像，识别内容并构建知识图谱；分析多模态数据，生成用户实时状态指标；结合知识图谱与用户状态，生成动态标注策略；依据策略生成并输出多模态的动态标注；装置包括：图像与多模态数据获取模块、绘本内容分析模块、用户状态分析模块、策略生成模块、动态标注生成与输出模块。本申请通过利用深度学习算法对绘本图像数据进行处理，实现了对绘本中文字、角色和背景的高精度识别，并基于识别结果构建绘本内容知识图谱，克服了现有技术识别精度不足和信息关联性差的问题。