返回搜索
档案
一种融合舌象、心率及文本的多模态健康状态评估方法
发明专利有效
13浏览
10权利要求 · 1 独立
§ Ⅰ
卷宗概要
发明人
刘家豪; 曾维盛; 王紫艓; 宛曾心怡; 苑亚如
IPC 分类
G16H 50/30 (2018.01)G16H 50/70 (2018.01)G06F 18/25 (2023.01)G06V 40/16 (2022.01)G06V 10/52 (2022.01)G06V 10/764 (2022.01)G06V 10/774 (2022.01)G06V 10/82 (2022.01)G06N 3/0455 (2023.01)G06N 3/0464 (2023.01)G06N 3/084 (2023.01)G06N 3/096 (2023.01)
本发明涉及人工智能和健康管理领域,具体涉及一种融合舌象、心率及文本的多模态健康状态评估方法,将舌苔状况作为主要判断依据,同时测量使用者的心率,并结合使用者手动输入的身体情况、既往病史等文本信息,利用DeepSeek大模型给出健康状态评估结果,辅助使用者对自己身体状况进行有效判断,在舌象分析模块,利用YOLOv8定位舌体区域,采用ResNet18‑Transformer混合架构模型进行舌苔分类;在心率测量模块,利用级联分类器进行人脸检测,确定使用者正对摄像头后,通过欧拉视频放大算法测量心率;在建议生成模块,通过提示词工程引导DeepSeek大模型分析上述多模态信息,生成具有针对性的健康状态评估结果。