Back to Search
Dossier
基于多模态大模型的食物营养分析方法
InventionActive
6Claims · 1 independent
§ Ⅰ
Dossier Overview
Inventor
马佳旗; 陆成刚; 陈乃波
IPC Classification
G16H 20/60 (2018.01)G06V 10/774 (2022.01)G06V 20/68 (2022.01)G06V 10/82 (2022.01)G06V 10/80 (2022.01)G06V 10/766 (2022.01)G06F 18/214 (2023.01)G06F 18/25 (2023.01)G06F 18/27 (2023.01)G06N 3/09 (2023.01)G06N 5/04 (2023.01)G06N 5/045 (2023.01)
基于多模态大模型的食物营养分析方法,属于自然语言处理技术领域。本发明利用图像—营养成分对照数据集训练多模态模型,实现从单张图片自动推断碳水、脂肪、纤维、热量、蛋白质、盐、饱和脂肪、糖多个关键营养指标。其技术创新包括多源数据融合,即结合食物图片特征、和营养数据库数据,构建统一的多模态特征空间;端到端回归预测,即直接以图像为输入,输出多个连续数值型营养指标,而非仅限于类别识别;可解释性增强,即通过注意力机制或可视化工具展示模型关注的图像区域与营养预测之间的关系,提升用户信任度;以及个性化适配,即结合用户历史饮食记录与健康目标,动态调整模型的预测与推荐策略。
External Resources