検索に戻る
案件記録
一种基于多模态情感计算的生成式艺术疗愈方法
発明不明
6閲覧数
6請求項 · 1 独立
§ Ⅰ
案件概要
IPC分類
G16H 20/70 (2018.01)G16H 50/70 (2018.01)G06F 3/01 (2006.01)G06F 18/213 (2023.01)G06F 18/22 (2023.01)G06N 3/045 (2023.01)G06N 3/0455 (2023.01)G06N 3/0464 (2023.01)G06N 3/0475 (2023.01)G06N 3/094 (2023.01)
一种基于多模态情感计算的生成式艺术疗愈方法,采集用户的多模态情感数据,包括面部视频、生理信号、眼动轨迹及交互行为轨迹,并进行预处理与特征编码,生成统一的高维情感特征向量,构建跨模态生成对抗网络,生成器以情感特征向量为条件输入,输出对应的艺术图像;判别器同时区分真实图像与生成图像,并预测生成图像所表达的情感特征,通过对抗损失与预测情感特征与输入情感特征向量之间的一致性损失共同优化生成器,实现“情感特征‑视觉元素”的非线性映射。本发明通过多模态情感特征编码:同步采集面部微表情、生理信号、视线轨迹与交互行为轨迹,利用多头注意力融合生成高维情感特征向量,实现对用户潜意识情感状态的量化表达。
外部リソース