一种基于集成异构图图间注意力的多模态数据聚类方法及系统

本发明公开了一种基于集成异构图图间注意力的多模态数据聚类方法及系统，属于数据处理技术领域，包括：获取多模态数据，对多模态数据进行特征提取，得到D维节点特征表示；将D维节点特征表示投影至联合学习空间，生成相似性图，并生成可用性图；构建各模态对应的集成异构图；对集成异构图进行图内注意力计算，并基于各模态图中节点的邻域聚合结果进行图间注意力计算，结合图内注意力结果与图间注意力结果，得到多模态联合节点表示；计算原始分布与目标分布，得到聚类损失；建立基础聚类模型，重建损失与聚类损失，并通过自监督学习优化模型，输出用户画像与用户意图的聚类结果。本发明提升了智能客服系统的语义理解能力与服务精准。