一种基于双空间嵌入的无监督多模态装备实例对齐方法

本发明公开了一种基于双空间嵌入的无监督多模态装备实例对齐方法，该方法中，利用伪种子生成模块，通过对视觉和文本等模态特征计算相似性，自动构造初步预对齐实例对，并在迭代过程中不断扩充高置信度的种子集，从而有效降低对人工标注数据的依赖，然后采用双空间嵌入策略，分别在欧几里得空间与双曲空间中进行嵌入学习，捕捉装备实例之间的局部结构关系，并对装备实例的层次结构与全局分布特性进行精准建模，再通过构建自适应特征融合模块，将两种空间的嵌入表示进行动态加权整合，并通过引入迭代约束机制，利用损失函数确保相同实例在双空间中的表示尽可能接近，而不同实例之间的距离保持足够区分度。