검색으로 돌아가기
기록
多模态大模型跨模态特征对齐优化方法
발명유효
6청구항 · 1 독립항
§ Ⅰ
개요
발명자
吴炳坤; 周浩; 周秋明; 汪中; 黄世勇; 姚锋
IPC 분류
G06F 18/213 (2023.01)G06F 18/10 (2023.01)G06N 3/0455 (2023.01)G06N 5/025 (2023.01)G06N 10/60 (2022.01)
本发明涉及数据处理技术领域,公开了多模态大模型跨模态特征对齐优化方法,包括:获取工业设备的多模态数据,多模态数据分为长尾小众模态数据和主流模态数据,对长尾小众模态数据进行分解处理,生成时频共生特征张量,长尾小众模态数据为工业设备的振动信号,通过生成的多模态对齐特征向量,避免长尾模态特征数据在统一特征空间中被主流模态数据淹没的边缘化问题,提升跨模态特征对齐时数据处理的泛化能力与语义一致性,优化工业多模态数据的协同处理精度,同时强化特征表达的稳定性、结构规整性与核心辨识度,保障多模态数据对齐的精准性与结构化水平,改善工业监控场景下多模态数据处理效果。