一种基于多模态的激光焊缝缺陷检测系统

本发明公开了一种基于多模态的激光焊缝缺陷检测系统，包括：传感器模块，用于采集焊接过程中的多模态数据并进行预处理；特征提取模块，用于输入改进的MoSE模型，执行初步特征提取和映射；特征融合模块，用于输入门控注意力神经网络，执行权重计算和交互注意力对齐操作；缺陷特征建模模块，用于输入改进的胶囊网络，基于路由注意力机制计算相关性并分配权重；分类与定位模块，用于执行激活值计算、分类判定和显著性分布映射；结果输出模块，用于组合焊缝缺陷的分类结果与定位结果生成实时检测结果并反馈至焊接控制端。本发明通过改进MoSE模型与改进胶囊网络，实现焊缝缺陷的智能分类与定位，具备特征融合充分、检测精度高的优点。