검색으로 돌아가기
기록
一种基于跨模态消歧融合的水下显著性检测方法
발명유효
1조회수
7청구항 · 1 독립항
§ Ⅰ
개요
발명자
付莲莲; 柳平助; 黄妮莎; 勒宇
IPC 분류
G06V 20/05 (2022.01)G06V 10/46 (2022.01)G06V 10/30 (2022.01)G06V 10/80 (2022.01)G06V 10/82 (2022.01)G06N 3/0464 (2023.01)G06N 3/048 (2023.01)G06N 3/09 (2023.01)
本发明公开了一种基于跨模态消歧融合的水下显著性检测方法,包括如下步骤:S1、建立跨模态一致性感知鲁棒融合模块,先利用一致性学习进行模态间的噪音消歧义,再进行多模态特征融合;S2、建立协作跨分支感知交互模块,用于处理各种异构信息流以及实现引导后续分割;S3、建立边缘精炼特征解耦模块,用于通过边缘增强分割细节特征以及利用特征解耦进行提升分割效果。本发明针对水下图像质量退化严重、多模态信息融合困难等挑战,充分利用RGB模态在纹理、色彩和结构细节方面的优势,通过跨模态一致性感知鲁棒融合模块致力于有效建模RGB‑Depth模态的相关性,实现精确特征级对齐与融合,以充分利用互补信息。