CNIPA.AI
Back to Search
Dossier

基于适配器的交互式伪装目标分割方法、电子设备和存储介质

InventionActive
6Claims · 3 independent
§ Ⅰ

Dossier Overview

Inventor

林贤明; 陈泽华; 曹刘娟

IPC Classification

G06T 7/11 (2017.01)G06N 3/045 (2023.01)G06N 3/0455 (2023.01)G06N 3/048 (2023.01)

本发明公开了一种基于适配器的交互式伪装目标分割方法,动态调整模型对不同频域特征的关注度,将原本重复的分割流程细化为按照“先整体后细节”、循序渐进地理解分割目标的过程,并通过点击强化机制,强化用户提示在准确理解分割目标中的作用。本发明主要分为特征提取模块和交互分割模块。在特征提取模块中,图像将通过两条路径提取不同频率的特征,预训练的ViT框架将更关注图像的高频特征,而加入适配器微调训练的分支由于卷积层的特性将更关注低频特征。在交互分割模块中,加入适配器微调的分支所提取的特征将会与点击嵌入进行交叉注意力运算,并通过线性层增加其表达能力,得到强化后的特征。最终,两条分支进行融合通过解码器得到预测掩码。

External Resources