基于深度调控线形单元的RGBD分割方法及系统

本发明属于图像处理技术领域，提供了基于深度调控线形单元的RGBD分割方法及系统，获取RGB图像和对应的深度图像；分别提取RGB图像的多层级视觉特征和多层级3D特征；将提取的多层级视觉特征和对应的多层级3D特征进行多阶段融合得到多层级融合特征；每一阶段融合时，利用深度调控线性单元，将每一层级的3D特征作为条件，对相应层级的视觉特征进行深度调控激活，得到当前层级的RGBD融合特征；其中，深度调控线形单元通过替换通用视觉模型中的原始线形单元或原始激活函数的方式，将3D特征映射为激活参数以动态调制RGB特征的激活响应;对多层级融合特征进行解码，输出分割结果。可以将任意通用视觉模型改造成RGBD分割模型而无需特殊设计，即插即用。