返回搜索
档案
基于视觉理解的视觉自编码器训练方法及装置
发明专利有效
10权利要求 · 2 独立
§ Ⅰ
卷宗概要
申请人
上海稀宇极智科技有限公司
发明人
姚劲枫; 宋宇达; 周彧聪
IPC 分类
G06N 3/0895 (2023.01)G06T 9/00 (2006.01)G06N 3/045 (2023.01)G06F 40/30 (2020.01)G06V 10/764 (2022.01)G06V 10/82 (2022.01)G06N 3/0464 (2023.01)G06N 3/096 (2023.01)
本申请公开了基于视觉理解的视觉自编码器训练方法及装置,涉及人工智能技术领域。包括:基于视觉自编码器对训练图像进行特征编解码,得到重建图像;基于视觉自编码器、联合训练文本模型和视觉自编码器对应的教师模型中的至少一个,对训练图像进行视觉理解增强,得到视觉理解支撑表征;基于训练图像和重建图像计算重建损失值,基于视觉理解支撑表征和视觉自编码器输出的视觉理解表征计算视觉理解损失值;基于视觉理解损失值和重建损失值更新视觉自编码器的模型参数,得到目标视觉自编码器。本申请技术方案可以提高视觉自编码器的模型性能,提高模型的稳定性能,提高模型训练效率。