검색으로 돌아가기
기록
从RGB图像到事件相机的跨模态场景识别方法、设备及介质
발명유효
10청구항 · 3 독립항
§ Ⅰ
개요
발명자
杜博闻; 刘钧逸
IPC 분류
G06V 20/00 (2022.01)G06V 10/46 (2022.01)G06V 10/74 (2022.01)G06V 10/77 (2022.01)G06V 10/774 (2022.01)G06V 10/82 (2022.01)G06N 3/0455 (2023.01)G06N 3/0464 (2023.01)G06N 3/084 (2023.01)G06N 3/0895 (2023.01)G06N 3/094 (2023.01)
本发明涉及一种从RGB图像到事件相机的跨模态场景识别方法、设备及介质,方法利用识别模型进行场景识别,包括:对于同一场景样本,提取样本图像内容特征、样本事件内容特征和运动特征,基于样本图像内容特征和样本事件内容特征计算对比损失;基于样本图像内容特征、样本事件运动特征和样本事件内容特征生成第一伪图像和第二伪图像,并计算潜在特征一致性损失;自重建RGB图像和事件数据并计算自重建损失;对于每一场景样本,构建地理临近‑远离三元组并计算地理临近‑远离三元组的三元组损失和域对抗损失;基于所有损失优化识别模型,将待识别场景的事件数据利用识别模型获取场景识别结果。与现有技术相比,本发明进行更准确且稳定的场景识别。