Back to Search
Dossier
基于跨模态检索的电力样本集自构建方法及装置
InventionActive
1views
10Claims · 4 independent
§ Ⅰ
Dossier Overview
Applicant
中国电力科学研究院有限公司武汉分院; 国家电网有限公司大数据中心; 国网浙江省电力有限公司信息通信分公司
Inventor
吴华希; 付晶; 谈家英; 闫华光; 陈振宇; 邵瑰玮; 周立玮; 杜建光; 沈潋; 李继伟; 冯珺; 沈潇军; 赵帅; 宋昊旻; 王艺丹
IPC Classification
G06V 20/52 (2022.01)G06V 10/44 (2022.01)G06V 10/46 (2022.01)G06V 10/54 (2022.01)G06V 10/56 (2022.01)G06V 10/80 (2022.01)G06V 10/82 (2022.01)G06N 3/0464 (2023.01)G06N 3/08 (2023.01)G06Q 50/06 (2024.01)G06F 18/25 (2023.01)
本发明公开基于跨模态检索的电力样本集自构建方法及装置。该方法，包括获取电力巡检图像样本库中的多模态样本图文对；通过建立的残差神经网络模型提取各电力巡检图像样本的图像特征；通过M3E模型提取各针对电力巡检图像样本的文本描述的语义特征；将各电力巡检图像样本的图像特征、各针对电力巡检图像样本的文本描述的语义特征，基于Milvus构建电力多模态特征数据库；根据获取的样本集构建需求记载的描述项、目标文本描述或目标电力巡检图像样本，从构建的电力多模态特征数据库中跨模态检索，匹配得到多模态电力巡检图像实例，全部的多模态电力巡检图像实例为自构建的电力样本集。如此，能够智能化、高效地自动构建多模态样本集。
External Resources