№ CN121366388A発明
有効基于跨模态检索的电力样本集自构建方法及装置
本发明公开基于跨模态检索的电力样本集自构建方法及装置。该方法,包括获取电力巡检图像样本库中的多模态样本图文对;通过建立的残差神经网络模型提取各电力巡检图像样本的图像特征;通过M3E模型提取各针对电力巡检图像样本的文本描述的语义特征;将各电力巡检图像样本的图像特征、各针对电力巡检图像样本的文本描述的语义特征,基于Milvus构建电力多模态特征数据库;根据获取的样本集构建需求记载的描述项、目标文本描述或目标电力巡检图像样本,从构建的电力多模态特征数据库中跨模态检索,匹配得到多模态电力巡检图像实例,全部的多模态电力巡检图像实例为自构建的电力样本集。如此,能够智能化、高效地自动构建多模态样本集。
❖中国电力科学研究院有限公司武汉分院; 国家电网有限公司大数据中心; 国网浙江省电力有限公司信息通信分公司吴华希; 付晶; 谈家英; 闫华光; 陈振宇; 邵瑰玮; 周立玮; 杜建光; 沈潋; 李继伟; 冯珺; 沈潇军; 赵帅; 宋昊旻; 王艺丹§ 4/10 請求項G06V 20/52 (2022.01), G06V 10/44 (2022.01), G06V 10/46 (2022.01) +84