基于多模态数据的界面异常检测方法、装置、介质及产品

本申请提供一种基于多模态数据的界面异常检测方法、装置、介质及产品，涉及金融科技领域。该方法通过获取目标界面的设计多模态数据以及运行多模态数据，并生成对应的设计场景图以及运行场景图；对设计场景图和运行场景图进行特征提取，得到对应的第一特征向量和第二特征向量；并将第一特征向量和第二特征向量输入异常检测模型，得到检测结果；若检测结果指示差异程度大于预设差异程度，确定目标界面存在异常；该方法通过整合多模态数据，避免单维度比对的局限性；并利用异常检测模型对设计场景图和运行场景图对应的特征向量进行跨模态特征对齐，从而全面解析设计图和实现图的差异，使得的得到的检测结果更准确，提高了界面差异检测的精准性。