多模态模型训练方法及相关装置

本申请实施例公开了一种多模态模型训练方法及相关装置，该方法包括根据选择的多个第一文件夹新建训练集，每个第一文件夹中存储的图像文件对应一种模态，同一个对象的不同模态下的图像文件以相同名称存储于不同的第一文件夹中；将训练集绑定至选择的基准模型，根据每个第一文件夹中存储的图像文件的通道数确定基准模型的输入通道数，图像文件的通道用于指示图像信息的强度；根据基准模型、训练集和输入通道数创建多模态模型并进行训练，训练多模态模型的输入图像为通道融合图像，通道融合图像是根据输入通道数对训练集中同一个对象的不同模态下的图像文件进行堆叠得到的。采用本申请实施例，可以实现多模态模型的训练，提升多模态模型的训练效率。