福建省捷云软件股份有限公司

本发明公开了一种商品详情页多模态图文与视频协同生成方法，涉及图文与视频生成技术领域，包括：步骤一：生成商品卖点单元集；步骤二：生成图像卖点证据区集；步骤三：生成视频卖点图像块序列；步骤四：执行卖点证据织轨操作，构建卖点证据承接图；步骤五：将卖点证据承接图输入改进TimeSformer模型，引入卖点时序驻留算子并设置证据承接校准层，生成卖点时空承接结果；步骤六：生成详情页图文生成结果和详情页视频生成结果；步骤七：进行一致性校验，生成卖点错位记录；步骤八：生成图文与视频协同生成结果。本发明结合卖点证据织轨操作和改进TimeSformer模型，实现商品详情页图文与视频协同一致生成。