基于检索增强和个性化生成的三维内容生成方法及装置

本发明公开了一种基于检索增强和个性化生成的三维内容生成方法及装置。首先，基于文本检索图片构建图像数据D1；基于图像数据D1以及输入的文本生成个性化图像P0，并对P0进行处理得到透明背景的个性化图像P1；将P1通过三维模型生成方法得到三维模型G1；通过P1，D1和G1在随机视角下可微渲染出的图像P2，通过个性化图像生成模型预测个性化条件噪声，通过扩散模型预测无条件噪声；通过个性化条件噪声和无条件噪声计算外观分数匹配蒸馏损失来优化三维模型；最后，重复该过程优化得到最终的三维模型。本发明从生成可控性及生成结果方面实现创新，能够实现更高质量且可控制的三维模型生成。