索尼 | 指导式文本3D到3D转换

533次阅读
没有评论

【推荐理由】本文提出了一种高质量的3D到3D的转换方法,即根据文本指示将一个给定的三维场景转换为另一个场景。

Instruct 3D-to-3D: Text Instruction Guided 3D-to-3D conversion
Hiromichi Kamata, Yuiko Sakuma, Akio Hayakawa, Masato Ishii, Takuya Narihira
[Sony Group Corporation]
【论文链接】https://arxiv.org/pdf/2303.15780.pdf

【项目链接】https://sony.github.io/Instruct3Dto3D-doc/

【摘要】本文提出了一种高质量的3D到3D的转换方法,即Instruct 3D to 3D。该方法是为一项新的任务而设计的,即根据文字说明将一个给定的三维场景转换成另一个场景。Instruct 3D-to-3D应用预先训练的图像-图像扩散模型进行3D-3D转换。这使得每个视点图像的可能性最大化和高质量的3D生成成为可能。此外,该方法明确地将源三维场景作为一个条件输入,这增强了三维一致性和源三维场景结构的可控性。作者还提出了动态缩放,它允许调整几何体转换的强度。作者进行了定量和定性的评估,结果表明提出的方法比基线方法实现了更高质量的三维到三维的转换。

索尼 | 指导式文本3D到3D转换

索尼 | 指导式文本3D到3D转换

 

Read More 

正文完
可以使用微信扫码关注公众号(ID:xzluomor)
post-qrcode
 
评论(没有评论)
Generated by Feedzy