PartCrafter：首个结构化3D多部件生成模型

主要观点总结

本文介绍了北京大学、字节跳动和卡耐基梅隆大学联合提出的PartCrafter，这是一种新颖的结构化3D生成模型。PartCrafter能够生成可分解的3D网格，并支持灵活的部件编辑，为创作者提供更高的自由度。它通过引入组合式潜在空间和局部-全局联合去噪Transformer，实现了从单张图像到结构化3D模型的快速生成。此外，PartCrafter还自建了一个高质量训练数据集，以支持部件级生成。实验结果表明，PartCrafter在物体级和部件级指标上的性能均优于其他方法。

关键观点总结

关键观点1: PartCrafter是一种结构化3D生成模型，能够生成可分解的3D网格，并支持灵活的部件编辑。

这种模型为创作者提供了更高的自由度，并打破了传统的整体式3D模型生成规范。

关键观点2: PartCrafter引入了组合式潜在空间和局部-全局联合去噪Transformer，实现了快速、高效的3D模型生成。

通过这两大技术，PartCrafter能够在约40秒内完成从单张图像到结构化3D模型的生成，效率远超传统方法。

关键观点3: PartCrafter的自建训练数据集支持部件级生成。

数据集包含13万个3D对象，其中10万个对象具备多部件标注，为模型训练提供了丰富的监督信息。

关键观点4: PartCrafter在物体级和部件级指标上的性能均优于其他方法。

实验结果表明，PartCrafter能够生成高保真、几何独立且可按部件分解的3D网格，具有广泛的应用前景。