北京大学&字节跳动：一张照片拆解出完整立体模型！3D打印模型设计师会失业吗？！-CSDN博客

3D打印技术参考注意到，3D建模技术领域近期迎来一项重要进展。来自北京大学、字节跳动和卡内基梅隆大学的研究人员共同开发了一款名为PartCrafter的工具，它是一种结构化的3D生成模型，能够从单个RGB图像一次性联合生成多个3D模型。这对于3D打印玩家来说绝对是一大福音。

多色3D打印对于家庭玩家来说绝对是让人兴奋又崩溃的事情，即便配备多色盒子可以打印出精致准确的细节，但同一层多次换色导致的喷嘴冲刷次数非常多，浪费大量材料和时间。一旦打到半夜，机器擦拭喷嘴导致的噪声曾经让笔者实在无法忍受而中断打印——材料白白浪费。所以，拆件还是刚需。

Meshmixer工具很好，但有时也需要花费大量时间，虽然跟多色一体打印的时间成本和材料成本相比这并不值一提，但仍然需要消耗大量精力。笔者一直疑惑为什么像拓竹这样的行业领导者，不推出一款直接按颜色拆分零件的平台工具，一键拆件将是给3D打印玩家带来相当大的助力。

在3D生成领域，现有的方法主要有两种：一种是生成整体3D对象，但无法支持部件级分解；另一种是采用两阶段流程，先对图像进行分割，再重建每个分割部分。然而，这两种方法都存在局限性。PartCrafter采用统一的组合生成架构，通过组合潜在空间和层次化注意力机制，实现了端到端的部件感知生成。

组合潜在空间将每个3D部件表示为一组可分离的潜在标记，并添加可学习的部件身份嵌入以区分不同部件。层次化注意力机制则在单个部件内部和所有部件之间实现结构化信息流动，确保生成过程中全局一致性和部件级细节的保留。

为支持部件级监督，研究人员创建了一个新的数据集，通过从大规模3D对象数据集中挖掘部件级注释，包含约50000个带部件标签的对象和300000个单独部件。实验表明，PartCrafter在生成可分解的3D网格方面优于现有方法，包括生成输入图像中不可直接看到的部件，证明了部件感知生成先验对3D理解和合成的强大作用。

对于3D打印行业，PartCrafter出现将极大颠覆模型设计的效率以及普通用户可使用3D打印技术的边界。首先，它极大地提高了设计效率，设计师可以从单张图像中快速生成包含多个部件的3D模型，减少了手动建模的时间和工作量。其次，其生成的3D模型具备语义意义和几何差异，设计师能够轻松地编辑、移除或添加部件，实现了更高的设计灵活性。此外，PartCrafter生成的部件具有较高的独立性和几何精度，有助于降低打印错误和材料浪费，提升打印质量。