CLAY或许是今年最值得期待的3D生成模型，号称质量最好+布线最好+支持的输入模态最多+支持材质生成。

CLAY是一种大规模可控生成模型，用于创建高质量的3D资产，它结合了多分辨率变分自编码器和简化的潜在扩散变压器，通过多种输入形式生成详细的3D几何结构和物理渲染材质。

CLAY或许是今年最值得期待的3D生成模型，号称质量最好+布线最好+支持的输入模态最多+支持材质生成。

相关链接

论文地址：https://arxiv.org/abs/2406.13897

项目主页：https://sites.google.com/view/clay-3dlm

代码：https://github.com/CLAY-3D/OpenCLAY（暂未开源）

论文阅读

CLAY:一种可控的大规模生成模型高质量的3D资产

摘要

在数字创意领域，我们凭借想象力创造复杂 3D 世界的潜力常常受到现有数字工具的限制，这些工具需要大量的专业知识和努力。为了缩小这种差距，我们引入了 CLAY，这是一种 3D 几何和材料生成器，旨在毫不费力地将人类的想象力转化为复杂的 3D 数字结构。

CLAY 支持经典的文本或图像输入以及来自各种基元（多