TRELLIS.2:单图生成带 PBR 材质的三维资产
论文 / 研究阅读

TRELLIS.2:单图生成带 PBR 材质的三维资产

Native and Compact Structured Latents for 3D Generation

2025 · arXiv 预印本 · Microsoft Research

Xiang, Jianfeng、Chen, Xiaoxue、Xu, Sicheng、Wang, Ruicheng、Lv, Zelong、Deng, Yu、Zhu, Hongyuan、Dong, Yue、等;完整作者名单见原论文

导读

微软单图三维生成研究,以 O-Voxel 表达几何和 PBR 材质,导出三维资产;官方环境要求 Linux、CUDA 与至少 24GB 显存。

它能做什么

微软 40 亿参数图像转三维模型,使用 O-Voxel 稀疏体素表示,同时生成几何和完整 PBR 材质,支持开放表面、非流形结构及内部封闭结构,并提供给定形状生成纹理的流程。适合有 Linux 与 CUDA 环境的研究人员、技术美术和三维资产探索者。O-Voxel 的重点是同时表达几何与外观,不要求模型先变成闭合等值面,因此对衣物、叶片等开放结构更有针对性。但“一张图生成资产”不意味着交付已经完成:进入游戏引擎前仍要检查拓扑、面数、UV和材质,打印前则要额外核对水密性。官方速度数据可用于理解不同分辨率的代价,不宜拿来当自己显卡的性能保证。

输入、输出与使用流程

输入:单张参考图;贴图流程可输入三维形状与参考图。输出:PBR 网格 GLB、MP4 展示视频;base color/roughness/metallic/opacity。请按官方示例先完成最小流程,再依据自己的资产要求调整参数;下游软件的格式兼容性与交付质量需要分别检查。

安装与运行门槛

仅 Linux 测试;NVIDIA≥24GB 显存,已验证 A100/H100;CUDA 推荐12.4、Python≥3.8、Conda,需编译多个 CUDA 依赖。 硬件说明:24GB NVIDIA GPU 起;官方 512³约3秒、1024³约17秒、1536³约60秒均是 H100 测试,不是消费卡承诺。

使用边界与许可

原始网格可能有小孔、拓扑不连续,3D打印仍需补洞。 GLB 默认 OPAQUE,即便纹理有 alpha,需在下游手动连接透明通道。 基础模型未做人类偏好对齐,风格与结果不保证。 授权核对:MIT(代码与官方 TRELLIS.2-4B 模型卡均明确)。权重下载后可本地推理,无必需付费 API;在线演示资源与排队另看平台。

官方资料

引用这篇论文
@misc{trellis22025,
  title = {Native and Compact Structured Latents for 3D Generation},
  author = {Xiang, Jianfeng and Chen, Xiaoxue and Xu, Sicheng and Wang, Ruicheng and Lv, Zelong and Deng, Yu and Zhu, Hongyuan and Dong, Yue and Zhao, Hao and Yuan, Nicholas Jing and Yang, Jiaolong},
  year = {2025},
  eprint = {2512.14692},
  archivePrefix = {arXiv},
  url = {https://arxiv.org/abs/2512.14692}
}
COMMUNITY

评分与讨论

0 条讨论
—

欢迎评价研究价值与复现体验

从你的第一条分享开始

可以聊聊实际效果、安装经验,或者你想解决的一个小问题。