微软新3D建模大模型 Trellis.2 实测

微软刚刚发布了新模型 trellis 2, 4B 这是一个通过图片就能创建3D模型的大模型, 它使用了一个叫"基于稀疏体素的 3D VAE 流匹配变换器"的新方法,

从官网看效果很惊艳, 但是打开它的demo, 就能发现一些问题, 模型有孔洞, 可以看这个官方demo, 雕像细节处有很多镂空的部分. 我连续测试了几张图片均能复现这个问题.

我的猜测是可能跟这个模型支持透明度有关, 官方介绍说"TRELLIS 能够重建并生成具有复杂拓扑结构、锐利特征和完整物理基础渲染（PBR）材质的任意 3D 资产——包括透明度和半透明效果。"

但这个透明度如果控制不好, 就变成模型孔洞了. 另外幻觉问题也不容忽视.

总结, 这个模型用于粗略建模是可以的, 我实际运行中他的速度很快, 毕竟模型只有4B, 基本可以做到3分钟一个模型(H100). 但是细节是需要手动修正的, 尤其是提到的孔洞和幻觉问题, 很难直接用于3D打印.

#ai生活指南##ai创造营# http://t.cn/AXUYVkEm