几何与纹理双分支
用两条独立的潜在代码分别控制形状和表面颜色,改动其中一条可以单独调整外观或轮廓,不必整体重新生成。
拖动滑块完成拼图,通过后发送验证码
独立第三方 AI 评测平台 · 只用实测数据
GET3D 是英伟达实验室推出的三维生成模型,目标是一次性产出带纹理的三维网格,而不是只给出点云或体素。它通过两个潜在代码分别驱动几何与纹理,几何分支学习有符号距离场,再用可微的网格提取方式把距离场转成显式表面,纹理分支在表面点上查询颜色。训练时借助二维图像上的对抗损失,因此不必依赖大量三维标注数据。适合做游戏资产、虚拟场景搭建和三维研究的人用它快速拿到可编辑的网格初稿。
GET3D 是英伟达实验室(NVIDIA Toronto AI Lab)发布的三维生成项目,定位是「图像驱动」的三维资产生产工具:输入是二维图片集合,输出是带纹理的三维网格。与只生成形状或只生成贴图的做法不同,它把几何和外观分开建模,但最终合成一个可以直接导出的网格文件。
它的做法是把几何和纹理拆成两条并行的生成路径。几何一侧生成有符号距离场,再通过网格提取模块把连续的距离场切成三角面片;纹理一侧在提取出的表面点上查询颜色,从而让贴图贴合到实际形状上,而不是套在一个固定模板上。训练信号来自二维图像上的对抗损失,这意味着它不需要逐模型的完整三维扫描数据。
实际使用中,研究者会用它批量产出某一类物体(例如椅子、汽车、鞋子)的三维候选,再挑出可用的做人工修整;做游戏或虚拟场景的团队把它当作概念阶段的速度工具,用生成结果替代从零建模的初稿;做三维生成方向的研究者则更关心它的双分支结构和可微网格提取思路,会基于官方代码做二次实验。
用两条独立的潜在代码分别控制形状和表面颜色,改动其中一条可以单独调整外观或轮廓,不必整体重新生成。
几何分支输出有符号距离场,再由可微的网格提取模块转成三角面片,得到的是可直接进建模软件的显式网格,而非体素或点云。
纹理场只在提取出的表面上取色,贴图会跟随实际形状贴合,避免固定模板贴图在形状变化后出现拉伸和错位。
训练信号来自二维图像上的对抗损失,不要求每个物体都配一套完整的三维扫描,降低了收集训练数据的门槛。
模型通常在单一类别上训练,能在该类别的形态范围内批量采样出多个不同的形状与纹理组合,适合先铺量再筛选。
当你要为某一类物体(椅子、汽车、鞋、动物等)快速铺出大量三维候选、再从中挑可用的做精修时,GET3D 很合适,它直接给带纹理的网格,省掉从点云转网格、再展开 UV 的一段工序。当你要生成任意类别、或需要高精度、拓扑干净、可直接进生产的模型时,它不合适:类别外生成效果会明显下降,输出网格的布线和面数也需要人工重做。另外它是研究性质的项目,需要自己配环境跑推理,不是打开网页就能用的产品。
概念阶段需要大量道具和场景物件的形状草稿,用它铺量再挑,比从零建模快;但输出要重拓扑后才能进正式资产库。
双潜在代码加可微网格提取的结构,适合作为复现和二次实验的基线,官方代码公开,能直接改损失和采样方式。
想给自己的应用加三维内容但不会建模,可以先用生成网格占位;要注意它是研究项目,需要自己配环境跑推理。
商品三维展示要求形状与实物一致、贴图还原真实材质,生成模型只能产出同类形状的变体,对不上具体商品。
输出的是带纹理的三维三角网格。它先生成有符号距离场,再把距离场提取成表面网格,然后在网格表面上查询颜色,所以拿到的是一个形状和贴图都有的模型,可以直接导入 Blender 这类软件查看和修改。
不能。这类模型一般是在某一个类别(比如椅子、汽车、鞋子)的数据上训练的,生成结果会落在这个类别的形态范围内。想要生成新类别,需要准备该类别的二维图片重新训练,先小规模验证能否收敛再决定投入。
概念和占位阶段可以,正式资产通常不行。生成的网格布线不规整、面数偏高,还可能存在自交或法线朝向问题,需要先检查再重拓扑,然后把贴图重新投影到干净的低模上,才能进正式流程。
差别在输入和定位。文生三维通常是给一句文字描述就出模型,上手门槛低;GET3D 是用图像训练、按类别采样,更偏向研究和批量产出形状变体。要快速拿到一个能看的模型,前者更直接;要为某一品类铺大量候选再筛选,GET3D 更合适。
它是公开的研究代码,需要自己配环境和显卡跑推理,不是打开网页就能用的在线服务。建议先用官方预训练类别验证环境能跑通,再去试自己的数据或改模型结构。
| 工具 | 编辑评分 | 价格 | 核心功能 | 平台 |
|---|---|---|---|---|
| GET3D (Nvidia)本工具 | 4.5 | 未标价 | 几何与纹理双分支;从距离场提网格;表面点纹理查询;二维图像训练 | — |
| TexGen | — | 未标价 | 3D 纹理生成技术,根据文本描述合成3D 纹理 | — |
| SF3D | — | 未标价 | 快速生成带纹理的3D 模型 | — |
| 腾讯混元3D | — | 未标价 | 腾讯混元3D 是由腾讯推出的一站式 AI 3D 内容创作平台,混元3D 通过创新的技术架构,可以 | Web |
| GET3D | Nvidia | — | 未标价 | 生成高质量的3D 纹理形状 | Web |
| TextTo3D | — | 未标价 | TextTo3D 可以瞬间将文本转换为2D 图像和3D 模型 | — |