文章结构一览：
虚拟世界与3D建模技术
3D建模技术在影视和游戏领域的重要作用不言而喻，那么在新兴的元宇宙领域中又是怎样的存在呢?
电影CG模型赤发鬼（上）学员生物作品（下）
元宇宙作为近年来科技和资本圈的大热话题，简单来说就是现实世界的虚拟化投影，是3D生态化的互联网。在人们的畅想里，我们能在元宇宙的虚拟世界中实现身份的建立、货币交易、娱乐生活、事业发展等各种超现实的体验。
近年来虚拟游戏、XR技术、虚拟人的发展可以窥见各大科技龙头企业进军元宇宙的野心。
百度元宇宙产品希壤（左）《头号玩家》VR虚拟世界（右）
爆火虚拟偶像Ayayi（左）与虚拟偶像女团A-soul（右）
但这都只是冰山一角，要实现真正的元宇宙需要在6大技术领域实现突破，即业内所称的（大蚂蚁）：
B：区块链；I：交互技术；G：电子游戏技术；A：人工智能技术；N：网络及运算技术；T：物联网技术。
3D建模是元宇宙一大技术基础
其中3D建模技术可谓是最基本且最刚需的。如我们已经熟悉的影视、游戏行业一般，它需要同样甚至更大量的虚拟场景搭建、虚拟物品设计、虚拟人物建模工作，这些都需要3D建模师的参与。
招聘网站元宇宙建模师需求
而随着各大行业领头公司纷纷抢占赛道，转向对大型3D虚拟世界进行建模，对内容创建工具的需求也变得越来越旺盛。这些工作不仅要求画面的丰富度与拟真性，还需要在短时间内创建大量不同造型的3D资产。
以往的工具生成的3D模型要么缺乏几何细节，要么在它们可以产生的网格拓扑中受到限制，通常不支持纹理，且在合成过程中使用特定渲染器，这使得它们在普通3D软件中的使用变得不尽人意。
而近日，在官网宣布了其称之为「世界级」的研究：GET3D。似乎成为解决这一系列问题的关键突破点。
来自NVDIA的AI研究人员介绍了GET3D，这是一种新的生成模型。GET3D通过一系列2D图像训练后，可生成具有高保真纹理和复杂几何细节的 3D 形状。
AI能够生成各种各样的资产，包括汽车、椅子、动物、摩托车、人类角色和建筑物。
论文地址：
研究团队仅用2天时间，就使用A100 GPU在大约100万张图像上训练了模型。
这些 3D 对象以主流图形软件所使用的相同格式创建，允许用户快速将其形状导入3D渲染器和游戏引擎以进行进一步编辑。
生成的对象可用于建筑物、室外空间或整个城市的 3D资产，是游戏、机器人、建筑和社交媒体等行业一大利器。
形状、材质自定义等具体的功能介绍
GET3D得名于其能够生成显式纹理3D网格的能力（ 3D ）。这意味着它创建的形状是三角形网格的形式，就像纸模型一样，上面覆盖着纹理材质。
多样且高质量的3D资源
它强调了带有纹理的3D资产的多样性和质量。包括：1.椅子腿上的各种轮子；2.汽车的车轮，灯和车窗；3.动物的耳朵、角；4.摩托车的后视镜，车轮胎上的纹理；5.高跟鞋；6.人类衣服…
实现几何体和纹理的分离
如图，在每一行中展示了由相同的几何隐藏代码生成的形状，同时更改了纹理代码。在每一列中，则显示了由相同的纹理隐藏代码生成的形状，同时更改了几何代码。模型实现了集合体和纹理之间的良好分离。
另外，研究人员在每一行中相同的纹理隐藏代码生成形状，从左到右插入几何隐藏代码。
并由相同的几何隐藏代码生成形状，同时从上到下插入纹理代码。结果显示，每个插值对生成模型都是有意义的。
不同类别形状之间实现平滑过渡
如图，在每一行中展示了由相同的几何隐藏代码生成的形状，同时更改了纹理代码。在每一列中，则显示了由相同的纹理隐藏代码生成的形状，同时更改了几和代码。
生成新颖的形状
在每一行中，通过添加一个小噪声来局部扰乱隐藏代码。通过这种方式，GET3D能够在局部生成外观相似但略有差异的形状。
无监督方式生成材料
结合DIBR ++，GET3D能够以完全无监督的方式生成材质并产生有逼真的视图相关照明效果。
AI文本引导形状生成
通过使用英伟达的另一个AI工具-NADA，开发人员可以使用文本提示为图像添加特定的风格。比如，可以将渲染后的汽车变成一辆烧毁的汽车或出租车（上图）。
或是将一个普通的方子改造成砖房、着火的房子，甚至是鬼屋（上图）。或者将老虎纹、熊猫纹、还有《辛普森一家》的特色应用在任何动物身上（下图）。
研究人员指出，GET3D的未来版本可以使用相机姿势估计技术，允许开发人员在真实世界数据而不是合成数据集上训练模型。它还可以让开发人员一次在各种3D形状上训练GET3D，而不需要一次在一个对象类别上进行训练。
GET3D让我们离AI驱动的
大众化的3D虚拟世界又近了一步
它的下一步发展会改变元宇宙的游戏规则吗？
让我们拭目以待！
相关文章
