NVIDIA 的新 AI 模型可快速生成虚拟世界的对象和角色

NVIDIA 寻求通过新的人工智能模型简化虚拟 3D 世界的创建过程。 NVIDIA 表示,GET3D 可以生成角色、建筑物、车辆和其他类型的 3D 对象。该模型还应该能够快速创建形状。该公司指出,GET3D 可以使用单个 GPU 每秒生成大约 20 个对象。

研究人员使用从多个角度拍摄的 3D 形状的合成 2D 图像来训练模型。 NVIDIA 声称只用了两天时间就使用 A100 Tensor Core GPU 将大约 100 万帧输入 GET3D。

该模型可以创建具有“高保真纹理和复杂几何细节”的对象,NVIDIA 的 Isha Salian 在一篇博文中写道。 Salian 补充说,由 GET3D 制作的形状“是三角形网格的形式,就像一个纸浆模型,上面覆盖着一种纹理材料。”

用户应该能够将对象快速导入游戏引擎、3D 建模器和电影渲染器进行编辑,因为 GET3D 将以兼容的格式创建它们。这意味着开发人员可以更轻松地为游戏和虚拟世界创建密集的虚拟世界。 NVIDIA 将机器人技术和架构列为其他用例。

该公司表示,基于一组汽车成像数据,GET3D 能够生成轿车、卡车、赛车和货车。在接受动物图片训练后,它还可以生产狐狸、犀牛、马和熊。正如您所料,NVIDIA 指出,提供给 GET3D 的学习集越大、越多样化,“输出就越多样化和详细。”

在另一个 NVIDIA AI 工具 StyleGAN-NADA 的帮助下,可以通过文本提示将不同的样式应用于对象。您可以将烧焦的外观应用于汽车,将房屋模型转换为鬼屋,或者如演示该技术的视频所示,将虎纹应用于任何动物。

创建 GET3D 的 NVIDIA 研究团队认为,未来的版本可以在真实世界的图像而不是合成数据上进行训练。也可以一次在不同类型的 3D 形状上训练模型,而不必在任何给定时间专注于一类对象。

Engadget 推荐的所有产品均由我们的编辑团队选择,独立于我们的母公司。我们的一些故事包括附属链接。如果您通过这些链接之一购买商品,我们可能会获得会员佣金。所有价格在发布时都是正确的。

NVIDIA 的新 AI 模型可快速生成虚拟世界的对象和角色

NVIDIA 寻求通过新的人工智能模型简化虚拟 3D 世界的创建过程。 NVIDIA 表示,GET3D 可以生成角色、建筑物、车辆和其他类型的 3D 对象。该模型还应该能够快速创建形状。该公司指出,GET3D 可以使用单个 GPU 每秒生成大约 20 个对象。

研究人员使用从多个角度拍摄的 3D 形状的合成 2D 图像来训练模型。 NVIDIA 声称只用了两天时间就使用 A100 Tensor Core GPU 将大约 100 万帧输入 GET3D。

该模型可以创建具有“高保真纹理和复杂几何细节”的对象,NVIDIA 的 Isha Salian 在一篇博文中写道。 Salian 补充说,由 GET3D 制作的形状“是三角形网格的形式,就像一个纸浆模型,上面覆盖着一种纹理材料。”

用户应该能够将对象快速导入游戏引擎、3D 建模器和电影渲染器进行编辑,因为 GET3D 将以兼容的格式创建它们。这意味着开发人员可以更轻松地为游戏和虚拟世界创建密集的虚拟世界。 NVIDIA 将机器人技术和架构列为其他用例。

该公司表示,基于一组汽车成像数据,GET3D 能够生成轿车、卡车、赛车和货车。在接受动物图片训练后,它还可以生产狐狸、犀牛、马和熊。正如您所料,NVIDIA 指出,提供给 GET3D 的学习集越大、越多样化,“输出就越多样化和详细。”

在另一个 NVIDIA AI 工具 StyleGAN-NADA 的帮助下,可以通过文本提示将不同的样式应用于对象。您可以将烧焦的外观应用于汽车,将房屋模型转换为鬼屋,或者如演示该技术的视频所示,将虎纹应用于任何动物。

创建 GET3D 的 NVIDIA 研究团队认为,未来的版本可以在真实世界的图像而不是合成数据上进行训练。也可以一次在不同类型的 3D 形状上训练模型,而不必在任何给定时间专注于一类对象。

Engadget 推荐的所有产品均由我们的编辑团队选择,独立于我们的母公司。我们的一些故事包括附属链接。如果您通过这些链接之一购买商品,我们可能会获得会员佣金。所有价格在发布时都是正确的。

What's Your Reaction?

like

dislike

love

funny

angry

sad

wow