易坊好文馆

  1. 首页 > 玩科技 >

数据|黄仁勋GTC演讲速递：元宇宙构建工具本质上是“数字虫洞”

英伟达 速递 数据 模拟 工具 宇宙 语音 本质 演讲 合成 Nvidia 黄仁勋 黄仁 Riva

“你会看到一个永恒的主题——Omniverse如何被用来模拟仓库、工厂、物理和生物系统、5G边缘、机器人、自动驾驶汽车 ， 甚至化身数字孪生 ， ”11月9日 ， 英伟达CEO黄仁勋GTC大会上表示 。
用于探索“元宇宙”的Omniverse是英伟达开发的实时仿真和协作平台 ， “Omniverse与游戏引擎大不相同 ， 其是面向数据中心规模设计的 ， 有朝一日有望能达到全球数据规模 。 Omniverse的门户是USD（Universal Scene Deion ， 通用场景描述） ， 本质上是一个数字虫洞 。 将人和计算机连接到Omniverse ， 并将一个Omniverse世界连接到另一个世界 ， USD之于Omniverse就像HTML（网页）之于网站 ， ”黄仁勋表示 。
此前 ， 据英伟达介绍Omniverse的运作分为三个大的部分 。
第一部分 ， 数据库引擎Omniverse Nucleus ， 用户可在此连接并进行 3D 资产和场景描述的交换 ， 需要进行建模、布局、阴影、动画、照明、特效或渲染的设计师可以一起协作创建场景 。
第二则是合成、渲染和动画引擎——虚拟世界的模拟 ， 比如英伟达的图形技术可以实时模拟每条光线如何在虚拟世界中反射 。
第三部分是NVIDIA CloudXR ， 它包括客户端和服务器软件 ， 可用于将扩展现实内容从 OpenVR 应用程序传输到 Android和 Windows设备 ， 允许用户进出Omniverse 。
黄仁勋在GTC大会的主题演讲中最新介绍了Omniverse Replicator和Omniverse Avatar 。
Omniverse Replicator是一种合成数据生成引擎 ， 目的是帮助构建更好的数字孪生体 。 一个值得注意的用例是Nvidia Isaac Sim， “使用 Isaac 进行数据复制可以在充满合成数据的世界中测试机器人的虚拟实例 ， ”英伟达嵌入式与边缘计算副总裁兼总经理 Deepu Talla说 ， “在物理领域训练机器人真的很难 。 在模拟中这样做更便宜、更安全、更快 。 ”此外 ， 他补充道 ， 由于数据是合成的 ， 那么可以跳过训练机器学习模型的“标注”步骤 ， 因为系统已经知道在虚拟世界里的对应对象应该是什么 。
这也可以应用到自动驾驶中 ， “我们利用 Omniverse 进行车辆训练和测试的模拟 ， 以确保它们的安全 ， ”Nvidia 汽车副总裁 Danny Shapiro表示 ， “使用合成数据在模拟道路条件下测试自动驾驶软件可以节省时间和金钱 ， 简化标记环境中物体等问题 ， 并最终与车辆在现实条件下的行为相协调 。 ”
Omniverse Avatar用于创建可与人类交互的AI化身 。 黄仁勋在主题演讲中展示了按照他的声音和形象制作的“Toy-Me” ， 一个可以理解人类提出的复杂问题并做出回应的语音交互AI 。

数据|黄仁勋GTC演讲速递：元宇宙构建工具本质上是“数字虫洞”
文章图片

这项技术集合了英伟达在语音AI、计算机视觉、自然语言理解、推荐引擎和模拟技术方面的技术 。 上图的模拟“黄仁勋”是一个具有光线追踪3D图形的交互式角色 ， 他可以和人类谈论广泛的主题 ， 并理解人类说话者的意图 ， 黄仁勋的虚拟动画形象“Jensen”就很好回答了“气候变化带来的最大威胁是什么”、“天文学家如何寻找系外行星”等问题 。

推荐阅读


上一篇：Cortex-A|英伟达推出全新 Jetson AGX Orin 机器人计算机

下一篇：Monarch|多款创新医疗器械首秀 硬核产品争相登场