NVIDIA 如何使用生成式 AI？-VRcoast带你玩转VR,国内VR虚拟现实新闻门户网站,为您提供VR虚拟现实等新闻咨询。

Generative AI 正在成为 XR 领域强大的团队合作伙伴。最近，微软指出 MR 代表了人工智能的“眼睛和耳朵”。

因此，XR 和人工智能这两种新兴技术似乎共存，以全面提升最终用户的成果，而不是相互竞争。

然而，虽然这两种技术之间的竞争可能并不像观众想象的那么激烈。随着主流从元宇宙转向 genAI（后者可能是目前最受关注的），但微软等公司已经制定了到 2024 年开发工业元宇宙的路线图。

然而，genAI不仅仅适用于沉浸式产品供应商。GenAI 在 XR 硬件和软件的开发人员方面已经非常普遍。

Unreal、Unity 和 Omniverse 等 RT3D 开发引擎也利用 genAI 来优化开发工作流程，特别是对于崭露头角的 XR 内容创作者而言。

随着从 AR 到 VR，再到 MR 等新硬件的出现，XR 开发人才库规模较小是一个问题。让内容创建者为企业和消费者设计销售应用程序的系统至关重要。

否则，用户为什么要购买昂贵的 XR 头显而不提供可靠的应用程序呢？GenAI 可以简化 XR 内容创建，让更多人能够设计 AR/VR/MR 服务。

NVIDIA Omniverse 和模拟技术副总裁 Rev Lebaredian表示，最新的 Omniverse 更新使 XR 开发人员能够实现基于 genAI 的工作流程。

genAI 更新是 NVIDIA 在其服务上引入 OpenUSD（一种可互操作的图形框架）的一部分。

通过增加 OpenUSD 在 Omniverse 上的使用，NVIDIA 可以添加 genAI 服务，包括 Cesium、Convai、Move AI、SideFX Houdini 和 Wonder Dynamics，以协助工业数字化运营。

Lebaredian 表示，OpenUSD、GenAI 就绪工作流程增强了 Omniverse 开发人员工具，使企业能够“构建更大、更复杂的世界规模模拟，作为其工业应用的数字测试场”。

此外，Lebaredian 补充道：

工业企业正在竞相实现工作流程数字化，从而增加了对支持 OpenUSD 的互联、可互操作 3D 软件生态系统的需求。

Omniverse 更新还引入了 USD Composer，允许 RT3D 开发人员使用 OpenUSD 框架设计大型场景。

此外，Omniverse 还获得了 Audio2Face，这是一款由 genAI 驱动的编程接口套件，允许 XR 开发人员从音频文件创建逼真的面部动画和手势。Audio2Face 功能还支持多语言支持和新的女性基础模型。

此外，Omniverse正在添加新的开发人员模板和资源，以降低使用新 OpenUSD 工具的门槛。这些模板还支持更全面的开发人员，无需考虑任何代码。

OpenUSD 集成不仅仅是向 Omniverse 引入新的 genAI 服务。Pixar 制作的图形格式使 Omniverse 产品面向更广泛的行业用例，再次推动 RT3D 引擎成为开发定制解决方案的重要工具。

genAI 和 OpenUSD 集成带来了一系列更新，继续增加 Omniverse 上的可用机会。

NVIDIA 正在通过模块化应用程序构建功能扩展其 Omniverse Kit 扩展注册表，以改进自定义应用程序的制作流程，并提供对 600 多个核心第一方扩展的额外访问权限。

NVIDIA 还通过引入 Ada Lovelace 支持的渲染优化来提高 Omniverse 的效率和用户体验。还推出了人工智能降噪器等功能，支持“海量工业场景实时4K路径追踪”。

此外，NVIDIA 正在集成 XR 开发人员工具，用于在 Omniverse 生态系统中设计空间环境。空间环境是指头显用户周围的 3D 计算空间 – 正如 Apple Vision Pro 所展示的那样。

NVIDIA 希望在为开发者和企业最终用户提供设计沉浸式应用程序的工具方面处于领先地位，从而为员工带来积极的成果，以及面向消费者的用例。

此前，NVIDIA 于 8 月份与Varjo合作，将光线追踪工具引入其 Omniverse 平台，为工业 XR 企业客户提供云端高质量渲染。

Varjo 软件合作伙伴总监 Marcus Olssen当时表示：

图形和计算需求使得迄今为止在高分辨率 VR 中无法实现光线追踪逼真的场景。借助对 NVIDIA Omniverse 的支持，混合现实开发人员和用户将能够在 Varjo XR-3 中渲染逼真的场景并解锁混合现实中的光线追踪。

在 2023 年 GPU 技术大会 (GTC) 上，NVIDIA 推出了CloudXR 4.0 平台，用于跨基于云的框架扩展 XR 部署，并为开发应用程序提供额外的、优化的服务器和客户端灵活性。

通过升级，开发人员可以利用该平台在云、5G 移动计算边缘 (MEC) 以及公司和企业网络中使用。

NVIDIA 如何使用生成式 AI？