生成式AI正在成为XR领域强大的标签团队合作伙伴。最近Microsoft注意到MR如何表示”眼睛和耳朵“的人工智能。

因此,XR和AI这两种新兴技术似乎共存,以全面提高最终用户的成果,而不是竞争。
How_NVIDIA_Using_Generative_AI.jpg

然而,虽然这两种技术之间的竞争可能并不像观众曾经想象的那么激烈。随着主流转向元宇宙,一些人转向 genAI——后者目前可能最受关注——但 Microsoft 等公司已经制定了到 2024 年开发工业元宇宙的路线图。

然而,genAI不仅适用于沉浸式产品供应商。GenAI在XR硬件和软件的开发人员方面已经非常普遍。

虚幻、Unity和Omniverse等RT3D开发引擎也利用genAI来优化开发工作流程,特别是对于崭露头角的XR内容创作者。

小型XR开发人才库是一个问题,因为新硬件很容易出现,从AR到VR,再到MR。让内容创建者设计为企业和消费者销售应用程序的系统至关重要。

否则,用户为什么要在没有可靠应用程序产品的情况下购买昂贵的XR耳机?GenAI可以简化XR内容的创建,并允许更多的人设计AR / VR / MR服务。

NVIDIA Omniverse 獲得核心 GenAI 升級
Rev Lebaredian,NVIDIA Omniverse 和仿真技术副总裁,陈述最新的 Omniverse 更新允许 XR 开发人员使用基于 GenAI 的工作流程。

genAI更新是NVIDIA在其服务上引入OpenUSD的一部分 - 一个可互操作的图形框架。

通过增加OpenUSD在Omniverse上的使用,NVIDIA可以增加genAI服务,包括Cesium,Convai,Move AI,SideFX Houdini和Wonder Dynamics,以协助工业数字化运营。

根据Lebaredian的说法,OpenUSD,GenAI就绪的工作流程增强了Omniverse开发人员工具,使企业能够“构建更大,更复杂的世界规模的模拟,作为其工业应用的数字测试场”。

此外,Lebaredian补充说:

工业企业正在竞相将其工作流程数字化,从而增加了对支持OpenUSD,连接,可互操作的3D软件生态系统的需求。

Omniverse更新还引入了USD Composer,允许RT3D开发人员使用OpenUSD框架设计大型场景。

此外,Omniverse正在获得Audio2Face,这是一个由genAI驱动的编程接口套件,允许XR开发人员从音频文件创建逼真的面部动画和手势。Audio2Face 功能还支持多语言支持和新的女性基本型号。

此外,该公司正在添加新的开发人员模板和资源,以降低使用新OpenUSD工具的门槛。这些模板还支持具有无代码考虑的更全面的开发人员。

OpenUSD集成不仅仅是向Omniverse引入新的genAI服务。皮克斯制作的图形格式将Omniverse产品开放给更广泛的行业用例,再次推动RT3D引擎成为开发定制解决方案的重要工具。

主要改进和升级
在genAI和OpenUSD集成中,有一系列更新,这些更新继续增加Omniverse上可用的机会。

NVIDIA 正在扩展其具有模块化应用程序构建功能的 Omniverse 套件扩展注册表,以改进制作自定义应用程序的过程,并额外访问 600 多个核心第一方扩展。

NVIDIA 还通过引入 Ada Lovelace 支持的渲染优化来提高 Omniverse 的效率和用户体验。还引入了支持“大规模工业场景的实时4K路径追踪”的AI降噪器等功能。

此外,NVIDIA正在整合XR开发人员工具,用于在Omniverse生态系统中设计空间环境。空间环境是指耳机用户周围的3D计算空间 - 正如Apple的Vision Pro所展示的那样。

更新阵容发布之际,NVIDIA 希望率先为开发人员和企业最终用户提供设计沉浸式应用程序的工具,为员工带来积极成果——以及面向消费者的用例。

NVIDIA 擴大對 XR 開發的支持
这一消息是在英伟达与英伟达合作之后发布的瓦尔霍8月,将光线追踪工具引入其Omniverse平台,为工业XR企业客户提供高质量的云渲染。

Marcus Olssen,Varjo软件合作伙伴关系总监,当时说:

图形和计算需求使得在高分辨率VR中无法进行光线追踪逼真的场景,直到现在。借助对 NVIDIA Omniverse 的支持,混合现实开发人员和用户将能够在 Varjo XR-3 中渲染逼真的场景,并在混合现实中解锁光线追踪。

在 2023 年 GPU 技术大会 (GTC) 上,英伟达推出了云XR 4.0平台用于跨基于云的框架扩展 XR 部署,并为开发应用程序提供额外的优化服务器和客户端灵活性。

通过升级,开发人员可以利用该平台在云、5G 移动计算边缘 (MEC) 以及企业和企业网络中使用。

文章来源: xrtoday
我看AR登载此文出于传递更多信息的目的,并不代表本站观点,如有侵权请联系删除