NVIDIA 发布支持生成式 AI 与 OpenUSD 的重大 Omniverse 升级

最新平台更新、Adobe Firefly的接入、OpenUSD向RealityKit的导入以及Ada架构系统将共同加速各种具有互操作性的3D工作流以及工业数字化进程

洛杉矶— SIGGRAPH —太平洋时间2023年8月8日—NVIDIA于今日发布NVIDIA Omniverse™平台的重要版本更新，为开发者和工业企业提供全新的基础应用和服务，助力其使用OpenUSD框架和生成式AI来优化并强化其3D工作流程。

Omniverse是一个OpenUSD原生软件平台，可进行跨3D工具和应用的连接、描述及模拟。此次更新将加快虚拟世界和高级工作流的创建速度，推动工业数字化进程。Cesium、Convai、Move AI、SideFX Houdini和Wonder Dynamics现已通过OpenUSD接入Omniverse。

此次平台更新主要升级了Omniverse Kit（用于开发原生OpenUSD应用和扩展程序的引擎），以及NVIDIA Omniverse Audio2Face™基础应用和空间计算功能。

NVIDIA Omniverse与模拟技术副总裁Rev Lebaredian表示：“工业企业正在竞相推动工作流的数字化，这提升了对OpenUSD赋能、互联、可互操作的3D软件生态的需求。最新的Omniverse更新让开发者能够通过OpenUSD，利用生成式AI来强化自身工具，并让企业能够构建更大、更复杂的世界级模拟，以此作为其工业应用的数字测试场。”

重要改进

Omniverse Kit的更新包括：

●       全新模块化应用构建：全新Omniverse Kit Extension Registry是一个用于访问、共享和管理Omniverse扩展程序的中央存储库，开发者可以轻松启用或关闭其应用中的功能，因此能够比以往更加轻松地利用NVIDIA提供的600多个核心Omniverse扩展程序来构建自定义应用。

●       全新开发者模板和资源：全新应用和体验模板让刚开始使用OpenUSD和Omniverse的开发者只需要进行极少量的编码工作就能轻松上手。

●       提升效率和用户体验：全新渲染优化功能充分利用NVIDIA RTX™ GPU中NVIDIA Ada Lovelace架构的各项改进，并将DLSS 3技术完全集成到Omniverse RTX渲染器中。全新AI降噪器可实现大型工业场景的实时4K路径追踪。

●       由原生RTX驱动的空间集成：全新扩展现实（XR）开发者工具可让用户在基于Omniverse的应用中构建原生空间计算选项，使用户能够按照自己的想法灵活地体验3D项目和虚拟世界。

这些平台更新在Omniverse基础应用中得到了展现。Omniverse基础应用是完全可定制的参考应用，创作者、企业和开发者可以对其进行复制、扩展或改进。升级的应用包括：

●       Omniverse USD Composer：让3D用户能够组装基于OpenUSD的大型场景

●       Omniverse Audio2Face：提供对只需通过音频文件即可创建逼真面部动画和手势的生成式AI应用编程接口的访问。现在还添加了多语种支持和全新女性基础模型。

OpenUSD扩展Omniverse生态

NVIDIA还发布了一系列面向开发者和企业的框架、资源和服务，以此加速通用场景描述（即OpenUSD）的采用。

此外，NVIDIA还宣布构建了全新的Omniverse Cloud API，供开发人员更无缝地实现和部署OpenUSD工作流和应用程序。例如，ChatUSD是一个供开发人员使用的大型语言模型（LLM) copilot工具，可以回答USD知识问题或生成Python-USD代码脚本。

OpenUSD支持的全新Omniverse连接器现已推出，为工业企业打破复杂生产流水线中的数据孤岛带来了更多的可能性。

Adobe与NVIDIA宣布计划将Adobe Firefly（Adobe的创意生成式AI模型系列）作为Omniverse的API提供给开发者和创作者，助力其完善设计流程。此举扩大了双方在Adobe Substance 3D、生成式AI和OpenUSD项目方面的合作。

Wonder Dynamics已接入Omniverse，通过其AI平台Wonder Studio提供全新OpenUSD导出支持。Wonder Studio AI平台可自动对计算机生成的角色进行动画化、添加照明并合成到实时动作场景中。全新OpenUSD导出支持将使艺术家只需要使用单个摄像机拍摄的视频，就能生成并导出完整的3D场景。

Luma AI以USDZ格式制作的现实捕捉模型可以随时导入到Omniverse中。虚拟形象公司Convai和角色引擎公司Inworld AI的工具也接入了Omniverse。借助Convai等AI工具，创作者可以在数字孪生环境中添加角色，这些角色可以提供环境和物体的相关信息，也可以充当导游或虚拟机器人。Move AI通过Move One应用实现了单摄像头动作捕捉，捕捉的图像可用于生成3D角色动画，然后将其导出到OpenUSD并在Omniverse中使用。

Omniverse用户现在可以构建与其他基于OpenUSD的空间计算平台（如ARKit和RealityKit）兼容的内容、体验和应用。此外，对Khronos GroupOpenXR开放标准的全新支持将Omniverse的应用范围扩展到了HTC VIVE、Magic Leap和Varjo等制造商生产的更多头显。

SideFX Houdini的用户现在还可以将Houdini Digital Assets直接加载到Omniverse视窗中，使基于Houdini的互联工作流衔接得更加无缝。Cesium的Omniverse扩展程序Cesium for Omniverse支持3D Tiles。3D Tiles是一种在虚拟世界（包括OpenUSD支持的虚拟世界）中传输大规模地理空间数据集的开放标准。CGI.Backgrounds现在可在USD Composer中使用多种超高清HDRi贴图。Cadence DataCenter Design Software™现可在Omniverse上使用，其可帮助用户在完整的数字孪生情境中查看计算流体动力学模拟。借助Cadence数据中心扩展程序，用户可以在实施前规划、测试并验证设计和运营方面的考虑因素。Blackshark.AI世界数字孪生平台现已接入Omniverse。

客户使用Omniverse实现数字化

多家客户正在使用Omniverse来完成从模拟机器人到训练AI模型和改进动画等各种任务。

波士顿动力人工智能研究所（Boston Dynamics AI Institute）正在使用Omniverse模拟机器人及其交互，以推动新型机器人和控制系统的设计工作。汽车和自主系统产业化领域的领先企业大陆集团正在其移动机器人业务中使用Omniverse，以大规模地生成符合物理学的合成数据，用以训练计算机视觉AI模型和执行系统集成测试。

沃尔沃汽车已将其数字孪生转为OpenUSD格式，使用Omniverse创造出沉浸式可视化效果，帮助客户在线做出购买决策。

品牌设计及体验机构Marks Design正在使用Omniverse和OpenUSD来简化并提高协作的效率，同时改进其动画、可视化和渲染工作流。

全新Omniverse系统与合作伙伴

NVIDIA正在与全球各地的系统制造商协作，致力于为数百万设计师、建筑师和工程师提供针对Omniverse优化配置的RTX工作站。这些新系统最多可搭载四颗NVIDIA RTX 6000 Ada Generation GPU并搭配NVIDIA Omniverse Enterprise软件，可加速OpenUSD世界的构建、生成式AI赋能的协同设计以及其他工业数字化应用。

Omniverse用户还可以充分利用全新NVIDIA L40S GPU的性能。这款功能强大的通用数据中心GPU可加速图形密集型工作负载。

供应情况

最新Omniverse版本现已发布可免费下载的公测版，将于近期通过Omniverse Enterprise提供。