NVIDIA宣布OpenUSD语言、几何、物理和材料的生成AI模型和NIM微服务

新服务加速了基于通用场景描述的工作流和工业数字孪生和机器人技术的发展

nvidia于7月29日宣布了通用场景描述(或OpenUSD)的重大进展，这将扩大通用3D的采用将数据交换框架应用于机器人、工业设计和工程，并加速开发人员为人工智能的下一次发展构建高度精确的虚拟世界的能力。

通过新的基于openusd的生成式AI和nvidia加速开发基于NVIDIA Omniverse™平台构建的框架，更多的行业现在可以开发用于可视化工业设计和工程项目的应用程序，以及用于模拟环境的应用程序，以构建下一波物理AI和机器人。

新的产品包括NVIDIA NIM™用于AI模型的微服务，可以生成OpenUSD语言来回答用户查询，生成OpenUSD Python代码，并应用材料到3D对象，并了解3D空间和物理，以帮助加速数字孪生的发展。此外，与机器人和工业模拟数据格式和开发人员工具相连接的新USD连接器允许用户将大量，完全NVIDIA RTX™光线跟踪数据集流式传输到Apple Vision Pro。

英伟达负责全宇宙和仿真技术的副总裁Rev Lebaredian表示:“重工业的生成式人工智能热潮已经到来。“直到最近，数字世界一直是主要用于创意产业;现在，随着NVIDIA NIM微服为OpenUSD带来的增强功能和可访问性，各种行业都可以进行物理构建基于虚拟世界和数字孪生来推动创新，同时为下一波ai机器人技术做准备。”

生成式人工智能与NVIDIA NIM一起进入USD

由NVIDIA开发的全球首个用于OpenUSD开发的生成式人工智能模型将作为NVIDIA NIM微服务提供。这些模型使开发人员能够合并生成AI副驾驶和代理到USD工作流程中，扩大了3D的可能性并帮助加速USD在制造业、汽车和机器人等一系列新的工业部门的采用。

预览版中提供的微服务包括:

• USD Code NIM微服务-回答OpenUSD的一般知识问题并根据文本提示自动生OpenUSD- python代码，然后可以输入到OpenUSD查看应用程序中，例如来自皮克斯的usdview，或基于NVIDIA Omniverse kit的应用程序，以可视化相应的3D数据。
• USD Search NIM微服务-允许开发人员使用自然语言或图像输入搜索大量的OpenUSD, 3D和图像数据库。
• USD Validate NIM微服务-检查上传文件与OpenUSD发布版本的兼容性，并生成完整的rtx渲染;路径跟踪图像，由NVIDIA Omniverse云api或应用程序编程接口提供支持。

即将发布的微服务包括:

• USD Layout NIM微服务-使用户能够基于空间智能从一系列文本提示中组装基于openusd的场景。
• USD智能材料NIM微服务-预测并应用现实材料到计算机辅助设计对象。
• fVDB Mesh Generation NIM微服务——从点云数据生成基于openusd的网格，由Omniverse Cloud api渲染。
• fVDB Physics super -res NIM微服务-在帧或帧序列上执行AI超分辨率，以生成基于openusd的高分辨率物理模拟。
• fVDB NeRF-XL NIM微服务-使用Omniverse云api在OpenUSD中生成大规模神经辐射场。

富士康是全球制造业的领导者，在全球拥有170多家工厂，它已经受益于NVIDIA的计算平台，使用NIM微服务和Omniverse创建了一个正在开发的工厂的数字双胞胎。

​“数字双胞胎将帮助我们加速下一波工业制造和自主机器的发展，”代首席数字工程师兼Smart平台负责人施哲表示。“NVIDIA Omniverse和新的NIM微服务将使开发数字双胞胎的能力民主化，并帮助我们的团队比以往更快地建立基于物理的虚拟工厂。”

​WPP是一家全球领先的营销和传播服务公司

采用了USD Search和USD Code NIM微服务，并在其内部实现基于NVIDIA Omniverse的生成式ai内容创作管道，面向可口可乐公司等客户。

​“创新的美妙之处在于它与我们的工作方式是多么的兼容，而且它是如此的完美利用开放标准——不仅加速未来的工作，而且允许我们继续构建和扩展我们之前在标准上的所有投资的有用性“，WPP首席技术总监Stephan Pretourius表示。“使用NVIDIA NIM NVIDIA Omniverse的微服务使我们能够以前所未有的速度与可口可乐公司等公司一起推出创新的新生产工具。”

USD连接器为更多行业带来生成式人工智能

一系列用于机器人数据格式和流媒体到Apple Vision Pro的新的USD连接器打开了OpenUSD互操作性和高级创作的门户行业。

NVIDIA和工业自动化和软件领域的全球领导者西门子正在扩大合作，以使用OpenUSD促进更多的工业工作负载。西门子将OpenUSD管道与Simcenter模拟技术组合集成，以支持关键利益相关者之间的循证决策和协作。这种集成实现了复杂仿真数据的高保真、实时、逼真的可视化，提供了对产品性能的更深入的了解真实的操作环境。这项工作将建立在西门子的努力将Omniverse纳入其Teamcenter产品生命周期管理组合的基础上。

NVIDIA还发布了一个从统一机器人描述格式到OpenUSD的连接器，让机器人专家可以跨应用程序无缝地传输他们的机器人数据，包括设计，模拟和强化学习。

为了进一步推进OpenUSD生态系统的扩展，NVIDIA宣布了OpenUSD Exchange软件开发工具包，使开发人员能够构建自己的健壮的OpenUSD数据连接器。

新的开发人员工具和api，通过NVIDIA图形交付将大规模OpenUSD场景从Omniverse平台上构建的应用程序流式传输到Apple Vision Pro网络， 目前可以进行一些早期方问。

​皮克斯首席技术总监兼OpenUSD联盟(AOUSD)主席史蒂夫·梅(Steve May)表示:“OpenUSD正在彻底改变我们创建3D内容并与之互动的方式。现在，有了NVIDIA为OpenUSD构建的这些新服务和api，我们期待看到加速USD的增长和采用，为新用户和行业更容易融入我们的生态系统铺平了道路。”

OpenUSD生态系统动力

去年，英伟达与皮克斯、Adobe、苹果和欧特克共同创立了AOUSD。

通过AOUSD, NVIDIA和其他合作者宣布了一个新的OpenUSD版本，OpenUSD核心规范的进展和新成员。

可用性

USD搜索、USD代码和USD验证NIM微服务可在NVIDIA API目录中预览。OpenUSD到URDF连接器现在可以与NVIDIA一起使用NVIDIA Isaac Sim™.。​开发人员可以开始使用新的Omniverse开发人员工具将生成式AI集成到OpenUSD工作流中，并使用OpenUSD构建支持生成式AI的合成数据管道的参考工作流。

通过收听英伟达创始人兼首席执行官黄仁勋在SIGGRAPH会议上的炉边谈话，了解有关生成式人工智能和加速计算的更多最新信息

计算机图形学会议将于8月1日在丹佛举行。