NVIDIA宣布OpenUSD語言、幾何、物理和材料的生成AI模型和NIM微服務

新服務加速了基於通用場景描述的工作流和工業數字孿生和機器人技術的發展

nvidia於7月29日宣布了通用場景描述(或OpenUSD)的重大進展，這將擴大通用3D的采用將數據交換框架應用於機器人、工業設計和工程，並加速開發人員為人工智能的下壹次發展構建高度精確的虛擬世界的能力。

通過新的基於openusd的生成式AI和nvidia加速開發基於NVIDIA Omniverse™平臺構建的框架，更多的行業現在可以開發用於可視化工業設計和工程項目的應用程序，以及用於模擬環境的應用程序，以構建下壹波物理AI和機器人。

新的產品包括NVIDIA NIM™用於AI模型的微服務，可以生成OpenUSD語言來回答用戶查詢，生成OpenUSD Python代碼，並應用材料到3D對象，並了解3D空間和物理，以幫助加速數字孿生的發展。此外，與機器人和工業模擬數據格式和開發人員工具相連接的新USD連接器允許用戶將大量，完全NVIDIA RTX™光線跟蹤數據集流式傳輸到Apple Vision Pro。

英偉達負責全宇宙和仿真技術的副總裁Rev Lebaredian表示:“重工業的生成式人工智能熱潮已經到來。“直到最近，數字世界壹直是主要用於創意產業;現在，隨著NVIDIA NIM微服為OpenUSD帶來的增強功能和可訪問性，各種行業都可以進行物理構建基於虛擬世界和數字孿生來推動創新，同時為下壹波ai機器人技術做準備。”

生成式人工智能與NVIDIA NIM壹起進入USD

由NVIDIA開發的全球首個用於OpenUSD開發的生成式人工智能模型將作為NVIDIA NIM微服務提供。這些模型使開發人員能夠合並生成AI副駕駛和代理到USD工作流程中，擴大了3D的可能性並幫助加速USD在制造業、汽車和機器人等壹系列新的工業部門的采用。

預覽版中提供的微服務包括:

• lUSD Code NIM微服務-回答OpenUSD的壹般知識問題並根據文本提示自動生OpenUSD- python代碼，然後可以輸入到OpenUSD查看應用程序中，例如來自皮克斯的usdview，或基於NVIDIA Omniverse kit的應用程序，以可視化相應的3D數據。
• USD Search NIM微服務-允許開發人員使用自然語言或圖像輸入搜索大量的OpenUSD, 3D和圖像數據庫。
• USD Validate NIM微服務-檢查上傳文件與OpenUSD發布版本的兼容性，並生成完整的rtx渲染;路徑跟蹤圖像，由NVIDIA Omniverse雲api或應用程序編程接口提供支持。

即將發布的微服務包括:

• USD Layout NIM微服務-使用戶能夠基於空間智能從壹系列文本提示中組裝基於openusd的場景。
• USD智能材料NIM微服務-預測並應用現實材料到計算機輔助設計對象。
• fVDB Mesh Generation NIM微服務——從點雲數據生成基於openusd的網格，由Omniverse Cloudapi渲染。
• fVDB Physics super -res NIM微服務-在幀或幀序列上執行AI超分辨率，以生成基於openusd的高分辨率物理模擬。
• fVDB NeRF-XL NIM微服務-使用Omniverse雲api在OpenUSD中生成大規模神經輻射場。

富士康是全球制造業的領導者，在全球擁有170多家工廠，它已經受益於NVIDIA的計算平臺，使用NIM微服務和Omniverse創建了壹個正在開發的工廠的數字雙胞胎。

​“數字雙胞胎將幫助我們加速下壹波工業制造和自主機器的發展，”代首席數字工程師兼Smart平臺負責人施哲表示。“NVIDIA Omniverse和新的NIM微服務將使開發數字雙胞胎的能力民主化，並幫助我們的團隊比以往更快地建立基於物理的虛擬工廠。”

​WPP是壹家全球領先的營銷和傳播服務公司

采用了USD Search和USD Code NIM微服務，並在其內部實現基於NVIDIA Omniverse的生成式ai內容創作管道，面向可口可樂公司等客戶。

​“創新的美妙之處在於它與我們的工作方式是多麽的兼容，而且它是如此的完美利用開放標準——不僅加速未來的工作，而且允許我們繼續構建和擴展我們之前在標準上的所有投資的有用性“，WPP首席技術總監Stephan Pretourius表示。“使用NVIDIA NIM NVIDIA Omniverse的微服務使我們能夠以前所未有的速度與可口可樂公司等公司壹起推出創新的新生產工具。”

USD連接器為更多行業帶來生成式人工智能

壹系列用於機器人數據格式和流媒體到Apple Vision Pro的新的USD連接器打開了OpenUSD互操作性和高級創作的門戶行業。

NVIDIA和工業自動化和軟件領域的全球領導者西門子正在擴大合作，以使用OpenUSD促進更多的工業工作負載。西門子將OpenUSD管道與Simcenter模擬技術組合集成，以支持關鍵利益相關者之間的循證決策和協作。這種集成實現了復雜仿真數據的高保真、實時、逼真的可視化，提供了對產品性能的更深入的了解真實的操作環境。這項工作將建立在西門子的努力將Omniverse納入其Teamcenter產品生命周期管理組合的基礎上。

NVIDIA還發布了壹個從統壹機器人描述格式到OpenUSD的連接器，讓機器人專家可以跨應用程序無縫地傳輸他們的機器人數據，包括設計，模擬和強化學習。

為了進壹步推進OpenUSD生態系統的擴展，NVIDIA宣布了OpenUSD Exchange軟件開發工具包，使開發人員能夠構建自己的健壯的OpenUSD數據連接器。

新的開發人員工具和api，通過NVIDIA圖形交付將大規模OpenUSD場景從Omniverse平臺上構建的應用程序流式傳輸到Apple Vision Pro網絡， 目前可以進行壹些早期方問。

​皮克斯首席技術總監兼OpenUSD聯盟(AOUSD)主席史蒂夫·梅(Steve May)表示:“OpenUSD正在徹底改變我們創建3D內容並與之互動的方式。現在，有了NVIDIA為OpenUSD構建的這些新服務和api，我們期待看到加速USD的增長和采用，為新用戶和行業更容易融入我們的生態系統鋪平了道路。”

OpenUSD生態系統動力

去年，英偉達與皮克斯、Adobe、蘋果和歐特克共同創立了AOUSD。

通過AOUSD, NVIDIA和其他合作者宣布了壹個新的OpenUSD版本，OpenUSD核心規範的進展和新成員。

可用性

USD搜索、USD代碼和USD驗證NIM微服務可在NVIDIA API目錄中預覽。OpenUSD到URDF連接器現在可以與NVIDIA壹起使用NVIDIA Isaac Sim™.。​開發人員可以開始使用新的Omniverse開發人員工具將生成式AI集成到OpenUSD工作流中，並使用OpenUSD構建支持生成式AI的合成數據管道的參考工作流。

通過收聽英偉達創始人兼首席執行官黃仁勛在SIGGRAPH會議上的爐邊談話，了解有關生成式人工智能和加速計算的更多最新信息

計算機圖形學會議於8月1日在丹佛舉行。