NVIDIA加速人形機器人開發

開發人員可以在Isaac實驗室和Isaac Sim, OSMO機器人雲計算編排服務,遠程操作數據捕獲工作流程等嘗試NVIDIA NIM機器人微服務模擬​

為了在全球範圍內加速人形機器人的發展,NVIDIA於7月29日發布提供世界領先的機器人制造商、人工智能模型開發商和軟件制造商,提供壹套服務、模型和計算平臺,以開發、培訓和構建下壹代人形機器人。

這些產品中包括用於機器人模擬和學習的NVIDIA NIM™微服務和框架,以及用於運行的NVIDIA OSMO編排服務多階段機器人工作負載,以及支持人工智能和仿真的遠程操作工作流程,允許開發人員使用少量人類演示數據來訓練機器人。
英偉達創始人兼首席執行官黃仁勛表示:“人工智能的下壹波浪潮是機器人技術,其中最令人興奮的發展之壹是人形機器人。我們推進整個NVIDIA機器人堆棧,為全球人形開發人員和公司開放使用最適合他們需求的平臺、加速庫和人工智能模型。”

借助NVIDIA NIM和OSMO加速開發

NIM微服務提供由NVIDIA推理驅動的預構建容器軟件,使開發人員能夠將部署時間從幾周縮短到幾周分鐘。兩個新的人工智能微服務將允許機器人專家增強模擬能力NVIDIA Isaac Sim™是基於NVIDIA Omniverse™平臺構建的機器人仿真慘考應用程序。

MimicGen NIM微服務生成合成運動數據

從像Apple Vision Pro這洋的空間計算設備中記錄遠程操作數據。Robocasa NIM微服務生成機器人任務和模擬準備OpenUSD是壹個在3D世界中開發和協作的通用框架。

現在可用的NVIDIA OSMO是壹項雲原生托管服務,允許用護跨分布式計算資源協調和擴展復雜的機器人開發工作流程,無論是在本地還是在雲中。

​OSMO極大地間化了機器人訓練和模擬工作流程,將部署和開發周期從幾個月縮短到不到壹周。用護可以可視化和管理壹系列任務——比如生成合成數據、訓練模型、對類人機器人、自主移動機器人和工業機械手進行強化學習和大規模實施軟件在環測試。

面向人形機器人開發人員的先進數據捕獲工作

訓練人形機器人的基礎模型需要大量的數據。獲取人類演示數據的壹種方法是使用遠程操作,但這正變得越來越昂貴和漫長的過程。

支持NVIDIA AI和全宇宙的遠程操作慘考工作流程;

在SIGGRAPH計算機圖形學會議上展示,允許人工智能開發人員可以從少量遠程捕獲的人類演示中生成大量合成動作和感知數據。

首先,開發人員使用Apple Vision Pro捕捉少量遠程操作演示。然後,他們在NVIDIA Isaac Sim中模擬錄音,並使用MimicGen NIM微服務從錄音中生成合成數據集。

開發人員用真實的和真實的方法訓練Project GR00T類人基礎模型合成數據,使開發人員能夠節省時間,降低成本。然後他們使用Isaac實驗室的Robocasa NIM微服務,壹個用於機器人學習的框架,生成經驗來重新訓練機器人模型。在整個工作過程中,NVIDIA OSMO

無縫地將計算作業分配給di仟事件資源,從而為開發人員節省了數周的管理任務。

通用機器人平臺公司Fourier看到了利用仿真技術綜合生成訓練數據的好處。

​“開發類人機器人是極其復雜的,需要壹個令人難以置信的從現實世界中繁瑣地獲取大量真實數據,”Fourier首席執行官Alex Gu表示。“NVIDIA的新模擬和生成人工智能開發工具將有所幫助引導和加速我們的模型開發工作流程。”

​擴展對NVIDIA人形開發人員技術的訪問

NVIDIA提供了三個計算平臺來簡化人形機器人開發:NVIDIA AI超級計算機訓練模型;NVIDIA Isaac Sim基於Omniverse開發,機器人可以在模擬世界中學習和完善自己的技能;以及NVIDIA Jetson™Thor人形機器人計算機來運行這些模型。開發人員可以訪問和使用平臺的全部或任何部分來滿足他們的特定需求。
通過新的NVIDIA人形機器人開發人員計劃,開發人員可以獲得搶先體驗全新的系列產品,以及最新的NVIDIA Isaac Sim,NVIDIA艾薩克實驗室、傑森·索爾和Project GR00T通用類人基礎模型。Boston Dynamics, ByteDance Research, Field AI, Figure, Fourier, Galbot, LimX Dynamics, Mentee, Neura Robotics, Robot Era和S kild A I是首批加入早期訪問計劃的公司。

“波士頓動力公司和英偉達有著長期的密切合作,共同推動技術發展,”Boston Dynamics代首席技術官亞倫·桑德斯說。“我們很高興看到這項工作的成果加速整個行業的發展,而早期訪問計劃是獲得壹流技術的絕佳途徑。”

關於英偉達

英偉達(NASDAQ: NVDA)是加速計算領域的全球領導者。

PHP Code Snippets Powered By : XYZScripts.com