英偉達(dá)推出開發(fā)、訓(xùn)練和構(gòu)建下一代人形機器人的整套產(chǎn)品 黃仁勛:AI的下一波浪潮是機器人

7月30日消息,為加速全球人形機器人的發(fā)展,NVIDIA 今日宣布,為全球機器人制造商、AI 模型開發(fā)者和軟件制造商提供一套服務(wù)、模型以及計算平臺,以開發(fā)、訓(xùn)練和構(gòu)建下一代人形機器人。

整套產(chǎn)品包括用于機器人仿真和學(xué)習(xí)的全新 NVIDIA NIM 微服務(wù)和框架、用于運行多階段機器人工作負(fù)載的 NVIDIA OSMO 編排服務(wù),以及支持 AI 和仿真的遠(yuǎn)程操作工作流,該工作流允許開發(fā)者使用少量人類演示數(shù)據(jù)來訓(xùn)練機器人。

NIM 微服務(wù)提供了由 NVIDIA 推理軟件提供支持的預(yù)構(gòu)建容器,使開發(fā)者能夠?qū)⒉渴饡r間從數(shù)周縮短到幾分鐘。機器人專家將能夠通過兩項新的 AI 微服務(wù),在 NVIDIA Isaac Sim(基于 NVIDIA Omniverse 平臺構(gòu)建的機器人仿真參考應(yīng)用)中增強生成式物理 AI 仿真工作流。

MimicGen NIM 微服務(wù)可根據(jù) Apple Vision Pro 等空間計算設(shè)備記錄的遠(yuǎn)程操作數(shù)據(jù),生成合成運動數(shù)據(jù)。Robocasa NIM 微服務(wù)可在 OpenUSD(一個用于在 3D 世界中進(jìn)行開發(fā)和協(xié)作的通用框架)中生成機器人任務(wù)和仿真就緒環(huán)境。

現(xiàn)已推出的 NVIDIA OSMO 是一項云原生托管服務(wù),允許用戶跨分布式計算資源來協(xié)調(diào)和擴展復(fù)雜的機器人開發(fā)工作流,無論是在本地還是在云端。

OSMO 大大簡化了機器人訓(xùn)練和仿真工作流,將部署和開發(fā)周期從數(shù)月縮短到一周內(nèi)。用戶可以對各種任務(wù)進(jìn)行可視化管理,包括合成數(shù)據(jù)生成、模型訓(xùn)練、強化學(xué)習(xí)以及大規(guī)模的人形機器人、自主移動機器人和工業(yè)機械臂軟件在環(huán)測試。

NVIDIA 創(chuàng)始人兼首席執(zhí)行官黃仁勛表示:“AI 的下一波浪潮是機器人,其中最令人興奮的發(fā)展之一是人形機器人。我們正在推進(jìn)整個 NVIDIA 機器人堆棧的發(fā)展,面向全球人形機器人開發(fā)者和公司開放訪問,讓他們能夠使用最符合其需求的平臺、加速庫和 AI 模型?!?/p>

具體開發(fā)者如何使用這些開放工具,首先,開發(fā)者使用 Apple Vision Pro 捕獲少量遠(yuǎn)程操作演示,隨后在 NVIDIA Isaac Sim 中仿真這些錄像,并使用 MimicGen NIM 微服務(wù)基于錄像生成合成數(shù)據(jù)集。

開發(fā)者可以使用真實數(shù)據(jù)和合成數(shù)據(jù)對 Project GR00T 人形機器人基礎(chǔ)模型進(jìn)行訓(xùn)練,以節(jié)省時間和降低成本。然后,他們可以使用 Isaac Lab 中的 Robocasa NIM 微服務(wù)(一個機器人學(xué)習(xí)框架)來生成經(jīng)驗并重新訓(xùn)練機器人模型。在整個工作流中,NVIDIA OSMO 將計算任務(wù)無縫地分配給不同的資源,為開發(fā)者減少了數(shù)周的管理工作量。

同時,NVIDIA 提供了三個計算平臺來簡化人形機器人的開發(fā),分別是:用于訓(xùn)練模型的 NVIDIA AI 超級計算機;基于 Omniverse 構(gòu)建的 NVIDIA Isaac Sim,使機器人可以在仿真世界中學(xué)習(xí)和完善技能;以及用于運行模型的 NVIDIA Jetson Thor 人形機器人計算機。開發(fā)者可以根據(jù)具體需求來訪問和使用全部平臺或其中的任何部分。

通過新的 NVIDIA 人形機器人開發(fā)者計劃,開發(fā)者可以提前獲取這些新產(chǎn)品以及最新版本的 NVIDIA Isaac Sim、NVIDIA Isaac Lab、Jetson Thor 和 Project GR00T 通用人形機器人基礎(chǔ)模型。

NVIDIA 介紹,首批加入早期訪問計劃的企業(yè)有 1x、波士頓動力公司、字節(jié)跳動 ByteDance Research、Field AI、Figure、傅利葉、銀河通用、逐際動力、Mentee、Neura Robotics、星動紀(jì)元和 Skild AI。(宜月)

極客網(wǎng)企業(yè)會員

免責(zé)聲明:本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿,凡在本網(wǎng)站出現(xiàn)的信息,均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性,但不保證有關(guān)資料的準(zhǔn)確性及可靠性,讀者在使用前請進(jìn)一步核實,并對任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對有關(guān)資料所引致的錯誤、不確或遺漏,概不負(fù)任何法律責(zé)任。任何單位或個人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識產(chǎn)權(quán)或存在不實內(nèi)容時,應(yīng)及時向本網(wǎng)站提出書面權(quán)利通知或不實情況說明,并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實情況證明。本網(wǎng)站在收到上述法律文件后,將會依法盡快聯(lián)系相關(guān)文章源頭核實,溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。

2024-07-30
英偉達(dá)推出開發(fā)、訓(xùn)練和構(gòu)建下一代人形機器人的整套產(chǎn)品 黃仁勛:AI的下一波浪潮是機器人
NVIDIA 今日宣布,為全球機器人制造商、AI 模型開發(fā)者和軟件制造商提供一套服務(wù)、模型以及計算平臺,以開發(fā)、訓(xùn)練和構(gòu)建下一代人形機器人。

長按掃碼 閱讀全文