NVIDIA lance de nouveaux services, modèles et plates-formes informatiques pour accélérer le développement des robots humanoïdes

Le développement rapide de la technologie transforme progressivement les robots humanoïdes de « l'anthropomorphisme » de la forme à l'aspect pratique de la fonction, accélérant ainsi la commercialisation des produits et l'expansion du marché. NVIDIA recherche et développe activement des technologies d'intelligence artificielle et de robotique, en particulier dans le domaine des robots humanoïdes. NVIDIA s'engage à accélérer le développement et l'innovation de robots humanoïdes dans le monde entier grâce à des plateformes telles que NVIDIA Isaac et NVIDIA Jetson. Afin d'accélérer le développement des robots humanoïdes dans le monde entier, lors du SIGGRAPH 2024, NVIDIA a officiellement annoncé un ensemble de services, de modèles et de plates-formes informatiques destinés aux fabricants mondiaux de robots, aux développeurs de modèles d'IA et aux fabricants de logiciels afin de développer, former et construire la prochaine génération de robots humanoïdes. .

整套產品包括用於機器人模擬和學習的全新NVIDIA NIM™ 微服務和框架、用於運行多階段機器人工作負載的NVIDIA OSMO 編排服務，以及支援AI和模擬的遠端操作工作流程，該工作流程允許開發者使用少量人類演示資料來訓練機器人。
簡化訓練和模擬工作流程，縮短部署和開發週期
NVIDIA NIM（NVIDIAInference Manager）是一個由NVIDIA提供的工具，用於管理和最佳化AI模型的推理過程。 NIM旨在幫助開發者和企業更有效率地部署、擴展和維護他們的AI推理應用。
為了幫助開發者加速產品開發，NVIDIA在NIM 微服務中提供了由 NVIDIA 推理軟體提供支援的預先建置容器，使開發者能夠將部署時間從數週縮短到幾分鐘。機器人專家將能夠透過兩種新的AI微服務，在 NVIDIA Isaac Sim™m(基於NVIDIA Omniverse™ 平台建構的機器人模擬參考應用)中增強生成式實體 AI模擬工作流程。
除此之外，MimicGen NIM 可根據 Apple Vision Pro 等空間計算設備所記錄的遠端操作數據，產生合成運動數據。 RobocasaNIM 可在 OpenUSD(一個用於在 3D 世界中進行開發和協作的通用框架)中產生機器人任務和模擬就緒環境。
現已推出的 NVIDIA OSMO 是一項雲端原生託管服務，允許用戶跨分散式運算資源來協調和擴展複雜的機器人開發工作流程，無論是在本地還是在雲端。
OSMO 大大簡化了機器人訓練和模擬工作流程，將部署和開發週期從數月縮短到一週內。使用者可以對各種任務進行視覺化管理，包括合成資料生成、模型訓練、強化學習以及大規模的人形機器人、自主移動機器人和工業機械手臂軟體在環測試。
不難發現，
使用真實數據和合成數據，節省時間和降低成本
訓練人形機器人的基礎模型需要大量的數據。遠端操作是獲取人類演示數據的方法之一，但這個過程變得越來越昂貴和漫長。
透過在 SIGGRAPH 電腦圖形大會上展示的 NVIDIA Al和 Omniverse 遠端操作參考工作流程，研究者和 AI開發者能夠從極少量遠端捕捉的人類演示中產生大量合成運動和感知數據。
首先，開發者使用 Apple Vision pro 捕獲少量遠端操作演示，隨後在 NVIDIA lsaac Sim 中模擬這些錄影，並使用 MimicGen NIM 基於錄影生成合成資料集。
開發者可以使用真實數據和合成數據對 Proiect GROOT 人形機器人基礎模型進行訓練，以節省時間並降低成本。然後，他們可以使用Isaac Lab 中的 Robocasa NIM(一個機器人學習框架)來產生經驗並重新訓練機器人模型。在整個工作流程中，NVIDIAOSMO 將運算任務無縫地分配給不同的資源，為開發者減少了數週的管理工作量。
通用機器人平台公司傅利葉看到了使用模擬技術綜合生成訓練資料的優勢。
傅利葉 Alex Gu 表示，人形機器人的開發極為複雜，這項工作需要從現實世界中繁瑣地獲取大量真實數據。 NVIDIA的全新模擬和生成式AI開發者工具將有助於引導和加速我們的模型開發工作流程。
擴大開發者技術存取管道，簡化人形機器人開發
NVIDIA 提供了三個計算平台來簡化人形機器人的開發，分別是：用於訓練模型的NVIDIA AI超級電腦；基於0mniverse 構建的NVIDIA lsaac Sim，使機器人可以在模擬世界中學習和完善技能；以及用於運行模型的NVIDIA Jetson™ Thor 人形機器人電腦。開發者可以根據具體需求來存取和使用全部平台或其中的任何部分。
透過新的 NVIDIA 人形機器人開發者計劃，，開發者可以提前獲取這些新產品以及全新版本的NVIDlA lsaac Sim、NVIDIA lsaac Lab、 Jetson Thor 和 Project GR00T通用人形機器人基礎模型。
首批加入早期訪問計劃的企業有 1x、波士頓動力公司、字節跳動 ByteDance Research、FieldAl、Figure、傅利葉、銀河通用、逐際動力、Mentee、Neura Robotics、星際紀元和 Skild Al。
波士頓動力公司Aaron Saunders 表示:「波士頓動力公司與NVIDIA 在推動機器人技術發展方面有著悠久的密切合作歷史。我們非常高興看到這項工作的成果正在加速整個產業的33發展。
據介紹，目前開發者現在可以加入NVIDIA 人形機器人開發者計劃，以訪問NVIDIA OSMO 和lsaac Lab，並將很快能夠訪問NVIDIA NIM 微服務。 ，它們在上述領域的應用將變得更加廣泛和深入。一波浪潮是機器人，其中最令人興奮的發展之一是人形機器人。NVIDIA正在推進整個 NVIDIA機器人堆疊的發展，面向全球人形機器人開發者和公司開放訪問，讓他們能夠使用符合其需求的平台、加速庫和 AI 模型。

Ce qui précède est le contenu détaillé de. pour plus d'informations, suivez d'autres articles connexes sur le site Web de PHP en chinois!