Nvidias nästa stora AI-satsning: molnanslutna humanoida robotar

AI-sektorn har haft en enorm tillväxt på bara fyra år, främst tack vare Nvidia och dess kraftfulla GPU:er som är särskilt utformade för AI-arbetsbelastningar. Team Green började faktiskt satsa på AI redan i mitten av 2010-talet, men resultaten blev tydliga först för några år sedan. Nu när hårdvarusidan av AI är kraftigt täckt, till och med på gränsen till monopol, letar Nvidia efter framtida satsningar som ytterligare kan öka sitt värde i framtiden. I år på Computex signalerar Team Green att en sådan satsning skulle kunna vara fysisk AI och humanoid robotik.

Som VD Jensen Huang förklarade i sin keynote tidigare idag kommer "fysisk AI och robotteknik att leda till nästa industriella revolution. Från AI-hjärnor för robotar till simulerade världar att öva i eller AI-superdatorer för träning av grundmodeller, NVIDIA tillhandahåller byggstenar för varje steg i robotikutvecklingen."

Nvidia Isaac Gr00T

Med fokus på fysisk AI utökar Nvidia också sina satsningar på mjukvarusidan. Kärnkomponenten i detta avseende är företagets första öppna operativsystem för humanoida robotar som heter Isaac. Utöver det kan utvecklare lägga till utbildade modeller som Gr00t N1.0 introducerades i mars i år. Denna har uppdaterats till version 1.5 som lägger till Dreams-komponenten. Version 1.0 med Mimic-komponenten utgjorde grunden för att träna robotars resonemang och beteende, och med Dreams-komponenten introducerar Nvidia en plan som hjälper till att generera stora mängder syntetisk rörelsedata (neurala banor) som fysiska AI-utvecklare kan använda för att lära robotar nya motoriska färdigheter, inklusive hur man anpassar sig till föränderliga miljöer.

Träningsprocessen liknar text-till-bild / video modeller. Först eftertränas robotarna med Cosmos Predicts world foundation-modeller (WFM:er). Med hjälp av en enda bild som indata genererar GR00T-Dreams sedan videor där roboten utför nya uppgifter i nya miljöer. Ritningen extraherar action tokens (komprimerade bitar av data som lätt kan bearbetas av robotens neurala nätverk), som lär en robot hur man utför nya åtgärder.

Nvidias Isaac GR00T är nära sammankopplad med Omniverse- och Cosmos-plattformarna för att generera träningsdata. Uppdateringen N1.5 samt andra modeller som Isaac Sim 5.0 och Isaac Lab 2.2 kommer snart att finnas tillgängliga för nedladdning på Hugging Face repository. Banbrytande företag som redan använder Isaac N-modeller för humanoida robotar inkluderar AeiRobot, Foxlink, Foxconnlightwheel, NEURA Robotics, Boston Dynamics, Agility Robotics och XPENG Robotics.

Dessutom erbjuder Nvidia sina Universal Blackwell Systems som drivs av RTX PRO 6000 GPU:er som DGX Cloud infrastruktur, så att utvecklare enkelt kan utnyttja stora mängder processorkraft för robotträning.