Doorbraak in robotbesturing: NVIDIA’s HOVER gebruikt slechts 1,5 miljoen parameters

Nieuws
donderdag, 31 oktober 2024 om 17:01
nvidia robot hover ai
Onderzoekers van NVIDIA hebben een opmerkelijke doorbraak bereikt op het gebied van robotbesturing door middel van een nieuw AI-model genaamd ‘HOVER’. Het model, dat met slechts 1,5 miljoen parameters werkt, stelt een humanoïde robot in staat om complexe taken zoals lopen, balanceren en handbewegingen uit te voeren zonder aanvullende training in de echte wereld. NVIDIA’s senior onderzoeker Jim Fan deelde deze ontwikkeling via een bericht op X (voorheen Twitter).
HOVER werd ontwikkeld en getest in de NVIDIA Isaac-simulator, een krachtige GPU-gebaseerde omgeving die fysica-simulaties tot wel 10.000 keer sneller kan uitvoeren dan in de echte wereld. Dankzij deze simulatieomgeving voltooiden de robots binnen 50 minuten aan rekentijd op één enkele GPU, wat gelijkstaat aan een intensieve training van een jaar in real-time. Het model werd na deze training zonder verdere aanpassingen in de echte wereld toegepast, een proces dat in de AI-wereld bekendstaat als “zero-shot” transfer.

Not every foundation model needs to be gigantic. We trained a 1.5M-parameter neural network to control the body of a humanoid robot. It takes a lot of subconscious processing for us humans to walk, maintain balance, and maneuver our arms and legs into desired positions. We…

3.0K
Reply

Flexibele controle door gebruikers

Het HOVER-model ondersteunt verschillende methoden om het robotlichaam aan te sturen, waaronder via XR-apparaten zoals de Apple Vision Pro, camera-gebaseerde bewegingsregistratie (MoCap), exoskeletten en joysticks. Deze flexibiliteit stelt gebruikers in staat om robots via een enkel, verenigd platform aan te sturen met diverse invoerapparaten, wat teleoperatie – het op afstand bedienen van de robot – toegankelijker en veelzijdiger maakt. Dit systeem biedt niet alleen meer precisie, maar ook mogelijkheden om efficiënter data te verzamelen voor toekomstige training.

Nieuwe mogelijkheden voor robots

De implicaties van HOVER gaan verder dan alleen verbeterde robotbesturing. Robotica en AI zijn onlosmakelijk met elkaar verbonden.
Het model kan mogelijk geïntegreerd worden met vision-language-action (VLA) modellen, waarmee robots in de toekomst instructies op basis van taal en visuele input kunnen begrijpen en omzetten naar bewegingen. Dit maakt HOVER waardevol voor zowel industriële als consumententoepassingen, waar robots steeds meer als hulp en assistent zullen fungeren.
Met HOVER biedt NVIDIA een belangrijke bouwsteen voor humanoïde robots die een breed scala aan taken moeten uitvoeren. Dankzij de modulaire opzet kan elke compatibele robot in de NVIDIA Isaac-omgeving worden getraind en bestuurd via HOVER, waardoor fabrikanten hun eigen robots snel en nauwkeurig kunnen testen en afstemmen.

Populair nieuws