Nvidia, ein führender Anbieter von Grafikprozessoren und KI-Technologien, hat ein kompaktes neuronales Netzwerk namens HOVER entwickelt, das komplexe Bewegungen humanoider Roboter steuert. Besonders bemerkenswert ist die geringe Größe des Modells mit nur 1,5 Millionen Parametern, im Vergleich zu hunderten von Milliarden Parametern in typischen großen Sprachmodellen. Trotz seiner Kompaktheit übertrifft HOVER in seiner Leistung spezialisierte Systeme.
HOVER zeichnet sich durch seine Vielseitigkeit in der Steuerung aus. Es akzeptiert Eingaben von verschiedenen Quellen, darunter Head- und Hand-Tracking von XR-Geräten wie der Apple Vision Pro, Ganzkörperposen aus Motion-Capture- oder RGB-Kameras, Gelenkwinkel von Exoskeletten und herkömmliche Joystick-Steuerungen. Ein besonderes Highlight ist der Zero-Shot-Transfer: HOVER kann direkt von der Simulation auf physische Roboter übertragen werden, ohne dass eine Feinabstimmung erforderlich ist.
Trainiert wurde HOVER in Nvidias Isaac-Simulationsumgebung. Diese Umgebung beschleunigt Roboterbewegungen um das 10.000-fache, was bedeutet, dass ein ganzes Jahr Training im virtuellen Raum nur etwa 50 Minuten Rechenzeit auf einer GPU benötigt. Diese enorme Zeitersparnis ermöglicht eine effiziente Entwicklung und Optimierung von Roboterbewegungen.
In Tests hat sich gezeigt, dass HOVER bei jeder Steuerungsmethode besser abschneidet als Systeme, die speziell für nur eine Art von Eingabe entwickelt wurden. Die Entwickler vermuten, dass dies auf das breite Verständnis des Systems für physikalische Konzepte wie Gleichgewicht und präzise Gliedmaßenkontrolle zurückzuführen ist, das es auf alle Steuerungstypen anwendet.
HOVER basiert auf dem Open-Source-Projekt H2O & OmniH2O und funktioniert mit jedem humanoiden Roboter, der im Isaac-Simulator laufen kann. Nvidia hat Beispiele und Code auf GitHub veröffentlicht, um die weitere Entwicklung und Forschung in diesem Bereich zu fördern. Die Entwicklung von HOVER stellt einen wichtigen Schritt in Richtung einer effizienteren und vielseitigeren Steuerung humanoider Roboter dar und eröffnet neue Möglichkeiten für deren Einsatz in verschiedenen Bereichen.
Die Entwicklung von HOVER und die damit verbundenen Fortschritte in der Simulation und KI-gesteuerten Steuerung humanoider Roboter eröffnen vielversprechende Perspektiven. Die Kombination aus effizientem Training in virtuellen Umgebungen, Zero-Shot-Transfer und vielseitigen Steuerungsmethoden ebnet den Weg für eine neue Generation von Robotern, die nahtlos mit Menschen interagieren und komplexe Aufgaben in verschiedenen Bereichen übernehmen können. Die zukünftigen Anwendungen reichen von der Industrie und Logistik über das Gesundheitswesen bis hin zu privaten Haushalten.
Quellen: - https://nvidianews.nvidia.com/news/nvidia-accelerates-worldwide-humanoid-robotics-development - https://technologymagazine.com/articles/nvidia-the-rise-of-ai-humanoid-robots - https://www.sequoiacap.com/podcast/training-data-jim-fan/ - https://www.businessinsider.nl/the-ai-boom-turned-nvidia-into-a-trillion-dollar-giant-its-next-big-bet-is-even-more-complex/ - https://nvidianews.nvidia.com/news/foundation-model-isaac-robotics-platform - https://www.linkedin.com/posts/jeremydalton_robots-spatialcomputing-applevisionpro-activity-7226363708845748225-SSSo - https://xpert.digital/en/humanoid-robotics/ - https://www.therobotreport.com/nvidia-adds-tools-it-says-will-accelerate-development-of-humanoid-robots/ - https://www.linkedin.com/posts/alliekmiller_nvidia-just-announced-project-groot-so-humanoid-activity-7175867032872054785-jjta - https://www.youtube.com/watch?v=Bhg3uOx9ZPw