Wie kann man das Lernen von Robotern für alle zugänglich machen? In diesem Vortrag stellt Steven Palma LeRobot vor – eine Initiative von Hugging Face, die darauf abzielt, Künstliche Intelligenz in die physische Welt zu bringen, indem sie KI für Robotik durch Ende-zu-Ende-Lernen leichter zugänglich macht.
Dabei wird er das Publikum auf eine umfassende Tour durch die LeRobot-Plattform mitnehmen und die zentralen Säulen von Open-Source-Robotik vorstellen:
- Roboter & Simulation: Einsatz kostengünstiger realer Hardware wie dem SO‑101‑Arm in Kombination mit leistungsfähigen Simulationsumgebungen
- Steuerung & Teleoperation: Effiziente Datenerfassung durch vereinheitlichte Systeme zur Teleoperation und Steuerung von Robotern
- Datensätze: Einblick in das rasante Wachstum gemeinschaftlich erstellter Datensätze auf dem Hugging Face Hub – ein Anstieg auf nahezu 30.000 Datensätze, der als das mögliche „ChatGPT‑Moment der Robotik“ gilt.
- Modelle: Training mit sofort nutzbaren, modernsten Vision‑Language‑Action‑Modellen (VLA) in PyTorch, darunter Action Chunking with Transformers (ACT) und SmolVLA.
- Inferenz & Evaluierung: Testen und Bewerten von Steuerungsrichtlinien über verschiedene Szenarien und Zielsetzungen hinweg, etwa mit Umgebungen wie LIBERO.
Abschließend wird Steven Palma die nahezu unbegrenzten Möglichkeiten hervorheben, die durch die globale Community entstehen – beispielsweise Multi‑Task‑Co‑Training für Zero‑Shot‑ und Few‑Shot‑Bewegungsübertragung. Zudem stellt er die jüngsten Weiterentwicklungen in der LeRobot‑Version 0.5.0 vor, die das Open-Source-Lernen von Robotern in jeder Hinsicht auf ein neues Niveau heben.