Produktneuheit: Agility A2 + ExoArm-7 für VLA-Training und Roboterlernen

Das Sammeln qualitativ hochwertiger Daten für das Roboterlernen ist oft langsam und schwierig.

Herkömmliche Teleoperationssysteme erfordern unter Umständen separate Controller, externe Tracking-Geräte, manuell synchronisierte Kameras und kundenspezifische Software-Pipelines. Dies verlängert die Einrichtungszeit und erschwert die Erfassung konsistenter Demonstrationen für das KI-Training.

Die Agility A2 + ExoArm-7 VLA Suite vereint diese Elemente in einer vorkonfigurierten Plattform.

Die Bediener tragen das Exoskelett ExoArm-7 und steuern den Roboter durch natürliche Armbewegungen. Das System erfasst synchronisierte menschliche Bewegungen, Informationen zum Roboterzustand, RGB-D-Bilddaten und Punktwolken und schafft so einen umfassenderen Datensatz für das Imitationslernen und das VLA-basierte Robotertraining.

Anstatt einen Datenerfassungs-Workflow von Grund auf neu zu entwickeln, können sich die Teams auf die eigentliche Aufgabe konzentrieren: Greifen, Sortieren, Einfügen, Zusammenbauen, Transportieren und andere reale Manipulationsszenarien.

Das tragbare Exoskelett ExoArm-7 wurde für eine natürlichere und intuitivere beidhändige Steuerung entwickelt.

Mit 14 Freiheitsgraden und einer Bewegungserfassungslatenz von unter 20 ms überträgt das tragbare System die Armbewegungen des Bedieners in Echtzeit auf den Zweiarmroboter Agility A2. Dadurch fühlt sich die Teleoperation eher wie die direkte Demonstration einer Aufgabe an als die Steuerung eines Roboters über eine herkömmliche Fernbedienung.

Für die Forscher bedeutet dies, dass menschliche Demonstrationen mit größerer Kontinuität und Präzision erfasst werden können.

Für Roboterlernprozesse bedeutet dies, dass der Roboter nicht nur visuelle Informationen erfassen kann, sondern auch die Bewegungsmuster hinter jeder Aktion: wie ein Objekt angenähert wird, wie die Arme koordiniert werden, wie ein Griff angepasst wird und wie eine Aufgabe abgeschlossen wird.

Diese hochpräzisen Demonstrationen können dann Imitationslernen, Policy-Training, Reinforcement-Learning-Experimente und die Generierung von VLA-Datensätzen unterstützen.

Kernstück der Suite ist der Agility A2 Doppelarmroboter mit zwei 7-DOF-Roboterarmen für eine menschenähnliche, beidhändige Manipulation.

Jeder Arm trägt eine Nennlast von 5 kg und eine maximale Nutzlast von bis zu 12 kg, wodurch die Plattform ein breites Spektrum an Forschungs- und Validierungsaufgaben bewältigen kann. Vom Aufnehmen und Platzieren über Montage, Einsetzen und Handhaben bis hin zu koordinierten Zwei-Arm-Operationen ist das System für die praxisorientierte Manipulationsforschung und nicht nur für Demonstrationen einzelner Aufgaben konzipiert.

Die Konstruktion mit zwei Armen ist besonders wertvoll für Aufgaben, die eine Koordination beider Hände erfordern, wie zum Beispiel das Stabilisieren eines Objekts mit einem Arm, während man es mit dem anderen bedient.

Dadurch eignet sich die Plattform hervorragend, um zu untersuchen, wie Roboter komplexe Manipulationsfähigkeiten durch menschliche Vorführungen erlernen können.

Für das Lernen von Robotern reichen Bewegungsdaten allein nicht aus.

Die Agility A2 + ExoArm-7 VLA Suite umfasst eine Intel D435 Kopfkamera und zwei Intel D405 Handgelenkkameras, die in die Vision-Greifer-Baugruppen integriert sind. Zusammen liefern diese Kameras synchronisierte RGB-D-Daten und Punktwolkeninformationen sowohl aus der Übersichts- als auch aus der Nahbereichsperspektive.

Die Kopfkamera erfasst den größeren Arbeitsbereich, während die Handgelenkkameras wichtige Interaktionen in der Nähe der Greifer beobachten.

Dieser Ansatz mit mehreren Kameras trägt zur Erstellung umfangreicherer Datensätze für die visuelle Wahrnehmung, das Objektverständnis, die Greifplanung und das Handlungslernen bei. Er bietet Forschern zudem mehr Flexibilität bei der Untersuchung, wie Roboterstrategien auf veränderliche Objektpositionen, Arbeitsraumlayouts und Manipulationsbedingungen reagieren.

Ja. Die Plattform ist als durchgängiger, verkörperter KI-Workflow konzipiert und nicht nur als Teleoperationsgerät.

Die Suite basiert auf dem Open-Source-Framework LeRobot und unterstützt die Erfassung von Demonstrationen durch Menschen, die synchronisierte Datenerfassung, die Generierung von Datensätzen, Trainingsworkflows, die Modellinferenz und die autonome Aufgabenausführung.

Das System wird mit einer vorkonfigurierten OpenarmX-LeRobotVLA-Softwareumgebung geliefert, die es Teams ermöglicht, mit weniger Integrationsaufwand mit der Entwicklung zu beginnen.

Die ACT-Inferenz wird standardmäßig unterstützt. Bei leistungsfähigeren Controller-Konfigurationen unterstützt die Plattform auch fortgeschrittene VLA-Modelle wie SmoLVLA, Pi0, Pi0.5 und XVLA.

Dies bietet Forschern ein praktisches Umfeld, um verschiedene Lernansätze zu testen, Strategien zu vergleichen und zu überprüfen, ob ein KI-Modell von gesammelten Demonstrationen auf die Ausführung durch einen realen Roboter übertragen werden kann.

Die Agility A2 + ExoArm-7 VLA Suite wurde für Teams entwickelt, die Flexibilität in den Bereichen Forschung, Simulation und Einsatz benötigen.

Es unterstützt ein breites Ökosystem für die Robotikentwicklung, darunter:

ROS2 und ROS2-Kontrolle

NVIDIA Isaac Sim

MuJoCo

MoveIt-Bewegungsplanung

URDF-Robotermodellierung

Python- und C++-Entwicklung

Inverse Kinematik und Trajektorienoptimierung

Mit Schwerkraftkompensation, CANFD-Kommunikation, High-Speed-USB-Erweiterung und einer dedizierten Steuerungs-Workstation bietet das System eine stabile Grundlage für synchronisierte Sensoren, Echtzeitsteuerung und wiederholbare Bewegungsexperimente.

Die Standard-Workstation ist mit einem AMD Ryzen 9 Pro Prozessor, 16 GB RAM und einer 1 TB SSD ausgestattet; für anspruchsvollere VLA-Workloads sind höhere Konfigurationen verfügbar.

Die Agility A2 + ExoArm-7 VLA Suite ist ideal für:

Universitäten und Robotik-Ausbildungsprogramme

Labore für verkörperte KI und Roboterlernen

KI-Forscher, die Imitationslern- oder VLA-Datensätze erstellen

Industrielle F&E-Teams validieren Manipulationsabläufe

Robotik-Startups entwickeln schnelle Machbarkeitsstudien

Teams, die das Lernen von Simulationen zu realen Robotern erforschen

Ob es nun darum geht, Demonstrationsdaten zu sammeln, die Manipulation mit zwei Armen zu lehren, neue Strategien zu evaluieren oder ein Roboterlernkonzept schnell zu validieren – das System bietet einen integrierten Weg von der menschlichen Bewegung zur autonomen Ausführung.

Die Entwicklung verkörperter KI erfordert mehr als einen leistungsfähigen Roboterarm. Sie erfordert eine zuverlässige Methode, um aussagekräftige Demonstrationen zu sammeln, visuelle Wahrnehmung mit Handlung zu verknüpfen, Lernmodelle zu trainieren und die Ergebnisse in der realen Welt zu testen.

Die Agility A2 + ExoArm-7 VLA Suite vereint diese entscheidenden Schritte in einer tragbaren Dual-Arm-Teleoperationsplattform.

Von der natürlichen Erfassung menschlicher Bewegungen bis hin zur synchronisierten RGB-D-Bildverarbeitung, von der VLA-Datensatzgenerierung bis zur autonomen Roboterinferenz wurde es entwickelt, um Robotikteams dabei zu helfen, die Integrationszeit zu verkürzen und die Experimentiergeschwindigkeit zu beschleunigen.

Verwandeln Sie menschliche Demonstrationen in Roboterfähigkeiten – mit der Agility A2 + ExoArm-7 VLA Suite.