Lancement d'un nouveau produit : Agility A2 Flex réunit la manipulation mobile et la recherche en IA incarnée.

À mesure que la robotique s'affranchit des postes de travail fixes, les développeurs recherchent de plus en plus des systèmes capables de se déplacer dans différents environnements, d'interagir avec des objets et d'effectuer des tâches de manipulation coordonnées. Toutefois, transformer ces capacités en une solution robotique pratique demeure un défi, notamment lorsque la mobilité, la perception et le contrôle des bras doivent fonctionner de concert.

Foxtech présente le nouvel Agility A2 Flex , un robot à deux bras sur roues open-source à 27 degrés de liberté conçu pour la manipulation mobile, la téléopération VR du corps entier et la recherche en IA incarnée.

Combinant une base mobile multidirectionnelle, un mécanisme de levage réglable, deux bras robotiques et une architecture de contrôle intégrée, Agility A2 Flex offre aux chercheurs et aux développeurs une plateforme unifiée pour explorer des comportements robotiques plus avancés.

Disponible en configurations Agility A2 Flex et Agility A2 Flex Ultra , la plateforme répond à différents besoins de développement, de la téléopération guidée par l'homme et du contrôle de mouvement à la formation et à la validation de modèles VLA.

Pourquoi les développeurs en robotique ont-ils besoin de plus qu'un bras robotique fixe ?

Les bras robotisés traditionnels sont efficaces pour les tâches effectuées dans un espace de travail défini. Cependant, les environnements réels sont rarement limités à une seule position fixe.

Un robot évoluant dans un laboratoire, un entrepôt ou un environnement de manipulation expérimentale peut avoir besoin d'approcher des objets depuis différentes directions, d'ajuster sa hauteur de travail et de coordonner les mouvements de ses deux bras. Ces exigences posent des défis que le contrôle des bras robotisés ne peut relever à lui seul.

Le système Agility A2 Flex remédie à ces limitations en combinant mobilité et manipulation au sein d'un seul système robotique.

Son architecture à 27 degrés de liberté intègre deux bras, des pinces, une tête mobile, un système de levage vertical et une base mobile. Cela permet aux développeurs d'étudier comment différents composants robotiques peuvent collaborer pour réaliser des opérations plus complexes.

Plutôt que de se concentrer uniquement sur les mouvements articulaires individuels, les chercheurs peuvent développer et évaluer des comportements robotiques du corps entier.

Comment Agility A2 Flex peut-il s'adapter à différents environnements de travail ?

L'un des principaux défis de la manipulation mobile est d'atteindre des objets situés à différentes positions et hauteurs.

Le robot Agility A2 Flex est doté d'une base mobile 4W4S (quatre roues motrices et directrices) qui lui permet de se déplacer de manière multidirectionnelle. Il peut ainsi se repositionner sans être limité aux déplacements classiques en marche avant et en marche arrière.

Le mécanisme de levage vertical intégré de 700 mm accroît encore sa flexibilité de travail en permettant aux bras robotisés de fonctionner à différentes hauteurs.

Associée à deux bras robotisés à 7 articulations, offrant chacun une portée d'environ 714 mm, la plateforme permet une préhension, une manipulation et un transfert d'objets coordonnés.

Ces fonctionnalités sont particulièrement utiles pour développer des flux de travail de manipulation mobile impliquant des tables, des étagères, des conteneurs et d'autres objets positionnés dans un espace de travail.

Pour les équipes de robotique, cela signifie davantage d'opportunités de tester des stratégies de manipulation dans des conditions environnementales changeantes plutôt que de se fier exclusivement à des démonstrations statiques.

Comment les développeurs peuvent-ils tester les tâches des robots sans avoir à construire au préalable des algorithmes autonomes ?

Le développement d'un comportement robotique autonome exige une expérimentation poussée. Avant d'entraîner un modèle d'IA, les chercheurs doivent souvent déterminer si une tâche est physiquement réalisable et comment les différents composants du robot doivent se coordonner.

L'Agility A2 Flex offre un point de départ accessible grâce à son système de téléopération VR intégré couvrant tout le corps.

Grâce au casque de réalité virtuelle Meta Quest 3S inclus, les opérateurs peuvent contrôler les bras, les pinces, la tête, le mécanisme de levage et la base mobile du robot.

Cela permet aux chercheurs de démontrer et d'évaluer directement les tâches de manipulation, sans avoir à développer au préalable une politique de contrôle autonome complète.

Par exemple, un opérateur peut guider le robot à travers une séquence coordonnée de manipulation d'objets, observer comment le robot réagit et identifier les domaines où la planification des mouvements ou les stratégies de contrôle pourraient nécessiter des améliorations.

Ces mêmes capacités de téléopération permettent également la collecte de données de démonstration humaine, ouvrant ainsi des perspectives pour des recherches ultérieures sur l'apprentissage robotique.

En séparant la validation initiale des tâches du développement autonome des politiques, les équipes de recherche peuvent établir des flux de travail pratiques avant de passer à des expériences d'IA plus avancées.

Comment une plateforme de développement ouverte réduit-elle les difficultés d'intégration ?

Pour les universités, les laboratoires de recherche et les jeunes entreprises de robotique, la compatibilité logicielle est souvent aussi importante que les capacités matérielles.

Développer un système robotique mobile à partir de composants distincts peut nécessiter des efforts considérables pour connecter les contrôleurs, les capteurs, les cadres de planification de mouvement et les interfaces de communication.

Agility A2 Flex est construit sur Ubuntu 22.04 et ROS 2 Humble, offrant un environnement de développement ouvert familier à de nombreuses équipes de robotique.

Les modèles Agility A2 Flex et Flex Ultra prennent tous deux en charge le contrôle articulaire en temps réel ROS 2 et la planification des mouvements du bras MoveIt 2.

Ces fonctionnalités permettent aux développeurs de travailler sur des applications de mouvement robotique, de planification de la manipulation et de contrôle personnalisées au sein d'un écosystème logiciel robotique établi.

Pour les équipes de recherche, une architecture de développement ouverte offre également une plus grande flexibilité pour expérimenter différents algorithmes, modifier les stratégies de contrôle et étendre la plateforme à mesure que les exigences du projet évoluent.

La plateforme Agility A2 Flex peut-elle faciliter la transition de la téléopération à la robotique pilotée par l'IA ?

La téléopération guidée par l'humain est une composante importante du développement robotique, mais de nombreux projets de recherche visent à aller au-delà du contrôle à distance pour aboutir à un comportement robotique basé sur l'apprentissage.

Cette transition nécessite une combinaison de données de démonstration, de perception de l'environnement, de ressources informatiques et d'outils de développement de modèles d'IA.

Agility A2 Flex constitue la base de la téléopération, du contrôle de mouvement et de l'acquisition de données de démonstration. Pour les équipes travaillant sur des applications d'IA embarquée plus avancées, Agility A2 Flex Ultra offre des fonctionnalités supplémentaires.

La configuration Ultra comprend deux caméras de poignet Intel RealSense D405, un LiDAR Livox MID-360S, une caméra supplémentaire RealSense D435i montée sur la base et un GPU NVIDIA RTX 3090.

Il prend également en charge la navigation Nav2 et inclut une configuration VLA utilisant π0.5 comme modèle par défaut.

Grâce à ces composants supplémentaires, les chercheurs peuvent explorer comment la perception visuelle, les actions robotiques et les modèles d'apprentissage interagissent lors des tâches de manipulation.

La configuration Ultra prend en charge l'entraînement, l'inférence et la validation du flux de travail du modèle VLA, ce qui la rend adaptée aux équipes étudiant la transition des démonstrations humaines au contrôle robotique piloté par l'IA.

Quelle configuration convient le mieux à votre projet de recherche ?

Le choix d'une plateforme robotique dépend des objectifs de développement du projet plutôt que de la simple sélection de la configuration matérielle la plus performante.

Pour les équipes principalement intéressées par la téléopération en réalité virtuelle, la planification des mouvements robotiques, les expériences de manipulation mobile et la collecte de démonstrations humaines, la plateforme standard Agility A2 Flex fournit l'environnement matériel et logiciel essentiel.

Il comprend un contrôleur X86, une caméra Intel RealSense D435i montée sur la tête, un contrôle des articulations ROS 2 et une planification de mouvement MoveIt 2.

Pour les chercheurs qui ont besoin de données de perception plus riches, de navigation mobile, de calcul GPU local et de capacités de développement VLA intégrées, Agility A2 Flex Ultra offre une configuration plus complète.

Cette distinction est particulièrement importante pour les clients qui planifient des projets d'IA incarnée à long terme. La configuration Flex standard n'inclut pas de configuration VLA, tandis que Flex Ultra est spécifiquement équipée pour l'entraînement, l'inférence et la validation VLA.

En proposant deux configurations, la plateforme permet aux clients de sélectionner un environnement de développement qui correspond mieux à leurs objectifs de recherche actuels.

Quelles opportunités offre Agility A2 Flex pour le développement futur de la robotique ?

La recherche en robotique se limite rarement à ses besoins initiaux. Un projet débutant par la manipulation à distance peut par la suite s'étendre au contrôle basé sur l'apprentissage, à la manipulation d'objets plus complexes ou à des capacités de détection supplémentaires.

La plateforme Agility A2 Flex prend en charge cette évolution grâce à son architecture matérielle extensible.

Les développeurs peuvent envisager une intégration optionnelle avec l'exosquelette portable ExoArm-7 Pro pour des méthodes de téléopération alternatives. Des mains articulées optionnelles peuvent faciliter les recherches impliquant des gestes de préhension et de manipulation plus complexes.

La plateforme prend également en charge les effecteurs terminaux personnalisés, les dispositifs de vision et la personnalisation OEM/ODM, offrant ainsi une flexibilité accrue pour les besoins de développement spécialisés.

Ces options sont particulièrement précieuses pour les institutions de recherche et les équipes d'ingénierie qui recherchent une plateforme robotique capable d'évoluer au rythme de leurs projets.

L'exosquelette portable ExoArm-7 Pro et les mains articulées (en option) sont vendus séparément.

Qui peut bénéficier d'Agility A2 Flex ?

Agility A2 Flex est conçu pour les organisations qui développent et évaluent l'intelligence robotique.

Les universités et les établissements d'enseignement peuvent utiliser cette plateforme pour enseigner la robotique mobile, le contrôle de la manipulation et l'interaction homme-robot par le biais d'expériences pratiques.

Les laboratoires d'IA incarnée peuvent étudier les mouvements coordonnés à deux bras, la collecte de démonstrations humaines et la manipulation basée sur l'apprentissage.

Les start-ups en robotique et les équipes de R&D industrielles peuvent utiliser ce système pour valider leurs concepts, ce qui leur permet d'explorer les flux de travail robotiques avant de s'engager dans un développement plus spécialisé.

Pour les équipes nécessitant des capacités avancées de perception et de VLA, Agility A2 Flex Ultra fournit des ressources supplémentaires pour l'évaluation des applications robotiques pilotées par l'IA.

Conclusion : De la démonstration robotique à la manipulation mobile intelligente

Le développement de robots mobiles performants ne se limite pas à un matériel puissant. Il requiert un système coordonné permettant aux chercheurs de contrôler, d'observer, d'évaluer et d'améliorer en continu le comportement des robots.

Le nouveau drone Agility A2 Flex combine une coordination corporelle complète à 27 degrés de liberté, une mobilité multidirectionnelle, une manipulation à deux bras, la téléopération en réalité virtuelle et des capacités de développement open source.

Pour les développeurs débutant en téléopération et contrôle robotique, Agility A2 Flex offre une base de recherche flexible. Pour les équipes explorant la perception avancée et l'apprentissage robotique basé sur les réseaux de neurones virtuels (VLA), Flex Ultra propose des outils supplémentaires pour prendre en charge des flux de développement plus exigeants.

En associant des expériences de manipulation pratiques au développement de la robotique ouverte, Agility A2 Flex aide les équipes de recherche à passer des concepts initiaux à des systèmes d'IA incarnés plus performants.