Запуск нового продукта: Agility A2 Flex объединяет мобильные манипуляции и исследования в области воплощенного искусственного интеллекта.

По мере того как робототехника выходит за рамки стационарных рабочих мест, разработчики все чаще ищут системы, способные перемещаться в различных средах, взаимодействовать с объектами и выполнять скоординированные задачи манипулирования. Однако превращение этих возможностей в практическое роботизированное решение остается сложной задачей, особенно когда мобильность, восприятие и управление манипулятором должны работать вместе.

Компания Foxtech представляет новый Agility A2 Flex — 27-осевой колесный робот с двумя манипуляторами, разработанный для мобильных манипуляций, дистанционного управления всем телом в виртуальной реальности и исследований в области воплощенного искусственного интеллекта.

Благодаря сочетанию многонаправленной мобильной базы, регулируемого подъемного механизма, двух роботизированных манипуляторов и интегрированной архитектуры управления, Agility A2 Flex предоставляет исследователям и разработчикам единую платформу для изучения более сложных моделей поведения роботов.

Платформа, доступная в конфигурациях Agility A2 Flex и Agility A2 Flex Ultra , поддерживает различные потребности в разработке, от дистанционного управления и контроля движений с помощью человека до обучения и проверки моделей VLA.

Почему разработчикам робототехники нужно нечто большее, чем просто стационарная роботизированная рука?

Традиционные роботизированные манипуляторы эффективны для задач, выполняемых в пределах заданного рабочего пространства. Однако в реальных условиях редко удается ограничиться одним фиксированным положением.

Роботу, работающему в лаборатории, на складе или в экспериментальной среде, может потребоваться приближаться к объектам с разных направлений, регулировать рабочую высоту и координировать движения обеих манипуляторов. Эти требования создают проблемы, которые невозможно решить только с помощью управления роботизированными манипуляторами.

Робот Agility A2 Flex решает эти проблемы, объединяя мобильность и манипуляцию в рамках единой роботизированной системы.

Его 27-степенная архитектура включает в себя двойные манипуляторы, захваты, подвижную головку, вертикальный подъемник и мобильную базу. Это позволяет разработчикам изучать, как различные компоненты робота могут взаимодействовать для выполнения более сложных операций.

Вместо того чтобы сосредотачиваться только на движениях отдельных суставов, исследователи могут разрабатывать и оценивать поведение роботов, управляющих всем телом.

Как Agility A2 Flex адаптируется к различным условиям работы?

Одна из ключевых проблем при манипулировании объектами с помощью мобильных устройств — это достижение объектов, расположенных в разных положениях и на разной высоте.

Робот Agility A2 Flex оснащен мобильной базой 4W4S (полный привод, рулевое управление всеми четырьмя колесами), которая поддерживает многонаправленное движение. Это позволяет роботу менять свое положение, не ограничиваясь традиционными схемами движения вперед и назад.

Встроенный вертикальный подъемный механизм высотой 700 мм дополнительно расширяет возможности роботизированных манипуляторов, позволяя им работать на разной высоте.

В сочетании с двумя 7-суставными роботизированными манипуляторами, каждый из которых обеспечивает диапазон работы приблизительно 714 мм, платформа поддерживает скоординированный захват, манипулирование и перемещение объектов.

Эти возможности особенно полезны для разработки мобильных рабочих процессов манипулирования объектами, расположенными на столах, полках, контейнерах и других предметах в рабочем пространстве.

Для команд, занимающихся робототехникой, это означает больше возможностей для тестирования стратегий манипулирования в изменяющихся условиях окружающей среды, вместо того чтобы полагаться исключительно на стационарные демонстрации.

Как разработчики могут тестировать задачи роботов, не создавая предварительно автономные алгоритмы?

Разработка автономного поведения роботов требует обширных экспериментов. Перед обучением модели ИИ исследователям часто необходимо понять, можно ли физически выполнить ту или иную задачу и как должны координироваться различные компоненты робота.

Благодаря встроенной системе дистанционного управления в виртуальной реальности, охватывающей все тело, Agility A2 Flex обеспечивает доступную отправную точку.

С помощью входящей в комплект VR-гарнитуры Meta Quest 3S операторы могут управлять манипуляторами, захватами, головой, подъемным механизмом и мобильной базой робота.

Это позволяет исследователям демонстрировать и оценивать задачи манипулирования напрямую, без предварительной разработки полной автономной стратегии управления.

Например, оператор может направлять робота в скоординированной последовательности действий с объектами, наблюдать за реакцией робота и выявлять области, где планирование движения или стратегии управления могут нуждаться в улучшении.

Те же возможности дистанционного управления поддерживают сбор данных, полученных в ходе демонстраций человеком, что открывает возможности для последующих исследований в области обучения роботов.

Разделяя первоначальную проверку задач и разработку автономной политики, исследовательские группы могут установить практические рабочие процессы, прежде чем переходить к более сложным экспериментам в области искусственного интеллекта.

Как открытая платформа разработки помогает снизить сложности интеграции?

Для университетов, исследовательских лабораторий и стартапов в области робототехники совместимость программного обеспечения зачастую так же важна, как и возможности аппаратного обеспечения.

Разработка мобильной роботизированной системы из отдельных компонентов может потребовать значительных усилий для соединения контроллеров, датчиков, систем планирования траектории движения и коммуникационных интерфейсов.

Agility A2 Flex построен на Ubuntu 22.04 и ROS 2 Humble, предоставляя открытую среду разработки, знакомую многим командам, занимающимся робототехникой.

Как Agility A2 Flex, так и Flex Ultra поддерживают управление суставами в реальном времени по протоколу ROS 2 и планирование движений манипулятора по протоколу MoveIt 2.

Эти возможности позволяют разработчикам работать над перемещением роботов, планированием манипуляций и специализированными приложениями управления в рамках устоявшейся экосистемы программного обеспечения для робототехники.

Для исследовательских групп открытая архитектура разработки также обеспечивает большую гибкость для экспериментирования с различными алгоритмами, модификации стратегий управления и расширения платформы по мере развития требований проекта.

Может ли Agility A2 Flex поддержать переход от дистанционного управления к робототехнике на основе искусственного интеллекта?

Дистанционное управление с участием человека является важной частью развития робототехники, но многие исследовательские проекты направлены на переход от дистанционного управления к роботизированному поведению, основанному на обучении.

Для этого перехода требуется сочетание демонстрационных данных, анализа окружающей среды, вычислительных ресурсов и инструментов разработки моделей искусственного интеллекта.

Agility A2 Flex обеспечивает основу для дистанционного управления, контроля движения и сбора демонстрационных данных. Для команд, работающих над более сложными приложениями искусственного интеллекта, Agility A2 Flex Ultra предоставляет дополнительные возможности.

В конфигурацию Ultra входят две наручные камеры Intel RealSense D405, лидар Livox MID-360S, дополнительная камера RealSense D435i, установленная на основании устройства, и графический процессор NVIDIA RTX 3090.

Он также поддерживает навигацию Nav2 и включает конфигурацию VLA с использованием π0.5 в качестве модели по умолчанию.

Благодаря этим дополнительным компонентам исследователи могут изучать, как визуальное восприятие, действия роботов и модели обучения взаимодействуют во время выполнения задач по манипулированию объектами.

Конфигурация Ultra поддерживает обучение модели VLA, вывод результатов и проверку рабочих процессов, что делает ее подходящей для команд, изучающих переход от демонстраций человеком к управлению роботами с помощью ИИ.

Какая конфигурация подходит для вашего исследовательского проекта?

Выбор роботизированной платформы зависит от целей разработки проекта, а не просто от выбора самой мощной аппаратной конфигурации.

Для команд, в первую очередь заинтересованных в дистанционном управлении с использованием виртуальной реальности, планировании движений роботов, экспериментах по манипулированию в движении и сборе данных с демонстраций с участием людей, стандартная платформа Agility A2 Flex предоставляет необходимую аппаратную и программную среду.

В состав системы входят контроллер X86, установленная на голове камера Intel RealSense D435i, система управления суставами ROS 2 и система планирования движений MoveIt 2.

Для исследователей, которым необходимы более полные данные о восприятии, мобильная навигация, локальные вычисления на графическом процессоре и интегрированные возможности разработки VLA, Agility A2 Flex Ultra предлагает более комплексную конфигурацию.

Это различие особенно важно для клиентов, планирующих долгосрочные проекты в области воплощенного ИИ. Стандартная конфигурация Flex не включает конфигурацию VLA, в то время как Flex Ultra специально оснащен для обучения, вывода и проверки с использованием VLA.

Предлагая две конфигурации, платформа позволяет клиентам выбрать среду разработки, которая лучше соответствует их текущим исследовательским задачам.

Какие возможности для развития робототехники в будущем предоставляет Agility A2 Flex?

Исследования в области робототехники редко ограничиваются первоначальными задачами. Проект, начинающийся с дистанционного управления, впоследствии может расшириться до управления на основе машинного обучения, более сложной обработки объектов или дополнительных возможностей сенсорного восприятия.

Agility A2 Flex поддерживает этот прогресс благодаря своей расширяемой аппаратной архитектуре.

Разработчики могут изучить возможность интеграции с носимым экзоскелетом ExoArm-7 Pro для альтернативных методов дистанционного управления. Дополнительные подвижные руки могут поддерживать исследования, связанные с более сложным захватом и манипуляцией.

Платформа также поддерживает изготовление на заказ концевых захватов, устройств машинного зрения и OEM/ODM-настройку, обеспечивая дополнительную гибкость для удовлетворения специализированных потребностей в разработке.

Эти варианты особенно ценны для научно-исследовательских учреждений и инженерных групп, стремящихся к созданию роботизированной платформы, которая могла бы развиваться вместе с их проектами.

Дополнительный носимый экзоскелет ExoArm-7 Pro и гибкие кисти рук продаются отдельно.

Кому может быть полезна программа Agility A2 Flex?

Система Agility A2 Flex разработана для организаций, занимающихся разработкой и оценкой роботизированного интеллекта.

Университеты и образовательные учреждения могут использовать эту платформу для обучения мобильной робототехнике, управлению манипуляциями и взаимодействию человека и робота посредством практических экспериментов.

В лабораториях, использующих воплощенный искусственный интеллект, можно исследовать скоординированные движения обеих рук, сбор демонстрационных данных от людей и манипуляции на основе машинного обучения.

Робототехнические стартапы и промышленные научно-исследовательские группы могут использовать эту систему для проверки концепции, что позволяет им изучать роботизированные рабочие процессы, прежде чем приступать к более специализированным разработкам.

Для команд, которым требуются расширенные возможности распознавания объектов и VLA-технологий, Agility A2 Flex Ultra предоставляет дополнительные ресурсы для оценки роботизированных приложений, использующих искусственный интеллект.

Заключение: От демонстрации робототехники к интеллектуальному мобильному манипулированию

Для разработки высокоэффективных мобильных роботов требуется нечто большее, чем просто мощное оборудование. Необходима скоординированная система, позволяющая исследователям контролировать, наблюдать, оценивать и постоянно совершенствовать поведение роботов.

Недавно выпущенный Agility A2 Flex объединяет в себе координацию движений всего тела по 27 степеням свободы, многонаправленную мобильность, управление двумя руками, дистанционное управление в виртуальной реальности и возможности разработки с открытым исходным кодом.

Для разработчиков, начинающих работу с дистанционным управлением и робототехникой, Agility A2 Flex предоставляет гибкую исследовательскую основу. Для команд, изучающих передовые методы восприятия и обучение роботов на основе VLA, Flex Ultra предлагает дополнительные инструменты для поддержки более сложных рабочих процессов разработки.

Благодаря объединению практических экспериментов по манипулированию объектами с разработкой открытой робототехники, Agility A2 Flex помогает исследовательским группам перейти от первоначальных концепций к более совершенным воплощенным системам искусственного интеллекта.