LingBot-VLA от Ant Group: AI-модель для управления роботами с двумя руками

LingBot-VLA – это основа для создания систем управления манипуляторами, способная работать с различными роботами с двумя руками. Модель обучена на 20 тысячах часов данных, полученных при телеуправлении девятью различными роботами, и протестирована на большом наборе задач GM-100 на трех платформах.

Особое внимание уделено обобщению данных, эффективности дообучения и высокой скорости обучения на стандартных графических процессорах. LingBot-VLA интегрирует модуль LingBot-Depth для лучшего понимания глубины объектов, что особенно важно для таких задач, как вставка, складывание и работа с захватом.

Модель демонстрирует высокую точность и эффективность, превосходя другие системы в задачах манипулирования в реальном мире. Код проекта доступен в открытом доступе.