Новый ИИ,созданный специально для роботов предсказывает результаты своих действий

Китайская компания Robbyant, входящая в состав Ant Group, представила LingBot-VA 2.0 — открытую нейросеть для робототехники. Эта ИИ, созданная специально для управления роботами, отличается от традиционных систем, оптимизированных для создания цифрового контента. LingBot-VA 2 учит роботов и прогнозирует, как действия изменят окружающую среду, а также выбирает дальнейшие шаги на основе этих прогнозов.

Система работает на одном графическом процессоре и осваивает новые задачи всего за 20 демонстраций. Роботы с LingBot-VA 2.0 уже умеют готовить завтрак, распаковывать посылки, складывать одежду и выполнять другие манипуляции.

Большинство ИИ-систем для роботов основаны на видеогенеративных моделях, изначально разработанных для создания цифрового контента. Однако такие модели не всегда эффективны в реальных условиях, так как оптимизированы под визуальное качество, а не физическую точность или скорость реакции.

LingBot-VA 2.0 создана с нуля специально для взаимодействия с физическим миром. Она не просто воспроизводит заученные движения, а сначала прогнозирует, как конкретное действие повлияет на окружение, и только потом выбирает следующий шаг.

Для этого разработчики внедрили четыре ключевых технических решения:

1. Семантический токенизатор — сжимает визуальную информацию и данные о действиях, улучшая преобразование инструкций в движения.

2. Причинно-следственная стратегия предобучения — обеспечивает корректную временную последовательность прогнозов.

3. Архитектура «Смешанные эксперты» — наращивает возможности модели без потери скорости.

4. Асинхронный механизм вывода — позволяет роботу прогнозировать дальнейшие состояния прямо во время выполнения текущих задач, непрерывно обновляя решения на основе реальных наблюдений.

LingBot-VA 2.0 обеспечивает управление в реальном времени с частотой обратной связи 150 Гц на одном GPU. Это позволяет роботу быстро адаптироваться к изменениям и выполнять задачи с высокой точностью.

Нейросеть способна осваивать новые задачи всего за 20 демонстраций, что делает её идеальной для промышленного применения, где условия работы могут меняться. В компании уже протестировали LingBot-VA 2.0 на таких задачах, как приготовление завтрака, распаковка посылок, вставка трубок, сборка винтовых соединений, складывание одежды и открытие ящиков. Кроме того, система показала высокие результаты в робототехнических бенчмарках RoboTwin 2.0 и LIBERO, превосходя существующие методы в ряде сценариев.

LingBot-VA 2.0 также обладает долговременной памятью, что позволяет ей различать визуально похожие, но контекстуально разные ситуации и выполнять сложные многоэтапные операции. Компания Robbyant планирует, что LingBot-VA 2.0 станет частью открытой экосистемы для воплощённого искусственного интеллекта и ускорит внедрение роботов в жизнь людей.

Телеграм: t.me/ainewsline

Источник: vk.com

Комментарии: