Компания Mimic Robotics представила FLUX-mimic — новую модель Video-Action, созданную совместно с Black Forest Labs. Она позволяет роботам учиться и выполнять сложные манипуляционные задачи в реальных промышленных условиях.
Что такое FLUX-mimic
Mimic Robotics занимается физическим ИИ и разрабатывает Video-Action-модели для промышленной автоматизации. FLUX-mimic соединила опыт Mimic в обучении роботов, ловких манипуляциях и внедрении в производство с передовой архитектурой визуального интеллекта от Black Forest Labs — их новой моделью FLUX 3.
Ранняя работа Mimic, «mimic-video», положила начало Video-Action-моделям: они брали предобученную модель генерации видео и добавляли ей способность предсказывать действия робота. FLUX-mimic развивает эту основу, но уже с архитектурой, заточенной под физический ИИ.
Принципиальное отличие от других моделей
Большинство современных конвейеров обучения роботов строятся на Vision-Language-Action-моделях. Их основа предобучена на статичных парах «изображение-текст». Поэтому физическую динамику им приходится учить почти с нуля — на скудных и дорогих данных с реальных роботов.
FLUX-mimic работает иначе. Она строится на генеративной видеомодели, которая уже понимает динамику и поведение благодаря обучению на огромных массивах видео. А затем к ней добавляют декодер действий, который предсказывает движения робота напрямую из визуального прогноза.
Резкое сокращение времени обучения
Результат: в зависимости от сложности задачи, модель можно донастроить под конкретную манипуляцию всего за 30 минут данных с робота. Раньше на это уходило 30 часов и больше. Огромный скачок — циклы внедрения сократились с месяцев до недель.
Робин Ромбах, сооснователь и CEO Black Forest Labs, говорит: «Робототехника — одно из самых наглядных доказательств визуального интеллекта. Чтобы генерировать убедительное видео, модель должна понять, как устроен физический мир. Это же понимание позволяет в нём действовать.
Объединив изученную модель мира FLUX 3 с экспертизой Mimic в обучении и внедрении роботов, FLUX-mimic упрощает адаптацию роботов к новым задачам и производственным средам. Вместо того чтобы программировать их под одну единственную операцию».
Партнёрство с Audi
Mimic уже внедряет FLUX-mimic вместе с такими лидерами производства, как Audi. Компании изучают, как передовые Video-Action-модели могут сократить время развёртывания, инженерные затраты и объём обучения роботов для реальной промышленной автоматизации.
Audi управляет одной из самых автоматизированных производственных сетей в автопроме. Поэтому они точно видят, где традиционная автоматизация всё ещё пасует.
Несмотря на десятилетия инвестиций в промышленных роботов, задачи с гибкими деталями и тонкими манипуляциями остаются ручными. Разнообразие вариантов в премиальном автопроизводстве делает перепрограммирование роботов слишком дорогим.
Системы на основе обучения меняют эту логику. И открывают путь к долгосрочному видению Audi: превратить заводы в умные фабрики, где ИИ и роботы становятся помощниками для сотрудников. Они берут на себя повторяющуюся и физически тяжёлую работу, предлагая адресную поддержку.
Мнение партнёров
Кристоф Шнайдер из производственной лаборатории Audi говорит: «В партнёрстве с Mimic мы тестируем и внедряем FLUX-mimic. Мы видели, как эти роботы решают сложные задачи с мягкими телами — то, что было просто невозможно для обычной робототехники.
Эта новая технология может серьёзно помочь нашим сотрудникам, повысить эффективность и расширить гибкую автоматизацию на производстве и в логистике. Для нас партнёрство с такими пионерами, как Mimic и Black Forest Labs, — ключ к продвижению физического ИИ и проверке этих инноваций в реальных производственных условиях».
Штефан-Даниэль Граверт, сооснователь и директор по продуктам Mimic Robotics, добавляет: «Audi — именно тот производственный партнёр, для которого мы создавали FLUX-mimic.
Их производственная среда требует автоматизации, достаточно гибкой для неструктурированных задач, достаточно надёжной для непрерывной работы и такой, которую можно внедрить без месяцев инженерных издержек. Через это партнёрство с Audi мы хотим доказать, что FLUX-mimic способна соответствовать этим требованиям на реальных производственных линиях».
Смотрите также в каталоге ROBOWIN
Под заказ 25–55 дней, со склада по России 1–3 дня. Частному лицу карта и чек, компании счёт.