Робот Figure с ИИ OpenAI показал, что способен на многое

Стартап Figure появился совсем недавно, в прошлом году, собрав инженеров из Boston Dynamics, Tesla, Google DeepMind и Archer Aviation для создания «первого в мире коммерчески успешного универсального человекоподобного робота». В октябре у компании уже был стоящий на двух ногах и выполняющий базовые действия автономный робот, а в начале 2024 года он уже был готов к работе на заводе BMW.

Вскоре после этого Figure https://hightech.plus/2024/03/03/openai-sozdast-ii-dlya-robo... об успешном раунде финансирования, в котором приняли участие, в частности, Microsoft, Nvidia и OpenAI. Последняя, вдобавок, согласилась разработать для андроидов Figure новое поколение ИИ-моделей. И теперь нам показали, что это значит.

Как подтвердил глава Figure Бретт Эдкок, встроенные в робота F1 камеры посылают данные в большую зрительно-языковую модель, обученную OpenAI, https://venturebeat.com/ai/openai-powers-a-robot-that-can-ha... Venture Beat. Собственная нейросеть Figure «тоже получает картинку с частотой 10 Гц через камеры робота». Также модель OpenAI отвечает за способность андроида понимать человеческую речь. Все эти потоки информации преобразуются нейросетью в «быстрые, низкоуровневые, ловкие действия» F1.