Компания NVIDIA представила платформу Cosmos — инновационную технологию, которая может стать для робототехники тем же, чем ChatGPT стал для обработки текста. Новая система включает Искусственный интеллект Cosmos Reason с 7 миллиардами параметров, способный «мыслить» как человек и понимать физический мир.
Платформа Cosmos — это не просто очередная нейросеть, а целая экосистема для создания «физического ИИ». В основе лежат мирообразующие модели (World Foundation Models), обученные на 20 миллионах часов видео.
Cosmos Reason умеет планировать действия, рассуждать о последствиях и принимать решения на основе физических законов. Если обычный ИИ знает, что яблоко красное, то Cosmos понимает, что если его отпустить — оно упадет, а если сильно бросить в стену — разобьется. То есть машины получат возможность понимать причинно-следственную связь и вести себя как люди.
Любой ребенок после рождения – чистый лист. Он познает мир, папа и мама объясняют ему как себя вести в нем, принимает правила социума. Cosmos Transfer-2 делает примерно то же самое. Платформа позволяет создавать синтетические данные — виртуальные тренировочные площадки для роботов. Зачем рисковать дорогим железом в реальном мире, когда можно натренировать его в симуляции?
Проблема современной робототехники — дефицит качественных данных для обучения. Собрать миллионы часов реальных действий роботов трудоемко и дорого. К тому же предугадать все ситуации, которые ожидают умную машину в этом большом и опасном мире, – просто невозможно. Cosmos решает эту проблему, создавая бесконечные виртуальные миры для тренировок.
Технология интегрируется с платформой NVIDIA Omniverse (инструмент для совместной работы и моделирования трехмерных миров), позволяя создавать цифровые двойники заводов, складов и городов. Роботы смогут учиться работать на автомобильном конвейере или доставлять пиццу, не выходя из лаборатории.
Среди первых пользователей — компании Agility Robotics, Figure AI, Uber и XPENG. Это говорит о серьезности намерений индустрии. Разработчики получают открытый доступ к моделям через GitHub и Hugging Face, что ускорит развитие технологий.
Платформа может радикально изменить скорость разработки роботов — от многих лет до нескольких месяцев.
