Дженсен Хуанг представил на региональной конференции Nvidia в Токио Cosmos 3 Edge — компактную версию мировой модели компании на 4 миллиарда параметров. Это нейросеть позволяет роботам видеть, понимать сцену и действовать прямо на периферийном процессоре, без обращения к облаку. Вместе с новой моделью Nvidia объявила о расширении своей коалиции физического ИИ в Японии: к ней присоединились Fanuc, Yaskawa, Kawasaki Heavy Industries, Honda, Sony и еще почти два десятка местных промышленных игроков.
Модель рассчитана на новое поколение бортовых компьютеров Nvidia Jetson Thor. Компания одновременно показала два модуля на архитектуре Blackwell — старший T3000 на 865 терафлопс (единица измерения производительности чипа в операциях с пониженной точностью FP4) и младший T2000 на 400 терафлопс с 16 гигабайтами памяти. Разработчики уже сейчас могут проверить их работу через эмуляцию в пакете JetPack, а физические платы поступят в продажу позже.
Здесь и проходит граница между обычной нейросетью и мировой моделью. Языковая модель вроде GPT учится предсказывать следующее слово в тексте и ничего не знает о том, как падает предмет или на каком расстоянии находится стена. Cosmos 3 устроен иначе: в нем работают две связанные башни — Reasoner разбирает видео с камер и распознает объекты, движение и причинно-следственные связи, а Generator достраивает будущие кадры сцены и превращает это понимание в конкретную траекторию движения робота. Из наблюдения складывается модель мира, а на ее основе рождается действие.
На практике это значит, что промышленный манипулятор сам распознает деталь на конвейере и скорректирует захват, складской робот объедет неожиданно возникшее препятствие, а заводская камера отличит настоящий дефект от игры света — без запроса на сервер и без задержки, которая рядом с человеком у манипулятора стоит долей секунды, критичной для безопасности. В перспективе тот же бэкбон (опорная нейросеть) Nvidia видит основой и для гуманоидных роботов.
Воспользоваться моделью может любой разработчик. Веса открыты по лицензии Linux Foundation OpenMDW-1.1, которая разрешает коммерческое применение при указании авторства, а сам Cosmos доступен через сайт build.nvidia.com, Hugging Face и готовые контейнеры Nvidia NIM для быстрого развертывания. Через открытый фреймворк модель можно дообучить под конкретного робота, сенсор и сценарий примерно за один день, хотя реальный срок зависит от объема данных и сложности задачи.
Ускорение обучения — как раз то, ради чего вся линейка Cosmos 3 задумана. Nvidia обещает сократить цикл тренировки и проверки физического ИИ с месяцев до дней. По собственным, пока не подтвержденным независимо данным компании, тайваньский Pegatron сократил время обучения и развертывания моделей на 67%, Delta Electronics подняла точность распознавания дефектов на 17%, а китайский автопроизводитель Li Auto проводит через платформу больше 300 тысяч рендеров и симуляций в сутки.
При этом точное число роботов и устройств, для которых уже написан код, Nvidia не называет. Платформу можно поставить на любое количество бортовых компьютеров, лишь бы хватило чипов Jetson. Зато у отдельных партнеров цифры есть: UBTech, Agile Robots и Connect Tech за счет оптимизации софта освободили до 15 гигабайт памяти и смогли перейти с 64-гигабайтного модуля на вдвое более компактный, а похожий эффект в рознице, робототехнике-компаньоне и системах дорожного движения получили SandStar, GROOVE X и NoTraffic.
У выбора Токио есть свой расчет. Японская стратегия развития ИИ-робототехники, принятая в марте, ставит цель занять больше 30% мирового рынка ИИ-робототехники к 2040 году — рынка, который оценивают в 133 миллиарда долларов. За амбицией стоит и демография: местным заводам и складам банально не хватает рабочих рук. Ради этого министерство экономики, торговли и промышленности Японии (METI) вместе с консорциумом Noetra, за которым стоят SoftBank, Sony, NEC и Honda, запускает завод физического ИИ мощностью 140 мегаватт на 27 500 чипов Nvidia Rubin, собираясь вложить в него до 6,2 миллиарда долларов за пять лет. Сам Хуанг подал это красиво: «Япония создала современное производство», — намекнув, что теперь у страны есть шанс собрать его заново вокруг продуктова компании: Cosmos, Isaac и Jetson.
