Nvidia дала машинам «чутьё физики» — и заходит с чипов на территорию софта

Подготовлено RD media

15 июля Nvidia представила Cosmos 3 Edge — модель, которая впервые позволяет просчитывать физику пространства прямо на борту машины, без облака. Для компании, всю историю продававшей чипы, это заметный шаг: Nvidia всё глубже заходит на территорию софта и хочет стать платформой, на которой строят физический ИИ, а не только поставщиком железа под него. Одновременно японская индустрия — FANUC, Yaskawa, Fujitsu, SoftBank, Hitachi, Kubota, Sony — заявила о намерении войти в Cosmos Coalition, глобальный альянс разработчиков таких моделей.

Объясним, что здесь новое.

Обычный ИИ работает с текстом и изображением. Он «видит» кадр, но не знает физику: что упадёт, если толкнуть, сколько до стены, перевесит ли груз. Робот с таким ИИ не предсказывает, что произойдёт через секунду от его собственного движения.

Мировая модель (world model) держит в себе физику пространства и просчитывает наперёд: сделаю действие — вот последствие. Это класс моделей, которого у LLM нет. Nvidia выпустила семейство Cosmos ещё в мае, но те версии требовали дата-центр: машина не считала сама, а отправляла данные в облако и ждала ответ. Для реального поля или карьера это неприменимо — задержка и постоянная связь.

Что изменил Cosmos 3 Edge: это программная модель, ужатая до 4 млрд параметров так, что помещается на бортовой компьютер Nvidia (Jetson) — коробку размером с книгу. Машина просчитывает физику своих действий на месте, за миллисекунды, без канала наружу.

Значение сдвига простое. Автономность до сих пор упиралась в облако: нужен дата-центр и постоянная связь, а значит — она работала только там, где есть и то, и другое. Edge-модель выносит расчёт на саму машину. Автономная техника становится возможной там, где облака нет — в поле, в карьере, на удалённом промысле. Открытая архитектура Cosmos добавляет второе: модель дообучают под конкретный сенсор и задачу, входной билет — данные и инженеры под интеграцию, покупка новой техники не требуется.

Источники: NVIDIA Newsroom, CNBC