Nvidia: Новые модели ИИ для автономного вождения и робототехники

Компания Nvidia представила новые разработки в области инфраструктуры и моделей искусственного интеллекта, направленные на создание технологической основы для физического ИИ. Это включает роботов и беспилотные автомобили, способные воспринимать окружающий мир и взаимодействовать с ним.

На конференции NeurIPS AI в Сан-Диего гигант полупроводниковой индустрии анонсировал Alpamayo-R1 — открытую модель, сочетающую зрение, язык и действия для исследований в области автономного вождения. По заявлению компании, это первая подобная модель, ориентированная именно на эту сферу. Визуально-языковые модели способны обрабатывать как текст, так и изображения одновременно, позволяя автомобилям “видеть” окружение и принимать решения на основе полученных данных.

Alpamayo-R1 базируется на модели Nvidia Cosmos-Reason, которая анализирует решения перед их принятием. Семейство моделей Cosmos было впервые представлено в январе 2025 года, а дополнительные модели появились в августе.

Технологии, подобные Alpamayo-R1, являются ключевыми для достижения уровня 4 автономного вождения — полной автономии в определенных зонах и при специфических условиях, как отмечает Nvidia в своем блоге.

Nvidia надеется, что такие модели рассуждения придадут автономным транспортным средствам “здравый смысл”, необходимый для принятия сложных водительских решений, подобно людям.

Новая модель доступна на платформах GitHub и Hugging Face.

Вместе с новой моделью зрения, Nvidia также разместила на GitHub пошаговые руководства, ресурсы для инференса и рабочие процессы постобучения под общим названием Cosmos Cookbook. Это поможет разработчикам эффективнее использовать и обучать модели Cosmos для своих задач. Руководство охватывает курирование данных, генерацию синтетических данных и оценку моделей.

Эти анонсы следуют за активным стремлением компании развивать физический ИИ как новое направление для своих передовых ИИ-GPU.

Соучредитель и генеральный директор Nvidia Дженсен Хуанг неоднократно заявлял, что следующая волна ИИ — это физический ИИ. Главный научный сотрудник Nvidia Билл Дэйли также поддержал это мнение, подчеркнув важность физического ИИ в робототехнике.

“Я думаю, что в конечном итоге роботы будут играть огромную роль в мире, и мы хотим быть создателями “мозгов” для всех роботов”, — сказал Дэйли. “Для этого нам необходимо начать разработку ключевых технологий.”