Nvidia запустила Cosmos 3, новыйый фундаментальный модель для физического ИИ, который позволяет системам понимать окружающий мир и действовать в нём. ИИ теперь может предсказывать события в реальном времени и генерировать действия для конкретных задач, что открывает новые горизонты для применения в робототехнике, автономных транспортных средствах и умных пространствах.
Что нового в Cosmos 3
В отличие от предыдущих версий, которые разбивали процесс на множество различных моделей, Cosmos 3 объединяет физическое понимание, генерацию мира и генерацию действий в одном решении. В своей основе модель использует архитектуру Mixture-of-Transformers (MoT), состоящую из двух башен: Tower Reasoner для обработки мультимодальных данных и Tower Generator для прогноза действий и генерации видео. Это значительно упрощает разработку, исключая необходимость в интеграции нескольких моделей.
Основные характеристики и возможности
Доступно две версии модели: Cosmos 3 Nano с 16 миллиардами параметров и Cosmos 3 Super с 64 миллиардами. Первая рассчитана на использование на настольных ПК с GPU серии RTX PRO 6000 для обеспечения быстрого отклика в робототехнике. Вторая версия предназначена для мощных дата-центров, обеспечивая максимальные показатели производительности для сложных задач.
Были также представлены открытые датасеты для приложений в области робототехники и автономного вождения, а также микросервисы Cosmos NIM, которые обеспечивают простую и оптимизированную развертку моделей на GPU от Nvidia. Таким образом, разработчики получают доступ к полному спектру инструментов для внедрения физического ИИ.
Что это значит для разработчиков и бизнеса
К запуску Cosmos 3 можно отнестись с интересом, особенно для российских команд, работающих в сфере ИИ и робототехники. Открытость инструментов и моделей значительно упростит работу стартапов и исследовательских групп, не имеющих больших ресурсов. Если ваша компания разрабатывает или планирует разрабатывать технологии на базе физического ИИ, намечайте интеграцию новых подходов в свои процессы и обучение сотрудников новым инструментам уже сейчас.
На горизонте ожидается рост числа приложений по использованию новых моделей физического ИИ. На 2025 год аналитики оценивают, что рынок ИИ в робототехнике вырастет на 30%, что даст толчок для более широкого применения таких продуктов в различных отраслях.