Автор bmlabs 
NVIDIA представила новую платформу Cosmos с мирными foundation-моделями для робототехники и физических приложений, способную значительно ускорить разработку систем физического искусственного интеллекта. Эти модели — нейросети, которые умеют предсказывать и генерировать физически корректные видео виртуальных миров на основе разнообразных данных: текста, изображений, видео и движений. Это позволяет создавать реалистичные симуляции и синтетические данные для обучения и тестирования роботов и автономных транспортных средств.
Платформа Cosmos включает не только сами физически осведомлённые модели, но и инструменты ускоренной обработки данных, токенизаторы, средства ограничения (guardrails) и фреймворк для настройки и оптимизации моделей под конкретные задачи. Все это открыто и доступно разработчикам под разрешительной лицензией, что делает инновации доступными широкому сообществу, от стартапов до крупных компаний.
Новинка уже получила признание экспертов и стала основой для сотрудничества с ведущими компаниями в области робототехники и автопрома, такими как Agile Robots, XPENG, Uber и многие другие. NVIDIA подчёркивает, что Cosmos — это своего рода «ChatGPT» для робототехники, фундаментальный шаг к тому, чтобы сделать продвинутый физический AI доступным каждому разработчику.
Таким образом, платформа Cosmos открывает новые горизонты в создании умных роботов и автономных систем, позволяя им лучше понимать физический мир и взаимодействовать с ним в реальном времени. Это важный шаг к более эффективным и надёжным решениям в разных отраслях — от производства и логистики до медицины и транспорта.