NVIDIA представила Cosmos 3 — открытую world foundation model, объединяющую визуальное рассуждение, мультимодальную генерацию и предсказание действий. Модель предназначена для роботов, беспилотных автомобилей и систем видеонаблюдения, помогая им анализировать сцены и прогнозировать развитие событий в реальном времени.
Архитектура mixture-of-transformers включает блок рассуждения, который интерпретирует происходящее в кадре, и блок генерации, создающий физически обоснованные выходные данные — от синтетического видео до траекторий движений робота. Cosmos 3 поддерживает нативную генерацию action-данных: углы сочленений, позиции захватов, точки траектории. Это позволяет дообучать модель под конкретные задачи — pick-and-place, сборку, навигацию.
Для разработчиков физического ИИ модель решает проблему сбора редких сценариев (long-tail edge cases): аварийные ситуации, нестандартные конфигурации объектов, поведение пешеходов. Cosmos 3 генерирует физически правдоподобные видеопоследовательности, которые можно использовать для обучения политик в симуляции. Команда NVIDIA GEAR уже применяет модель для создания video action models в играх, симуляциях и реальной робототехнике.
#AI #NVIDIA #Cosmos3 #PhysicalAI #Robotics #FoundationModel
Please open Telegram to view this post
VIEW IN TELEGRAM
💯1
NASA и IBM выпустили новую AI-модель, предназначенную для лунных исследований. Модель ориентирована на анализ данных о Луне и продолжает более раннее сотрудничество двух организаций по геопространственным AI-моделям (geospatial AI foundation models). Детали архитектуры и обучающих данных в первоначальном анонсе раскрыты ограниченно.
Это не первый совместный проект NASA и IBM в области фундаментальных моделей: ранее стороны работали над геопространственными AI-инструментами для анализа данных о Земле. Новый релиз переносит тот же подход на лунную тематику, что может упростить обработку больших массивов данных о поверхности и рельефе Луны.
Пока неизвестно, какие именно наборы данных использовались при обучении и будет ли модель доступна публично. Обе организации обещают раскрыть подробности позже.
#AI #NASA #IBM #Space #FoundationModel #Tech
Please open Telegram to view this post
VIEW IN TELEGRAM
👍1👏1