NVIDIA Cosmos 2.5: бесконечные миры для автономного вождения и робототехники

В этом видео с конференции NVIDIA GTC DC я беседую с Кэти Уошоу из NVIDIA о базовых моделях мира Cosmos Predict 2.5 и Cosmos Transfer 2.5 и о том, как они ускоряют разработку автономных транспортных средств и робототехники 4-го уровня.

Кэти проводит живую демонстрацию, показывающую, как Cosmos Predict 2.5 может генерировать целые сценарии многокамерного вождения всего из нескольких изображений, сохраняя пространственную и временную согласованность между видами. Она также демонстрирует, как Cosmos Transfer 2.5 может мгновенно преобразовать тот же сценарий в новые условия, такие как снег, дождь или ночное вождение, для дополнения данных.

Мы также рассмотрим, как эти модели взаимодействуют с Omniverse NuRec, LIDAR Gen и растущей экосистемой моделей мира NVIDIA, привнося сложность реального мира в симуляцию.

Обе модели уже доступны на Hugging Face и могут быть настроены для ваших собственных сценариев моделирования и обучения.

🎬 Главы:
00:00 Введение – Cosmos для автономного вождения и робототехники
01:12 Predict 2.5: Генерация сценариев автономного вождения
02:13 Transfer 2.5: Перенос стилей с учётом погодных условий и освещения
06:05 Будущие сценарии использования Cosmos

🧠 Ресурсы
Predict 2.5 → https://research.nvidia.com/labs/dir/...
Transfer 2.5 → https://research.nvidia.com/labs/dir/...
Cosmos Drive Dreams → https://research.nvidia.com/labs/toro...
DreamGen → https://research.nvidia.com/labs/gear...

#NVIDIA #GTC #Cosmos #Автономное Вождение #Робототехника #ИИ #Моделирование #FoundationModels