Объяснение моделей преобразования текста в видео

Что касается моделей преобразования текста в видео, то способ создания клипов очень похож на способ, которым модели преобразования текста в изображение создают изображения из простых текстовых подсказок. В этом выпуске «Скрытых слоёв» мы рассмотрим, как работают эти модели изнутри, — разберемся, как они используют модели временного и пространственного сверхразрешения (SSR) для создания видео высокого разрешения из кадров изображений. Более того, вы узнаете, что модели преобразования текста в видео, такие как Imagen, представляют собой
комплекс различных моделей, работающих вместе для создания видео высокого разрешения из одного изображения и текстовой подсказки.

Ресурсы:
Посмотрите наш предыдущий выпуск → https://goo.gle/3XX0bxv
Ознакомьтесь с Imagen → https://goo.gle/3yvFNsS

Главы:

0:00 — Введение
0:16 — Что такое модели преобразования текста в видео?
0:34 — Как модели преобразования текста в видео создают видео?
1:40 — В чём сложность моделирования видео?
2:04 — Как получить видео высокого разрешения с помощью моделей преобразования текста в видео, таких как Imagen?
3:38 — Обзор работы Imagen
3:47 — Оставляйте вопросы в комментариях!

Смотрите другие выпуски «Скрытых слоёв» → https://goo.gle/HiddenLayers
Подпишитесь на канал Google Research → https://goo.gle/GoogleResearch