Runway: как сделать видео из изображения — Нейросреда | 7Post
Что такое Image to Video в Runway
Image to Video превращает статическое изображение в видеоклип.
В Runway изображение определяет исходную композицию, объект, освещение и стиль, а текстовый промпт описывает то, что должно произойти с изображением во времени.
Это важный принцип.
Если фотография уже показывает женщину на улице, не обязательно еще раз подробно описывать ее внешность.
Лучше объяснить:
Она медленно идет вперед, камера плавно движется рядом с ней.
Как создать видео из фотографии
Шаг 1. Выберите изображение
Для хорошего результата исходная картинка должна быть качественной.
Runway рекомендует использовать изображение без визуальных артефактов. Размытые лица, руки и другие дефекты могут стать еще заметнее после превращения картинки в видео.
Поэтому перед генерацией проверьте:
- лицо;
- руки;
- контуры объекта;
- освещение;
- фон;
- мелкие детали.
Шаг 2. Загрузите изображение
В режиме Image to Video изображение становится исходной точкой генерации.
После загрузки остается написать текстовый запрос.
И здесь многие пользователи совершают ошибку.
Они снова описывают картинку:
Молодая девушка стоит на берегу моря, у нее длинные волосы...
Если все это уже видно на фотографии, такой текст не обязательно приносит пользу.
Шаг 3. Опишите движение
Runway рекомендует концентрироваться на движении.
Например:
The woman slowly turns toward the camera while her hair moves in the wind.
Или:
The camera slowly pushes in toward the subject as the wind moves through her hair.
То есть изображение отвечает за содержание кадра, а промпт — за движение.
Пример: портрет
Допустим, есть портрет девушки.
Промпт:
The subject slowly turns her head toward the camera. Her hair gently moves in the wind. The camera slowly pushes in toward her face. Natural subtle facial movement.
Здесь описаны:
- движение головы;
- движение волос;
- движение камеры;
- небольшая мимика.
Пример: автомобиль
Для фотографии автомобиля:
The camera slowly tracks from left to right around the car. Reflections of city lights move across the body. Light rain falls and water droplets slide across the windshield.
Исходная фотография уже определяет автомобиль.
Промпт задает развитие сцены.
Пример: пейзаж
The camera slowly moves forward over the lake. Mist drifts across the surface of the water. Tree branches gently move in the wind. Birds fly in the distant background.
Здесь камера и окружающая среда создают ощущение движения даже без главного персонажа.