Что такое Runway
Runway – это сервис для монтажа и генерации видео, который использует искусственный интеллект и машинное обучение. Он предоставляет пользователю возможность создавать уникальные и профессионально выглядящие видеоматериалы без необходимости использования сложных программ и навыков в области монтажа.
С помощью Runway можно создавать разнообразные видео, включая рекламные ролики, короткометражные фильмы, музыкальные клипы, анимацию и многое другое. Сервис предоставляет широкий выбор инструментов и эффектов, которые можно применять к видео, чтобы придать им уникальный стиль и настроение.
Одной из главных особенностей Runway является его способность использовать искусственный интеллект для автоматической обработки видео. С помощью машинного обучения, сервис может анализировать содержимое видео, определять объекты и лица на кадрах, изменять цвета и освещение, улучшать качество и многое другое. Это позволяет пользователям легко создавать профессионально выглядящие видео с минимальными усилиями.
В июне Runway запустила второе поколение своей нейросети для создания видео – Gen-2. Достаточно описать сцену, чтобы получить короткий видеофрагмент. Gen-2 также может менять уже существующее видео: накладывать маски, добавлять стилизацию, полностью менять картинку или какой-то объект на ней.
Сервис Runway доступен через веб-браузер и имеет интуитивно понятный интерфейс, что делает его простым в использовании даже для новичков в области видеомонтажа. Также доступно для скачивания мобильное приложение для iOS. Он предлагает как бесплатные, так и платные планы подписки, в зависимости от потребностей и требуемых функций пользователя.
Как зарегистрироваться
Переходим на сайт https://runwayml.com/.
Затем нажимаем «Try Runway for free». Зарегистрироваться в сервисе можно через Google или Apple аккаунт или создать аккаунт в сервисе, введя адрес электронной почты.
После регистрации открывается окно с предложением выбрать тариф.
Gen-2 – платная нейросеть, но при регистрации бесплатно получаем 125 кредитов для тестирования инструментов сервиса. Для выбора бесплатного тарифа нажимаем «Try For Free».
Как использовать, какие функции есть
Интерфейс сервиса лаконичен и интуитивно понятен. Слева – панель инструментов, которая поделена на 3 категории: для работы с видео, для работы с изображением и другие. Также, для удобства пользователя, для быстрого поиска, инструменты, на основе нейросети Gen-2: создание видео на основе картинки-референса и текстового запроса, выделены отдельно в центральной части сайта. Также другие популярные инструменты вынесены в «Popular AI Magic Tools».
Если пролистнуть сайт чуть ниже, отображается раздел «Discover and Remix» с вдохновляющими примерами того, что может сделать Gen-2. Отсюда можно легко использовать те же самые подсказки, чтобы начать создавать свои собственные видеоролики.
Создадим видео с помощью Gen-2 на основе картинки-референса и текстового запроса. Нажимаем «Start with Image» или «Start with Text». Открывается рабочая область.
Здесь можно выбрать на основе какого запроса будет сгенерировано видео:
- «Text» – на основе текстового описания;
- «Image» – на основе изображения-референса;
- «Image+Description» – на основе изображения-референса (будет использовано в качестве первого кадра) + дополнительное текстовое описание того, как движется.
Дополнительно имеются следующие настройки:
Если нажать на иконку под номером «1», то откроется дополнительное окно со следующими настройками:
- «Seed» – число, которое определяет случайность генерации. Можно сохранить номер для будущих генераций, если понравился результат.
- «Interpolate» – позволяет сгладить кадры видео. Если включить ее, получим более плавное и естественное видео.
- «Upscale» – позволяет улучшить разрешение видео. Если включить ее, получим более четкое и детализированное видео. Недоступна в бесплатной версии сервиса.
- «Remove watermark» – на сгенерированном видео будет отсутствовать водяной знак сервиса. Недоступна в бесплатной версии сервиса.
Если нажать на иконку под номером «2», то откроется дополнительное окно где можно увеличить или уменьшить интенсивность движения в видео.
Если нажать на иконку под номером «3», то откроется дополнительное окно, в котором можно настроить движение камеры, будто если бы снимал сам пользователь.
Вводим текстовое описание в соответствующее поле, при необходимости изменяем дополнительные настройки. Запрос не должен превышать 320 символов. Кроме того, не получится задать длительность видео – оно всегда будет составлять 4 секунды. Промпт лучше писать на английском языке, на русском может не понять.
Наш промпт:
Fox in the autumn forest in the rain on the background of golden leaves — Лиса в осеннем лесу под дождём на фоне золотых листьев
Нажимаем «Generate» и немного ждем.
Результат можно сохранить, нажав иконку «Download».
Также сервис предоставляет возможность прежде чем сгенерироваться видео, получить предварительный просмотр неподвижного кадра из будущего видео. Для этого надо нажать «Free preview». В нашем случае не получилось воспользоваться этой функцией из-за возросшего спроса на сервис.
Принцип генерации видео на основе изображения-референса аналогичен – вместо ввода текстового описания загружаем картинку.
Runway предлагает и другие инструменты для работы. Например:
Inpainting – для удаления объекта с видео. Загружаем видео, нажав «Upload», затем перетаскиваем его мышкой из списка «Assets» на рабочую область. С помощью кисти выделяем объект, который нужно удалить. Затем нажимаем «Done Inpainting».
Remove Background – для автоматического удаления или замены фона. Загружаем видео, нажав «Upload», затем перетаскиваем его мышкой из списка «Assets» на рабочую область. Чтобы оставить объект на видео, нужно просто кликнуть по нему мышкой. Чтобы убрать лишнее выделение, на правой боковой панели выбираем функцию «Exclude». Загружаем изображение, которое станет новым фоном. Чтобы новое изображение стало фоном для видео, перетаскиваем на дорожку под видео.
Какие есть лимиты и ограничения
Бесплатная версия предоставляет 125 кредитов, 3 бесплатных проекта общим размером до 5Гб, ограниченная длительность генерируемого видео с водяным знаком.
Для снятия ограничений доступны следующие тарифные планы:
- Standard – от 12$/мес. Включает 625 кредитов, возможность докупать кредиты, повышать разрешение, убирать водяной знак.
- Pro – от 28$/мес. Включает то же самое, что и стандартная и 2250 кредитов.
Аналоги
- Kapwing – это онлайн-сервис, который позволяет пользователям создавать и редактировать видео без необходимости устанавливать специальное программное обеспечение на своем компьютере. Он предоставляет широкий спектр инструментов для обработки видео, аудио и изображений, что делает его полезным инструментом для создания контента для социальных сетей, блогов, презентаций и других проектов.
- Genmo – это веб-платформа, которая позволяет создавать видео на основе текстового описания. С помощью Genmo можно создавать анимированные короткометражки, рекламные ролики и другие видео на основе текстового сценария. Процесс создания видео состоит из нескольких этапов: ввод текстового описания, выбор стилей анимации и генерация видео.
- Fliki — это нейросеть, с помощью которой можно преобразовать текст в видео, а также озвучить его.
Также рекомендуем ознакомиться с нашей статьей «Нейросети для создания видео».
Выводы
Сгенерированные видео иногда получаются «странными», но если команда Runway продолжит развивать сервис и приложат достаточно усилий, то, полагаем, что в скором времени получим качественный и лёгкий в использовании инструмент для работы с видео.
