Стартап Runway представил новый мощный генератор видео

Стартап Runway выпустил новый генератор видео на базе ИИ. Компания утверждает, что инструмент способен генерировать более чёткие и качественные видео по сравнению с существующими аналогами от других разработчиков.

  • Модель получила название Gen-4. Как описывается в блоге стартапа, нейросеть умеет генерировать персонажей, локации и объекты, воссоздавать одни и те же элементы в разных сценах и с разных позиций, а также выдерживать единый стиль, последовательность и согласованность предметов и локаций на протяжении всего ролика.
  • Для создания видео модель использует визуальные референсы в сочетании с текстовыми подсказками пользователя. Чтобы сгенерировать видеосцену, пользователю нужно загрузить в инструмент изображение-референс для создания персонажа и задать описание композиции кадра. При этом не нужно как-либо дополнительно настраивать или обучать инструмент.
  • Новинка является усовершенствованной версией модели предыдущего поколения Gen-3 Alpha. Обновленный вариант умеет генерировать более высокодинамичные ролики, делает движение персонажей более реалистичным и качественнее согласовывает между собой объекты, фон и стиль.
  • Как и все аналогичные видеогенераторы, Gen-4 обучалась на большом количестве роликов и «изучала» существующие в них закономерности для последующего создания синтетических кадров. Компания не раскрывает источники обучающих данных – при этом в прошлом году создатели видеоконтента уже подавали на стартап в суд за использование защищенных авторским правом видеоработ без разрешения. Результат этого судебного разбирательства пока не известен.

Источник: TechCrunch