Luma выпустила новый видеогенератор Ray3Modify

Компания Luma, занимающаяся разработкой инструментов для создания видеоконтента и 3D-моделирования, выпустила новый видеогенератор Ray3Modify. ИИ-модель позволяет не только создавать видео, но и редактировать уже существующие ролики, используя новые референсы в виде картинок. Также можно сгенерировать видео с нуля, загрузив в инструмент изображения для первого и последнего кадра. 

  • Как передаёт слова компании TechCrunch, Ray3 Modify направлена на облегчение работы монтажёров и позволяет сохранить эффект ручного редактирования при использовании искусственного интеллекта. В частности, инструмент умеет сохранять стиль исходного видеоматериала и работать с движениями, эмоциями и мимикой реальных актёров. При редактировании роликов модель сохраняет исходные движения актера, темп речи и движений, направление взгляда и эмоциональную подачу, при этом одновременно преобразуя сцену в зависимости от запроса пользователя.
  • Пользователь может предоставить референс в виде изображения или текста, на основе чего инструмент внесёт изменения в оригинал: например, можно сделать так, чтобы актёр вёл себя как определённый заданный персонаж на протяжении всего ролика. 
  • Также можно создать видео с нуля, загрузив в модель изображения для первого и последнего кадра. Модель при этом сохранит единство деталей на протяжении всего ролика, включая черты лица персонажей, черты характера, костюмы, и другие.

Источник: TechCrunch