Выпущена ИИ-модель для генерации виртуальных миров — Genie 4

Google выпустила обновленный вариант своего ИИ-генератора Genie 4. Новейшая версия умеет создавать реалистичные интерактивные миры с возможностью вносить изменения прямо по ходу процесса работы, а также в режиме реального времени генерировать аудио, соответствующее картинке, включая звуки природы, фоновую музыку и диалоги персонажей.

Предыдущая версия модели, Genie 3, была выпущена около года назад. В отличии от неё, в новом варианте предлагается возможность свободно редактировать создаваемый мир – например, менять погоду в кадре или ракурс съемки, а также в любой момент добавлять новых людей или объекты. Модель способна соблюдать последовательность сюжета в течение двух минут (у Genie 3 этот лимит ограничивался минутой), а также более естественно передавать мимику людей и поведение объектов, в том числе с более точным соблюдением законов физики. 

Инструмент тесно интегрирован с базовой ИИ-моделью от Google – Gemini. Последняя выполняет роль “режиссёра”, планируя пошаговые действия и проверяя каждый кадр, в то время как сама Genie отвечает за генерацию визуальной составляющей. 

Также компания провела эксперимент с привязыванием к Genie модели Gemini 4 Argon, принадлежащей к специализированному семейству Gemini Robotics для управления роботами. В ходе эксперимента Argon разбила задачи для роботов на этапы, а Genie 4 сгенерировала их симуляцию в реальном времени. Такой эксперимент продемонстрировал возможность безопасно виртуально тестировать сценарии работы роботов, прежде чем допускать их к выполнению действий в реальном мире. 

Как сообщается, в будущем компания планирует продолжать развитие гибридных ИИ-инструментов, где Gemini будет отвечать за написание кода и генерацию текста, а Genie – воплощать написанный сценарий и создавать симуляцию реальности разных уровней сложности. Такие модели можно будет применять для разработки AR/VR игр, интерактивных образовательных платформ и роботизированных систем, а также для создания черновых вариантов фильмов. Например, одна из обсуждаемых компанией потенциальных идей – создать модель, в которую можно будет загружать художественную картину и “беседовать” с изображенными на ней персонажами об эпохе и событиях, в которых они изображены.

Разработчики обращают внимание пользователей, что Genie 4 еще довольно “сырая” и может совершать ошибки: например, детали и объекты могут смещаться, а аудио и текст могут содержать ошибки или не всегда быть четкими.  

На данный момент Genie 4 выпущена в качестве превью-версии для ограниченного числа “доверенных тестировщиков”. В дальнейшем модель планируют добавить в платные ИИ-платформы Google.

Источники: TechCrunch, Google