Google выпустила Gemini Omni 1.1 Flash: продление видео до 40 секунд и экспорт в 4K

Google представила производственную версию модели Gemini Omni 1.1 Flash для генерации и редактирования видео с продлением сцен, интерполяцией между кадрами и повышением разрешения до 4K.

Одно из главных нововведений — продолжение существующего ролика. Модель анализирует до 10 секунд предыдущего видео, тогда как прежние версии ориентировались главным образом на последнюю секунду. Сцену можно наращивать фрагментами по 10 секунд до общей продолжительности 40 секунд, сохраняя персонажей, визуальный стиль и развитие действия.

Пользователь также может задать начальный и конечный кадры. Gemini Omni 1.1 Flash создаёт между двумя изображениями непрерывное движение. Функция предназначена для сложных перемещений камеры, переходов, облётов объекта, приближения и создания зацикленных сцен.

Для быстрого поиска идеи добавлен режим черновой генерации в разрешении 360p. По данным Google, такие предварительные ролики создаются до 60% быстрее и обходятся примерно втрое дешевле стандартной генерации в 720p. Выбранный результат затем можно сформировать или повысить до 1080p либо 4K.

Модель принимает текст, изображения и видео. До трёх секунд видеоматериала можно использовать как референс движения или поведения персонажа. Это позволяет, например, перенести танец из исходного ролика на другого героя, одновременно сохранив заданную сцену и визуальный контекст.

Gemini Omni 1.1 Flash поддерживает генерацию видео продолжительностью от трёх до десяти секунд с частотой 24 кадра в секунду. Доступны горизонтальное соотношение сторон 16:9 и вертикальное 9:16. Редактирование выполняется в диалоговом режиме: пользователь может описывать необходимые изменения обычным языком, сохраняя остальные элементы сцены.

Для разработчиков модель с кодовым обозначением gemini-omni-1.1-flash доступна через Gemini API и Google AI Studio, а также на платформе Gemini Enterprise Agent. Новые инструменты появились и в Google Flow.

Продление видеосцен в приложении Gemini распространяется среди подписчиков Google AI Plus, Pro и Ultra по всему миру. Конкретный набор функций может различаться между Gemini, Google Flow и интерфейсом API.

Документация Gemini Omni 1.1 Flash для разработчиков
Описание новых функций Gemini Omni 1.1 Flash в Google Flow