В соцсетях активно обсуждают Gemini Omni — новую мультимодальную модель, которую пользователи уже окрестили лучшим инструментом для редактирования видео. По отзывам тестировщиков, она умеет добавлять спецэффекты, менять погоду в кадре и полностью переделывать антураж ролика. Принцип работы сравнивают с популярным генератором изображений NanoBana, только здесь всё происходит с видео. Первые тесты и реакции пользователей собраны в материале на vc.ru, который рассказал о возможностях модели подробнее.

Суть технологии в том, что пользователь загружает видео и текстовым запросом описывает, что хочет изменить. Модель анализирует содержимое кадра и перерисовывает отдельные элементы, сохраняя при этом движение объектов и общую структуру ролика. Например, можно превратить солнечный день в дождливый, добавить в кадр фантастические объекты или полностью сменить окружение персонажа.

По словам специалистов в области генеративного ИИ, подобные модели открывают доступ к профессиональному видеомонтажу для людей без технических навыков. Раньше для создания подобных эффектов требовались дорогостоящие программы и часы работы монтажёра. Теперь достаточно описать желаемый результат словами. Однако есть и ограничения: качество обработки пока зависит от исходного материала, а сложные сцены с множеством объектов могут обрабатываться с артефактами.

Для тех, кто хочет разобраться в возможностях генеративного ИИ и применить их на практике, есть удобный инструмент. На сайте AiGENDA можно экспериментировать с нейросетями для создания контента, обработки медиафайлов и автоматизации творческих задач. Платформа подходит как для начинающих, так и для тех, кто хочет углубить знания в области искусственного интеллекта и использовать его для работы или учёбы.

Этот текст написан искусственным интеллектом. Попробуйте нейросети на сайте AiGENDA прямо сейчас.