Runway представила GWM Worlds 2 — модель, превращающую сгенерированное видео и аудио в интерактивные миры в реальном времени. Компания показала превью на закрытой демонстрации для разработчиков. Пользователь сможет не просто смотреть ролик, а заходить внутрь сцены и менять происходящее. Но пока это сырой прототип, и работает он с серьёзными оговорками.

General World Model симулирует физику, освещение и поведение объектов по текстовому описанию. В демо нейросеть создала лес, реагирующий на действия пользователя: ветки гнулись под ногами, тени двигались за источником света, звук леса менялся при приближении к воде. Разрешение выходного видео — 24 кадра в секунду, задержка отклика около 200 миллисекунд.

Разработчики игр видят в технологии шанс ускорить прототипирование в десятки раз. Создатели кино называют это будущим превизуализации. Но независимые исследователи предупреждают: при длительной работе модель теряет согласованность — объекты «плывут», физика ломается, а сцена иногда зацикливается. Для коммерческого применения нужно ещё минимум полгода доработки.

Runway конкурирует с Sora от OpenAI и World Labs, которые тоже строят генеративные миры. Главное отличие GWM Worlds 2 — ставка на интерактивность, а не на просмотр. Если технологию доведут до ума, она изменит индустрию развлечений объёмом 250 млрд долларов. Но вопрос лицензирования контента и авторских прав остаётся открытым.

И вот что любопытно: Runway открыто называет релиз «исследовательским», но уже принимает заявки от студий на ранний доступ. Компания явно понимает, что прототипа недостаточно, и собирает данные о реальных сценариях использования. По сути, пользователи тестируют бета-версию за свои деньги — классическая схема для рынка, где конкуренты тратят миллиарды на аналогичные разработки.

Если вы следите за развитием генеративных моделей и хотите разобраться, какие из них действительно применимы в работе, а какие остаются игрушками на пару недель, поможет нейросеть AiGENDA — соберёт новости по интересующим направлениям и объяснит технические детали простым языком. Первый запрос — бесплатно. Если пригодится, сами выберете удобный тариф.