Runway хочет превратить генерацию ИИ-видео в прямой эфир, управляемый в реальном времени

Главный смысл: Runway показала генерацию видео в реальном времени: пользователь должен получать первые кадры почти сразу и управлять видеопотоком командами, а не ждать готовый ролик и запускать процесс заново. Это может превратить видеомодель из инструмента создания клипов в основу интерактивных сред для игр, обучения и робототехники.

• Основа — GWM-1. Первая «общая модель мира» Runway, представленная в декабре 2025 года и построенная на Gen-4.5, генерирует видео покадрово. Управляющими сигналами могут быть движения камеры, команды роботу и звук; сходный принцип компания показывала в Runway Characters и системе Solaris, реагирующей на клики и голос.

• Первый кадр — менее чем за 100 мс. В марте Runway и Nvidia продемонстрировали на конференции GTC исследовательскую модель для платформы Vera Rubin. Это заявленный ориентир, а не подтверждённая характеристика публичного продукта: срок выхода не объявлен. Для сравнения, Google DeepMind заявляет, что Genie 3 сохраняет согласованность интерактивных миров несколько минут при 24 кадрах в секунду и разрешении 720p.

• Ошибки накапливаются. Поскольку очередной кадр строится на предыдущем, небольшое искажение может перерасти в серьёзную деформацию сцены. Runway сообщает, что обучает модель и на её несовершенных результатах, чтобы она исправляла отклонения. Система при этом должна выдавать кадры со скоростью воспроизведения на оборудовании, разделяемом несколькими сессиями. Компания рассчитывает применять такие модели для обучения роботов; Waymo развивает похожий подход для редких дорожных сценариев.

Что дальше: Проверять предстоит устойчивость длинных управляемых сцен, стоимость вычислений и работу под массовой нагрузкой. Пока это исследовательское направление: независимых данных о качестве, цене и стабильности нет, дата доступности не названа. Важными сигналами станут непрерывные публичные тесты, требования к оборудованию и способность модели исправлять ошибки без заметных скачков изображения.