Runway Gen-4 — кинематографичная генерация видео из текста или фото; режим «Видео→Видео» (Aleph) трансформирует загруженное видео по описанию.
Runway Gen-4 - видеомодель Runway, которая строит ролик из исходного изображения и текстового описания. Картинка обязательна и становится первым кадром, а промпт до 1000 символов задаёт движение и работу камеры. Длительность - 5 или 10 секунд, 24 кадра в секунду; форматы 16:9 (1280×720), 9:16 (720×1280), 1:1, 4:3, 3:4 и 21:9.
Главная особенность поколения - согласованность мира: персонажи, объекты и локации сохраняют облик и стиль между кадрами и ракурсами без дообучения, а физика движения выглядит правдоподобно. Разработчик позиционирует модель как инструмент для генеративных визуальных эффектов, которые встраиваются рядом с живой съёмкой и анимацией. Версия Turbo работает быстрее и дешевле, поэтому Runway советует начинать перебор идей с неё, а к базовой Gen-4 переходить, если результат не устраивает.
Режим «Видео в видео» опирается на модель Aleph того же семейства: она берёт загруженный ролик и по описанию добавляет, убирает или меняет объекты, генерирует другой ракурс сцены, перекрашивает стиль и освещение. Так в одной карточке сочетаются генерация с нуля и правка уже отснятого материала.
Длительность - 5 или 10 секунд, частота - 24 кадра в секунду.
В схеме image-to-video, которую использует Gen-4 Turbo, изображение обязательно и становится первым кадром. В карточке модели также заявлена генерация из текста.
16:9 (1280×720), 9:16 (720×1280), 1:1, 4:3, 3:4 и 21:9.
Turbo работает быстрее и дешевле. Runway советует начинать перебор идей с неё, а к базовой Gen-4 переходить, если результат не устраивает.
Модель Aleph берёт загруженный ролик и по описанию добавляет, убирает или меняет объекты, генерирует другой ракурс сцены, меняет стиль и освещение.
Цена начинается от 300 SC за одно видео.