Midjourney запустил генератор видео!

Midjourney представил публике первую версию генератора видео на базе ИИ! 🎬 Пока инструмент создаёт короткие ролики на основе загруженных картинок или сгенерированных на платформе изображений. 🔧 Но команда обещает: это только начало. Скоро нас ждёт расширение функционала и новые возможности для креативов. Кто уже пробовал? Делитесь результатами! 👇

Технический релиз: Глубокий анализ видеогенератора Midjourney

Исполнительное резюме

Midjourney совершил стратегический прорыв в генеративном ИИ, выпустив бета-версию видеогенератора. В отличие от текстовых моделей конкурентов (OpenAI Sora, Runway ML), решение фокусируется на анимации статических изображений — как созданных в Midjourney, так и загруженных пользователем. Технически это реализуется через гибридную архитектуру, комбинирующую диффузионные модели с продвинутыми методами интерполяции кадров. Ключевые характеристики: генерация 5-секундных клипов с возможностью экстендинга до 21 секунды, контроль уровня движения (low/high motion), и уникальная бизнес-модель монетизации через GPU-time. Для DevOps-специалистов критично понимание требований к инфраструктуре: рендеринг 1 секунды видео эквивалентен ресурсам генерации 1 изображения.

Архитектурный Deep-Dive

Ядро генерации

Система построена на каскадной архитектуре:

# Псевдокод конвейера обработки
input_image = load_image(user_upload | midjourney_output)
latent_rep = encoder_vae(input_image)  # Кодирование в латентное пространство

# Диффузионный процесс для предсказания кадров
for t in diffusion_steps:
    motion_vector = motion_transformer(
        text_prompt, 
        motion_setting, 
        frame_context
    )
    latent_rep = apply_diffusion_step(latent_rep, motion_vector)

output_frames = decoder_vae(latent_sequence)  # Декодирование в видео

Ключевые технологические компоненты:

Рабочие характеристики и лимиты

Интеграция и API

Текущая реализация доступна через: