GameCraft от Tencent — впечатляющая ИИ-технология для создания управляемого видео

Команда Hunyuan от Tencent представила амбициозную разработку — Hunyuan-GameCraft, ИИ-технологию, способную создавать управляемое видео на основе текстового описания. Напишите, например, «лодка на озере» — и через секунду вы уже управляете лодкой в реальном времени.

Это не просто генерация видео — это интерактивный опыт. Модель использует диффузионные алгоритмы и обучена на огромном количестве игровых видео. Главное отличие — возможность управлять сценой с помощью клавиатуры и мыши, как в игре.

Что умеет Hunyuan-GameCraft

• Поддерживает вид от первого и третьего лица.

• Генерирует окружающий мир в реальном времени в зависимости от ваших действий.

• Управление классическое: WASD или стрелки, всё остальное делает ИИ.

• Модель обучена на более миллиона клипов из 100+ популярных игр, что помогает ей воспроизводить разные стили — от киберпанка до природы.

В демо-версиях показаны живописные сцены: города, леса, реки, фантастические пейзажи. Кажется, будто вы внутри катсцены. Однако пока это исследовательская разработка — стабильность и качество могут меняться в зависимости от запроса и длительности сессии.

Как это работает

Hunyuan-GameCraft превращает ваши нажатия клавиш в сигналы движения камеры. Модель по кадрам предсказывает, как должна меняться сцена. Чтобы избежать резких скачков и несостыковок, используется метод гибкой истории: модель «помнит», где вы были, и корректирует новые кадры на основе предыдущих.

Также применяется дистилляция модели — упрощение больших моделей для ускорения работы без сильной потери качества. Это позволяет системе работать почти в реальном времени на мощных видеокартах.

Возможности применения

• Разработчики игр: быстрое прототипирование уровней.

• Сценаристы и режиссёры: генерация сторибордов и катсцен.

• Игроки: создание мини-игр по запросу, вроде «битва с драконом на Марсе».

• ИИ-обучение: генерация виртуальных миров для тренировки агентов.

Вывод

Hunyuan-GameCraft — это не полноценная игра, а исследовательская демонстрация, показывающая возможности управляемого ИИ-видео. Технология ещё требует доработки в плане качества и стабильности, но потенциал огромен. Это шаг в сторону игр, генерируемых прямо «на лету».