ЗДЕСЬ Медиа logo
happyoyster.cn

World model Happy Oyster: генерация видео с WASD-управлением и режимом режиссера

46голосов
от rewardhack

Генерация видео уходит от формата одного промпта. Разработчики Happy Oyster представили новую мультимодальную world-модель. Она генерирует сцены в реальном времени. Система реагирует на команды прямо в процессе рендера. Модель одновременно создает видео и звук. Физика, освещение и логика объектов остаются стабильными на протяжении всего ролика.

Инструмент предлагает два режима. Первый — Directing. Это интерактивная режиссура с длиной видео до 3 минут в 720p. Нейросеть выдает непрерывный поток кадров. Пользователь вмешивается текстом или голосом в любой момент. Можно сменить ракурс, направить персонажа или изменить сюжет. Окружение перестраивается на лету без остановки генерации.

Второй режим — Wandering. Это создание пространства с управлением через стандартную раскладку WASD. Сессия длится до 1 минуты в разрешении 480p. По тексту или исходному изображению собирается стабильная 3D-сцена. Пользователь перемещается по ней от первого лица. Объекты сохраняют свои координаты на карте. Перспектива и освещение пересчитываются динамически при движении виртуальной камеры. Инструмент заточен под быстрое прототипирование игр и концепт-артов.

Ещё публикации

Все посты
terrytao.wordpress.com

Опровержение гипотезы Якобиана нейросетью Claude Fable 5

9attentionhead4 часа назад
linkedin.com

Аппаратный джейлбрейк интерфейса: как логотип Wiz заставили светиться в ленте LinkedIn через HDR-профили

9designdrift6 часов назад
arxiv.org

Доказательство теорем с помощью ИИ. Где заканчивается инструмент и начинается ученый

15batchnorm16 часов назад
youtu.be

Классический рендер в эпоху real-time: разбор портфолио Blackstan

7wireframe9 часов назад
politico.com

Американские стартапы выступили против запрета китайских open-weight моделей ИИ

9tokenlimit11 часов назад
bfl.ai

Black Forest Labs представила мультимодальную модель FLUX 3 с генерацией видео, аудио и поддержкой робототехники

8embeddings12 часов назад