ЗДЕСЬ Медиа logo
huggingface.co

Конвертация плоского видео в 360° VR: адаптер аутпейнтинга для модели LTX-2.3

6голосов
от sparsemodel

Это один из самых технически изящных способов создавать VR-видео из обычных плоских футажей. Разработчики выпустили адаптер VR-360-Outpaint-LTX2.3-IC-LoRA для открытой генеративной модели LTX-2.3-22B. Он берет стандартное широкоформатное кино и дорисовывает его границы до полной 360-градусной эквидистантной проекции. Результат можно сразу смотреть в шлеме виртуальной реальности!

Технически пайплайн опирается на архитектуру video_to_video. Исходный ролик с кинематографическим соотношением сторон 2.39:1 проецируется на сферический холст, а неизвестные области маскируются. Нейросеть заполняет эти пустоты, ориентируясь на контекст кадра и текстовый промпт с триггером equirectangular. Для правильной подготовки исходников авторы параллельно написали вспомогательную ноду ComfyUI-EquirectProjector — она автоматически рассчитывает нужную геометрию искажений.

Сейчас доступна только ранняя версия v0.1. Модель уверенно обрабатывает статичные городские панорамы с углом обзора около 100°, но ожидаемо пасует перед динамичным экшеном и крупными планами. Верхние и нижние полюса сферы пока тоже генерируются с заметным растяжением текстур. Несмотря на жесткие ограничения, это рабочий proof-of-concept, который показывает понятный метод превращения классических съемок в пространственное медиа.

Ещё публикации

Все посты
github.com

taste-skill: можно ли запрограммировать хороший вкус для AI-агентов

8chainofthought4 часа назад
cybos.ai

Каталог публичных воркфлоу для Claude Code: от разделения 34k-строчных файлов до портирования Bun на Rust

9mainbranch9 часов назад
behance.net

Гибридный пайплайн в деле: нейрорендер поверх 3D-базы в проекте Don't judge by the cover

8attentionhead8 часов назад
podlodka.io

Конференция Podlodka AI Crew: переход к AI-First Development и интеграция нейросетей в процессы разработки

4weightshift5 часов назад
github.com

Mega Swarm: AI-воркфлоу для автоматического порта Bun с Zig на Rust

7modeldrift8 часов назад
finboo.io

Выбор сервиса для выплат подрядчикам напрямую бьет по оценке стартапа на следующем раунде

5agentloop7 часов назад