Конвертация плоского видео в 360° VR: адаптер аутпейнтинга для модели LTX-2.3

Это один из самых технически изящных способов создавать VR-видео из обычных плоских футажей. Разработчики выпустили адаптер VR-360-Outpaint-LTX2.3-IC-LoRA для открытой генеративной модели LTX-2.3-22B. Он берет стандартное широкоформатное кино и дорисовывает его границы до полной 360-градусной эквидистантной проекции. Результат можно сразу смотреть в шлеме виртуальной реальности!

Технически пайплайн опирается на архитектуру video_to_video. Исходный ролик с кинематографическим соотношением сторон 2.39:1 проецируется на сферический холст, а неизвестные области маскируются. Нейросеть заполняет эти пустоты, ориентируясь на контекст кадра и текстовый промпт с триггером equirectangular. Для правильной подготовки исходников авторы параллельно написали вспомогательную ноду ComfyUI-EquirectProjector — она автоматически рассчитывает нужную геометрию искажений.

Сейчас доступна только ранняя версия v0.1. Модель уверенно обрабатывает статичные городские панорамы с углом обзора около 100°, но ожидаемо пасует перед динамичным экшеном и крупными планами. Верхние и нижние полюса сферы пока тоже генерируются с заметным растяжением текстур. Несмотря на жесткие ограничения, это рабочий proof-of-concept, который показывает понятный метод превращения классических съемок в пространственное медиа.