Echo-3 собирает 3D-мир из нескольких минут съёмки на iPhone

Представьте, что вы медленно идёте по комнате с телефоном в руке и водите объективом по стенам, потолку, полу, мебели. На экране подсказки: вот эти участки уже сняты, а сюда ещё не заглядывали. Ни штатива, ни лазерного сканера, ни камеры за несколько тысяч. Через пару минут вы выходите из комнаты, а позже открываете её как трёхмерную сцену, по которой можно ходить и в которой можно мерить расстояния рулеткой на экране.

Именно это обещает Echo-3, новая world-модель компании SpAItial. Входная точка одна: приложение SpAItial на iPhone. Разработчики называют его самым простым способом попробовать модель.

Три шага от комнаты до ссылки

Процесс устроен в три действия.

Захват. Вы открываете приложение и медленно обходите помещение. Экранные подсказки показывают, какие области уже покрыты съёмкой, так что слепые зоны видно прямо по ходу дела. У SpAItial есть отдельный текстовый гайд по съёмке и видеоподсказка к каждому этапу.

Генерация. Echo-3 реконструирует пространство и строит фотореалистичную сцену на основе Gaussian Splat. Её масштабируют до реальных размеров, поэтому в ней можно снимать измерения.

Исследование и обмен. Внутри сцены можно перемещаться и замерять расстояния. Готовый мир отправляется ссылкой, которая открывается в любом браузере. Получателю не нужно ставить приложение, это важная мелочь для тех, кто показывает работу заказчику.

Что модель умеет

• Восстанавливает геометрию по обычной съёмке на телефон. Специальные камеры, штативы и LiDAR, по заявлению разработчиков, не нужны.
• Достраивает частично скрытые или не снятые со всех сторон участки: модель пытается правдоподобно восстановить недостающую геометрию.
• Сохраняет реальный масштаб. Размеры помещений и расстояния между объектами должны соответствовать действительности.
• Работает не с одной комнатой. В демонстрациях показаны квартиры, общественные пространства, производственные помещения, многоэтажные здания и улицы.

Пункт про достраивание мы бы читали с осторожностью. Это догадка модели: то, чего не видела камера, нейросеть дорисовывает «как должно быть», а не «как есть». Для атмосферной визуализации сгодится, для точной документации пространства уже нет, пока не проверено на реальных объектах.

Где это взять и на каких условиях

Приложение SpAItial доступно в App Store, на iPhone. Новым подписчикам предлагается первый месяц бесплатно. Версию для Android обещают позже, без срока. Сколько стоит подписка после пробного месяца, не сказано.

Кроме приложения, есть веб-версия: в браузере можно создавать и смотреть миры. Есть и API, через который 3D-миры генерируются из собственного кода: документация и платформа для разработчиков лежат на отдельных адресах. Для тех, кто работает с визуалом профессионально, предусмотрены две программы. Creative Partners даёт креаторам кредиты и ранний доступ. Startup Program даёт стартапам кредиты и приоритетный доступ к API. На сайте также есть галерея работ и страница с примерами применения.

Чего пока не видно

Страница модели выглядит как витрина продукта, и полезно понимать, о чём она молчит. Там нет цен, тарифов и лимитов. Нет бенчмарков и сравнения с другими моделями, нет точного времени обработки (только формулировка «несколько минут съёмки»), нет требований к устройствам. Независимых отзывов пока тоже нет. Всё, что сказано про фотореализм и точность масштаба, пока остаётся заявлением разработчиков. Если верить демо, результат выглядит убедительно, но демо есть демо.

Кто ещё в этом поле

Gaussian Splatting давно вышел из лабораторий, и у Echo-3 есть соседи по задаче:

• Postshot работает с MP4, MOV и фотографиями, обрабатывает данные локально на видеокартах NVIDIA через CUDA, умеет анимировать виртуальную камеру, рендерить видео и интегрируется с After Effects.
• Polycam реконструирует сплаты из фото и видео, их можно смотреть и экспортировать.
• Nerfstudio — открытый проект с keyframes и camera splines, но установка сложнее.
• Splatframes работает под Windows, объединяет видео, фото и LiDAR, анимирует камеру по ключевым кадрам (позиция, направление, FOV, roll) и экспортирует H.264, ProRes и PNG-последовательности. Заявленное подтверждается сайтом разработчика, а вот как он ведёт себя на реальных интерьерах, мы не проверяли.

Разница в акцентах заметна. Эти инструменты в основном про то, что делать со сплатом после реконструкции: камера, рендер, постпродакшен. Echo-3 делает ставку на другую часть цепочки, на то, чтобы сцена вообще получилась из самой простой съёмки, в реальном масштабе и с ссылкой для просмотра.

Что это меняет в работе

Для арт-директора и дизайнера пространства главное здесь не фотореализм, а порог входа. Раньше, чтобы получить объёмную копию помещения, нужно было везти оборудование или нанимать человека с ним. Теперь для пробы достаточно телефона и двух минут. Референс площадки для съёмки, стенд на выставке, интерьер для примерки инсталляции, локация для моушн-сцены: всё это можно снять заранее и показать коллеге или клиенту одной ссылкой.

Как минимум стоит попробовать на собственной квартире или студии: бесплатный месяц это позволяет. Проверить надо три вещи: насколько совпадают измерения с реальной рулеткой, как модель достроила то, что вы не снимали, и что выдаёт API, если нужна автоматизация.

Комната, которую раньше нужно было сканировать, теперь помещается в карман.