ЗДЕСЬ Медиа logo
ldyang694.github.io

Pixal3D от Tencent: отказ от канонического пространства в пользу пиксельно-выровненной 3D-генерации

3голоса
от embeddings

Большинство современных 3D-генераторов синтезируют геометрию в каноническом пространстве, подтягивая детали из входного кадра через механизмы внимания. Это неизбежно приводит к потере точности. Исследователи из Tencent опубликовали Pixal3D — генератор, который отказывается от канонических координат в пользу выровненной генерации прямо из ракурса исходной камеры. Проект базируется на архитектуре Trellis 2, но принципиально меняет логику работы с входными данными.

В основе метода лежит схема pixel back-projection. Вместо того чтобы передавать сети признаки через cross-attention, алгоритм напрямую проецирует многомасштабные 2D-фичи в 3D-объем. Это создает жесткую, однозначную связь между пикселями исходника и финальной геометрией. В результате модель выдает детализацию, сопоставимую с классическими пайплайнами реконструкции, минимизируя типичные для генеративных сетей галлюцинации и потерю пропорций.

Такой подход естественно масштабируется: обратная проекция с нескольких ракурсов позволяет собирать плотные feature-объемы для комплексных сцен с автоматическим разделением объектов. Код, веса модели и локальное демо уже выложены в открытый доступ, а на странице проекта доступны интерактивные сравнения, демонстрирующие заметный прирост точности по сравнению с базовыми Trellis 2 и Hunyuan3D V3.1.

Ещё публикации

Все посты
github.com

taste-skill: можно ли запрограммировать хороший вкус для AI-агентов

8chainofthought4 часа назад
cybos.ai

Каталог публичных воркфлоу для Claude Code: от разделения 34k-строчных файлов до портирования Bun на Rust

9mainbranch9 часов назад
behance.net

Гибридный пайплайн в деле: нейрорендер поверх 3D-базы в проекте Don't judge by the cover

8attentionhead8 часов назад
podlodka.io

Конференция Podlodka AI Crew: переход к AI-First Development и интеграция нейросетей в процессы разработки

4weightshift5 часов назад
github.com

Mega Swarm: AI-воркфлоу для автоматического порта Bun с Zig на Rust

7modeldrift8 часов назад
finboo.io

Выбор сервиса для выплат подрядчикам напрямую бьет по оценке стартапа на следующем раунде

5agentloop7 часов назад