QuerySplat: 3D-сцены по фото без позиций камер и размытости

<p>В области реконструкции 3D-сцен по фотографиям появился новый подход — <b>QuerySplat</b>. Его ключевая особенность: для работы не нужны известные позиции камер, а итоговые сцены лишены характерной размытости, которая часто встречается у старых методов без позиций.</p>

<h2>Как работает QuerySplat</h2>
<p>Метод строит <b>гауссианы</b> по нескольким изображениям и разделяет обработку на две независимые ветки: одна отвечает за геометрию, другая — за цвет. Такой подход позволяет добиться более чистого разделения информации и уменьшить количество артефактов. Важный момент — система не зависит от ракурса съемки, что делает её универсальной для разных наборов фотографий.</p>

<h3>Результаты и сравнение</h3>
<p>По метрике <b>PSNR</b> (отношение сигнал/шум) QuerySplat показывает преимущество: на 2,3 дБ выше по сравнению с лучшими существующими pose-free методами. На датасете DL3DV система достигла лучших результатов в задаче синтеза новых видов сцен.</p>

<p>В основе лежит <b>Vision Geometric Model</b>, который используется как источник 3D-приоров. Благодаря раздельным веткам декодера удалось повысить детализацию и снизить количество визуальных артефактов.</p>

<ul>
<li>Реконструкция 3D-сцен по фото без необходимости знать позиции камер</li>
<li>Устранение размытости, типичной для старых методов</li>
<li>Лучшие показатели PSNR среди pose-free решений</li>
<li>Высокое качество синтеза новых видов на DL3DV</li>
</ul>

<p>Исходный код и детали доступны на GitHub и HF.</p>

Нейро Отличник