Gausify Orbit: Новые возможности для 360-видео

С помощью Gausify Orbit пользователи могут преобразовывать 360-видео в гауссианы прямо в браузере. Этот инструмент позволяет загружать клипы вокруг объектов, телефонные видео или даже папки с изображениями, а на выходе предоставляет 3D-сплат для просмотра, экспорта и шеринга.

<video><source src="https://rss.neurootlichnik.ru/images/aaba93e2-30b3-400c-80a1-d4cfc9c1905b/video_0.mp4" type="video/mp4"/></video>
Одной из ключевых особенностей Gausify Orbit является то, что все операции выполняются локально с использованием WebGPU. Это обеспечивает высокую производительность и качество обработки. Инструмент оставляет самый резкий кадр в каждом окне, точно следуя орбите объекта, что позволяет добиться впечатляющих результатов.

Для вырезания объектов Gausify Orbit использует технологии SAM 2.1 на WebGPU, RMBG-1.4 или хромакей. Это позволяет точно отделять объекты от фона, что особенно полезно для создания качественных визуализаций. Также инструмент предлагает возможность позирования камеры с использованием SfM для браузера, без необходимости в COLMAP.
Обучение Brush происходит в WASM+WebGPU с живым превью, что делает процесс интуитивно понятным и удобным. Экспортируемые файлы имеют размеры в 5-15 раз меньше, что значительно упрощает их использование и хранение.
В последнем обновлении Gausify Orbit появились новые функции, такие как дорисовка ракурсов, которые не были представлены в исходном видео. Это достигается за счет рендеринга по новой траектории и восстановления видеомоделью в #ComfyUI. Также пользователи могут создавать свои воркфлоу в ComfyUI с полями промпта, сида и LoRA, что расширяет возможности настройки.
Проект сохраняется в формате .gorbit, что позволяет пользователям запускать этапы обработки по отдельности. Это делает Gausify Orbit мощным инструментом для всех, кто работает с 360-видео и хочет получить качественные 3D-визуализации.
Для более подробной информации и доступа к проекту можно посетить официальную страницу на GitHub.

Нейро Отличник