Dynamic Gaussian Mesh: Consistent Mesh Reconstruction from Monocular Videos

Реконструкция согласованных во времени 3D динамических объектов гауссианами по одному входному видеоракурсу

Код

#gaussian #videoto3d #video2gaussian

PortraitGen: Portrait Video Editing Empowered by Multimodal Generative Priors

PortraitGen преобразует 2D-портретное видео в 4D-гауссово поле.
Это позволяет выполнять мультимодальное (по тексту или по референсу) редактирование портрета за 30 минут. Плюс еще в комплекте релайтинг IC-Light'ом, контроль персоналии и контроль мимики.
Отредактированный 3D-портрет рендерится на 100 FPS

Код

#video2avatar #video2gaussian #humanavatar

VideoLifter: Lifting Videos to 3D with Fast Hierarchical Stereo Alignment

Реконструкция 3D сцен по длинным видео.
Разбивает видео на фрагменты, чем еще отличается от 3DGS непонятно

Код ждем

#gaussian #videoto3d #video2gaussian

GSTAR: Gaussian Surface Tracking and Reconstruction

Реконструкция динамичных 3D сцен на гауссианах по видео, с фотореалистичным рендером и 3D-трекином

GSTAR адаптируется к изменениям топологии с помощью двух механизмов: последовательного отслеживания стабильных поверхностей (красные кружочки) и динамической генерации поверхности для вновь появляющейся геометрии (оранжевые кружочки).

Код ждем

#video2scene #video2gaussian #videoto3d #videoto4D #video2mesh #gaussian

Hybrid 3D-4D Gaussian Splatting for Fast Dynamic Scene Representation

Моделирование динамических сцен по видео, основано на гибриде 3D и 4D гауссиан

Быстрое обучение с сохранением качества.
Легко заменяет 4DGS в существующих пайплайнах

Код

#gaussian #video2gaussian #videoto4D #4D

FreeTimeGS: Free Gaussian Primitives at Anytime Anywhere for Dynamic Scene Reconstruction

Реконструкция объемных динамических сцен по видео, на гауссианах

Еще один проект без кода, зато можно интерактивно покрутить сцены (поддерживает VR гарнитуры)

#novelveiw #rendering #gaussian #video2gaussian #videoto4D #4D