Нейронавт | Нейросети в творчестве
9.27K subscribers
3.55K photos
3.06K videos
40 files
4.03K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках не участвую

для связи @Neuronauticus
加入频道
This media is not supported in your browser
VIEW IN TELEGRAM
Splatt3R

Демоспейс для создания 3d сцены на гауссианах по всего двум ракурсам. Если у вас есть одна картинка, второй ракурс можно сгенерить видеогенератором, как сделали на реддите
Например в Runway ML Gen3-Turbo промпт: "Orbit Right"

#gaussian #image2gaussian #image2scene #imageto3d
8👍1
Towards Realistic Example-based Modeling via 3D Gaussian Stitching

3D-моделирование гауссианами на основе примеров.

Наконец что-то с контролем результата и GUI.

Рабочий процесс состоит из трех этапов:

1) сегментация и преобразование гауссовой модели в реальном времени с использованием GUI

2) анализ KNN для определения граничных точек в области пересечения исходной и целевой моделей

3) двухфазная оптимизация целевой модели с использованием клонирования на основе выборки и градиентных ограничений.

Если вы чего-то не поняли в этом описании, я тоже. Гляньте видео, там примерно видно процесс

Код ждем

#imageto3d #modeling #photogrammetry #gaussian #image2gaussian
🔥8👍3
This media is not supported in your browser
VIEW IN TELEGRAM
ReconX: Reconstruct Any Scene from Sparse Views with Video Diffusion Model

Реконструкция 3D сцены по двум или нескольким ракурсам. Недостающую информацию генерирует видеогенератор и затем все это преобразуется в сцену на гауссианах

Код ждем

#gaussian #image2gaussian #image2scene #imageto3d
👍91
This media is not supported in your browser
VIEW IN TELEGRAM
LargeSpatialModel: End-to-end Unposed Images to Semantic 3D

Реконструкция сцены на гауссианах по двум входным изображениям. По одному уже было

LSM использует в качестве входных данных два некалиброванных изображения и в реальном времени восстанавливает световое поле, включая геометрию, внешний вид и семантику

Код будет в ноябре есть
Демо

#gaussian #image2scene #imageto3d #image2gaussian #realtime
🔥8
This media is not supported in your browser
VIEW IN TELEGRAM
DiffSplat: Repurposing Image Diffusion Models for Scalable 3D Gaussian Splat Generation

Генератор 3D объектов на гауссианах по картинке, по тексту. Поддерживает контроль генерации контролнетом - в примерах есть canny, depth, normals

Модель представляет собой файнтюн PixArt-Sigma-XL-2-512-MS

Код
Веса
Демо ждем

#textto3d #imageto3d #gaussian #conditioning #text2gaussian #image2gaussian
🔥6👍2
This media is not supported in your browser
VIEW IN TELEGRAM
Free4D: Tuning-free 4D Scene Generation with Spatial-Temporal Consistency

Создает 4D-сцены на гауссианах из одного изображения, управляемый рендер в реальном времени.

Код

#image2gaussian #image2video #imageto4d #gaussian #nivelview #realtime #4d
🔥7