Нейронавт | Нейросети в творчестве
9.46K subscribers
3.66K photos
3.16K videos
40 files
4.12K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках не участвую

для связи @Neuronauticus
加入频道
This media is not supported in your browser
VIEW IN TELEGRAM
SwitchLight
Релайтинг. Сервис выдает карты нормалей, альбедо. Есть режим релайтинга видео, но в этом режиме на выходе не будет нормалей и альбедо. На старте дают 100 кредитов на обработку.

Небольшой видеотуториал

#relighting #normal #video2normal #image2normal
👍3🤔2
GeoWizard: Unleashing the Diffusion Priors for 3D Geometry Estimation from a Single Image

Похоже, крутой генератор глубины и нормалей по изображению. На сайте сравнение с DepthAnything и Marigold

Код
Демо
ComfyUI

#image2depth #image2normal
6👍2🔥1
DSINE: Rethinking Inductive Biases for Surface Normal Estimation

Генератор нормалей. Требует на два порядка меньше данных для обучения чем Omnidata v2 и независим от разрешения и соотношения сторон. Приятно что работает на уличных сценах/сценах реального мира, значит может пригодиться в композе.

Код

#image2normal #video2normal
🔥9
Era3D: High-Resolution Multiview Diffusion using Efficient Row-wise Attention

Генератор новых ракурсов объекта в высоком качестве (512х512) по одному изображению. Да еще и с нормалями.
И прицепом можно получить тексутированный меш.

Генерация по тексту тоже возможна.

В демоспейсе только ракурсы в растре и с нормалями.

Код
Демо

#novelview #image2image #image2normal #imageto3D
🔥141
Media is too big
VIEW IN TELEGRAM
Sapiens: Foundation for Human Vision Models

Семейство моделей от Meta Reality Labs для выполнения четырех задач на изображениях человеков:

- оценка 2D-позы
- сегментация частей тела
- карта глубины
- карта нормалей

Код
Демо

#image2pose #segmentation #image2mask #image2depth #image2normal
10🔥5
StableNormal: Reducing Diffusion Variance for Stable and Sharp Normal

Генератор нормалей по изображению. Должен быть крутой. У меня к сожалению галерея сравнений не прогружается чтобы посмотреть.

Код
Демо

#image2normal #video2normal
🔥10👍3🤯2
diffusion-e2e-ft: Fine-Tuning Image-Conditional Diffusion Models is Easier than You Think

Тут придумали как эффективно файнтюнить диффузные генераторы на кондиционные задачи типа предсказания глубины или нормалей в один шаг.
Показывают на примере Marigold, заявляют что дообученная версия работает в 200 раз быстрее.

Я перечитал описание несколько раз и так и не уверен что понял все правильно, если что поправьте меня

Код
Демо глубина
Демо нормали

#image2normal #image2depth
🔥74
Lotus: Diffusion-based Visual Foundation Model for High-quality Dense Prediction

Генератор глубины и нормалей. Где вы еще видели такую детализацию?

Код ждем на днях
Демо ждем на днях

#image2depth #image2normal
👍8🔥7
Опубликован код и демо генератора глубины и нормалей Lotus
+можно запускать на replicate по API

Код
Демо глубина
Демо нормали
API

#image2depth #image2normal
🔥121