Нейронавт | Нейросети в творчестве
9.25K subscribers
3.53K photos
3.05K videos
40 files
4.02K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках не участвую

для связи @Neuronauticus
加入频道
This media is not supported in your browser
VIEW IN TELEGRAM
SynCamMaster: Synchronizing Multi-Camera Video Generation from Diverse Viewpoints

Метод генерации видео одновременно с нескольких ракурсов. Демонстрационные видео сделаны в CogvideoX

Код

PS Акелла промахнулся. я про него уже писал

#text2video #multiview #cameracontrol
🔥121
This media is not supported in your browser
VIEW IN TELEGRAM
Diffusion as Shader: 3D-aware Video Diffusion for Versatile Video Generation Control

Управление генерацией видео через понимание объема.

- управление камерой
- перенос движения с видео на 3D меш
- перенос движения с видео на изображение
- манипуляция объектами

Код ждем

#motioncontrol #cameracontrol #motiontransfer
👍5🤯3
Go with the Flow

Контроль движения на генерации видео за счет геометрического искажения шума

Код
Веса
Видео (4 минуты)
Видео туториал

#motioncontrol #motiontransfer #cameracontrol
👍11🔥4🍾2
This media is not supported in your browser
VIEW IN TELEGRAM
T2V 01 Director

Новая версия видеогенератора от Hailuo
Основная фишка - контроль камеры.

Гайд от режиссера Мигеля Иванова

#text2video #image2video #cameracontrol
🔥17
GEN3C: 3D-Informed World-Consistent Video Generation with Precise Camera Control

NVIDIA дообучили Cosmos - получили видеогенератор по картинке с точным управлением камерой и временнОй согласованностью в 3D за счет 3D-кэша

Траекторию камеры можно настраивать интерактивно

Код ждем

#image2video #cameracontrol
🔥9👍3
ReCamMaster: Camera-Controlled Generative Rendering from A Single Video

Изменяем траекторию камеры для видео, получаем то же видео с другого ракурса.

Применимо для 4D реконструкций, стабилизации видео, обучения роботов и автопилотов

Код ждем (но это неточно)
Демо - сюда загружаем свое видео, ждем пока его обработают и пришлют вам на почту.

Варианты движения камеры такие:

1 Pan Right
2 Pan Left
3 Tilt Up
4 Tilt Down
5 Zoom In
6 Zoom Out
7 Translate Up (with rotation)
8 Translate Down (with rotation)
9 Arc Left (with rotation)
10 Arc Right (with rotation)

#cameracontrol #novelview #video2video #stabilization
👍9
This media is not supported in your browser
VIEW IN TELEGRAM
Stable Virtual Camera (Seva): Multi-View Video Generation with 3D Camera Control

Генератор видео по картинке с контролем камеры от Stability AI. На вход от 1 до 32 картинок. Камера идет по заданной пользователем траектории

1.3B параметров

Обещают консисентность вплоть до бесшовного зацикливания если камера возвращается в ту же точку. Причем 1000 кадров как с куста

Код
Демо

#cameracontrol #image2video #image2scene #novelview
🔥8👍41
Aether: Geometric-Aware Unified World Modeling

Видеогенератор с пониманием пространственной геометрии с тремя ключевыми способностями:

- Динамическая реконструкция в формате 4D
- Прогнозирование видео на основе действия
- Визуальное планирование на основе цели

Умеет восстанавливать динамические облака точек по видео, оценивая глубину и ракурс.

Код ждем
Демо ждем

#video2video #novelview #cameracontrol #motioncontrol
👍12
This media is not supported in your browser
VIEW IN TELEGRAM
Опубликован код ReCamMaster, модели для изменения траектории камеры в видео.
Родную модель t2v использовать нельзя, но они прикрутили Wan2.1

Обещают онлайн сервис, новости ждем на сайте Kling

Код
Воркфлоу
Видеотуториал

#cameracontrol #novelview #video2video #stabilization #workflow #tutorial
🔥18👍1
Uni3C: Unifying Precisely 3D-Enhanced Camera and Human Motion Controls for Video Generation

Генератор видео по одной картинке от Alibaba.
С контролем камеры и движения человеков. Утверждают что именно контроль камеры и движение человеков у них лучше всех

Код ждем

#image2video #cameracontrol #motioncontrol
👍9
Higgsfield Turbo

Новая модель у видеогенератора Higgsfield

В полтора раза быстрее, на 30% дешевле.

Добавили 7 новых стилей движения

#text2movie #script2movie #text2image #image2video #motioncontrol #cameracontrol
👍8🔥3
Опубликован код нвидиевского GEN3C
Говорят, что 48ГБ VRAM не хватает
Только линукс

Код

#image2video #cameracontrol
👍5🔥21🤯1
Seaweed APT2

Интерактивная модель генерации потокового видео по картинке в рилтайме от ByteDance, второе поколение. Первое было в январе

1 минута видео ,1 шаг, 24 кадра в секунду, потоковое разрешение 736x416 (эквивалент 640x480 - что???) в режиме реального времени на 1xh100 с интерактивным управлением!

Контроль позы, контроль камеры

Кода нет, ждем на сервисах

#image2video #realtime #cameracontrol #pose2video #posecontrol
👍62🤷‍♂1
Media is too big
VIEW IN TELEGRAM
EX-4D: EXtreme Viewpoint 4D Video Synthesis via Depth Watertight Mesh

Генератор видео от ByteDance с возможностью управления камерой из одноглазого (монокулярного) входного сигнала. Модель особенно эффективна при работе с экстремальными точками зрения.

Представляет собой LoRa на 1% параметров😏

Код
Демо ждем

#cameracontrol #novelview
🔥7👍1🤔1
Morphic Studio

Онлайн генератор картинок и видео с холстом и прочими свистоперделками.
Не сильно интересовался что там под капотом потому как они только что выкатили новую фичу - 3D Motion

Позволяет настраивать ракурс для любой картинки и видео.
Да, для видео, с ключевыми кадрами.
Работает через карту глубины, очевидно

На входе дают 100 кредитов. Непонятно каждый месяц или один раз. Непонятно на сколько веселья этого хватит.

Ну вот я сгенерил два видео из картинки с котом, и у меня все еще 100 кредитов... 😕

[UPDATE] Короче 3D Motion бесплатный на 48 часов с момента запуска, а значит осталось около суток этого аттракциона щедрости. Бежим крутить камеру

#novelview #cameracontrol #text2image #text2video #image2video #online
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
15🍾4👍1
Morphic character turnarounds

В Morphic Studio можно делать живые тернтейблы персонажей

Кликаем на загруженном изображении, выбираем видео, пишем промпт:
The camera performs a smooth 360-degree orbit around.

Если у вас не чисто персонаж на картинке, то часто получается не тернтейбл, а какое-то действие с поворотом

Morphic Studio

#novelview #cameracontrol #image2video #online
👍11🤔1