This media is not supported in your browser
VIEW IN TELEGRAM
RunwayML теперь делает 3D на основе вашего видео. Можно настроить траекторию камеры и получить новое видео
Для лучшего результата:
• Отключите HDR в настройках камеры
• Снимайте 30 секунд или дольше (лучше всего от 1 до 3 минут)
• Не дергайте камеру резко
• Выберите настройки камеры с высоким FPS, например замедленную съёмку
#videoto3D #video2video #video2scene
Для лучшего результата:
• Отключите HDR в настройках камеры
• Снимайте 30 секунд или дольше (лучше всего от 1 до 3 минут)
• Не дергайте камеру резко
• Выберите настройки камеры с высоким FPS, например замедленную съёмку
#videoto3D #video2video #video2scene
🔥2
Media is too big
VIEW IN TELEGRAM
ResFields:Residual Neural Fields for Spatiotemporal Signals
#nerf в движении
Непонятно за счет чего достигается такая точность. На видео показано три камеры с почти одинаковым ракурсом. На мой взгляд этого маловато чтобы захватить движущиеся сцены в объеме, даже с каналом глубины.
Код
Колаб. Если запустится на бесплатном аккаунте, дайте знать
#video2nerf #video2scene #novelview #rendering
#nerf в движении
Непонятно за счет чего достигается такая точность. На видео показано три камеры с почти одинаковым ракурсом. На мой взгляд этого маловато чтобы захватить движущиеся сцены в объеме, даже с каналом глубины.
Код
Колаб. Если запустится на бесплатном аккаунте, дайте знать
#video2nerf #video2scene #novelview #rendering
👍1
Не мое. Давно хотел такое сделать, руки не доходили.
Реконструкция сцены из фильма гауссианами. Можно пихнуть ее в Unreal и дальше на что фантазии хватит.
твиттер
#photogrammetry #video2scene #videoto3D #reconstruction
Реконструкция сцены из фильма гауссианами. Можно пихнуть ее в Unreal и дальше на что фантазии хватит.
твиттер
#photogrammetry #video2scene #videoto3D #reconstruction
🔥14❤2
4D Gaussian Splatting for Real-Time Dynamic Scene Rendering
Вы должны это срочно увидеть!
У HyperReel появился конкурент и какой.
Гауссианы + временная составляющая = рендеринг динамической сцены с заданного ракурса. Мне пока непонятно сколько входных ракурсов надо чтобы это работало. Известно что тестировали на синетитических данных и датасетах реальных видео, снятых одновременно на от 1 до 15 камер. Видимо, как-то должно работать и на входном видео с одной камеры.
Короче, они описали гауссианами не только форму, но и движение и деформацию. При этом рендеринг в реальном времени, 70 кадров в секунду при разрешении 800 * 800 на RTX 3090, качество не ниже чем у конкурентов.
Код
Колаб
#novelveiw #rendering #stabilization #video2video #video2scene
Вы должны это срочно увидеть!
У HyperReel появился конкурент и какой.
Гауссианы + временная составляющая = рендеринг динамической сцены с заданного ракурса. Мне пока непонятно сколько входных ракурсов надо чтобы это работало. Известно что тестировали на синетитических данных и датасетах реальных видео, снятых одновременно на от 1 до 15 камер. Видимо, как-то должно работать и на входном видео с одной камеры.
Короче, они описали гауссианами не только форму, но и движение и деформацию. При этом рендеринг в реальном времени, 70 кадров в секунду при разрешении 800 * 800 на RTX 3090, качество не ниже чем у конкурентов.
Код
Колаб
#novelveiw #rendering #stabilization #video2video #video2scene
❤4👍4
Spacetime Gaussian Feature Splatting for Real-Time Dynamic View Synthesis
Рендер сцен гауссианами в реальном времени. На входе нужно видео с нескольких камер.
На сравнении выглядит еще и качественне конкурентов
Код
Скачать вьюер и демо модельки
#realtime #videoto3D #video2scene #rendering #gaussian
Рендер сцен гауссианами в реальном времени. На входе нужно видео с нескольких камер.
На сравнении выглядит еще и качественне конкурентов
Код
Скачать вьюер и демо модельки
#realtime #videoto3D #video2scene #rendering #gaussian
👍7
Nerfies: Deformable Neural Radiance Fields
Разработка Google Research превращает селфи-видео в #nerf сцену, портреты или видео с заданного ракурса. Пока требует несколько GPU для обучения, но колаб ноутбуки на гитхабе есть, можете попробовать запустить.
Код
#video2video #video2scene #video2depth
Разработка Google Research превращает селфи-видео в #nerf сцену, портреты или видео с заданного ракурса. Пока требует несколько GPU для обучения, но колаб ноутбуки на гитхабе есть, можете попробовать запустить.
Код
#video2video #video2scene #video2depth
🔥1
3DGStream: On-the-Fly Training of 3D Gaussians for Efficient Streaming of Photo-Realistic Free-Viewpoint Videos
На входе мультикамерное видео, на выходе - видео с любого ракурса. Конкурент HyperReel и 4D Gaussian Splatting for Real-Time Dynamic Scene Rendering в создании Free-Viewpoint Videos (FVV)
Обучается (для одного кадра?...) за 12 секунд. Рендерит 200 кадров в секунду
Код ожидается в июне 2024, но это неточно
#novelveiw #rendering #stabilization #video2video #video2scene #FVV
На входе мультикамерное видео, на выходе - видео с любого ракурса. Конкурент HyperReel и 4D Gaussian Splatting for Real-Time Dynamic Scene Rendering в создании Free-Viewpoint Videos (FVV)
Обучается (для одного кадра?...) за 12 секунд. Рендерит 200 кадров в секунду
Код ожидается в июне 2024, но это неточно
#novelveiw #rendering #stabilization #video2video #video2scene #FVV
👍2👏2
Media is too big
VIEW IN TELEGRAM
Gaussian-SLAM: Photo-realistic Dense SLAM with Gaussian Splatting
Реконструкция сцен реального мира по RGBD - видео на гауссианах. Канал глубины решает, ну и архитектура тоже
Код
#gaussian #video2scene #rendering #videoto3D
Реконструкция сцен реального мира по RGBD - видео на гауссианах. Канал глубины решает, ну и архитектура тоже
Код
#gaussian #video2scene #rendering #videoto3D
Опубликован код 3DGStream. Рефакторизованный код выложат после CVPR 2024
Код
#novelveiw #rendering #stabilization #video2video #video2scene #FVV
Код
#novelveiw #rendering #stabilization #video2video #video2scene #FVV
Telegram
Нейронавт | Нейросети в творчестве
3DGStream: On-the-Fly Training of 3D Gaussians for Efficient Streaming of Photo-Realistic Free-Viewpoint Videos
На входе мультикамерное видео, на выходе - видео с любого ракурса. Конкурент HyperReel и 4D Gaussian Splatting for Real-Time Dynamic Scene Rendering…
На входе мультикамерное видео, на выходе - видео с любого ракурса. Конкурент HyperReel и 4D Gaussian Splatting for Real-Time Dynamic Scene Rendering…
❤3
Media is too big
VIEW IN TELEGRAM
Shape of Motion: 4D Reconstruction from a Single Video
Вам понравится.
Реконструкция динамической 3D сцены по видео с одного ракурса. Реконструкция построена на объединении точек в жесткие группы по векторам движения, трекинге, оценке глубины.
Код
#videoto3d #video2scene #video2video #novelview
Вам понравится.
Реконструкция динамической 3D сцены по видео с одного ракурса. Реконструкция построена на объединении точек в жесткие группы по векторам движения, трекинге, оценке глубины.
Код
#videoto3d #video2scene #video2video #novelview
❤7🔥6👍3