Нейронавт | Нейросети в творчестве

Interpolating between Images with Diffusion Models

Интерполяция изображений диффузионными моделями через латентное пространство с использованием ControlNet. Проще говоря, плавный переход от одного изображения к другому.

Код

#image2image #image2video #frameinterpolation

😁1

733 views08:32

2:39

AnimeInbet: Deep Geometrized Cartoon Line Inbetweening

Интерполяция промежуточных кадров лайнарта в анимации с учетом геометрии. Есть тут аниматоры чтобы оценить?

Код
Видео полной презентации, 7 минут

#frameinterpolation #animation

🔥1

1.14K viewsedited 06:56

1:46

DynamiCrafter: Animating Open-domainImages with Video Diffusion Priors

Анимация изображений по текстовому описанию, интерополяция кадров на видео, закольцовывание видео

Код
Демо

#image2video #video2video #frameinterpolation

👍1

1.23K views10:59

14 марта обновился видеогенератор DynamiCrafter

Добавили интерполяцию кадров и зацикливание видео.
Разрешение новых моделей 320x512 🫤

Гитхаб

#text2video #image2video #frameinterpolation #loop

Please open Telegram to view this post

VIEW IN TELEGRAM

👍8

1.73K views08:42

VIDIM: Video Interpolation With Diffusion Models

Диффузная интерполяция кадров (слоумоушен) от Google Research и DeepMind. Затыкает за пояс и RIFE, и FILM (гугловский же)

Что с кодом, Гугл?

#frameinterpolation #slowmotion

👍7

1.47K viewsedited 11:48

1:19

ToonCrafter: Generative Cartoon Interpolation

Подъехала новая магия: мультяшная фазовка. Иначе говоря, интерполяция кадров, но не простая. Даем тункрафтеру два кадра, на выходе получаем кадры между ними. Выглядит прям мультяшно. Сравните с результатами интерполяторов, заточенных на видео (на сайте много примеров).

Ну и есть понятные границы возможностей - см в самом низу сайта.
Авторы планируют добавить контроль эскиза и заливку

Код

#frameinterpolation #animation

🔥14❤2

1.67K views07:10

0:02

tost.ai

ToonCrafter не озаботился демкой, а на Toast.ai уже можно его пощупать.
Это бесплатный сервис-хост генеративных нейросеток от автора многих демоспейсов и колаб ноутбуков. Набор небольшой пока, но разнонаправленный. Пользоваться можно после несложной регистрации.

В день дают 100 кредитов на бесплатное использование. Ну и можно, став спонсором сервиса, получить больше генераций.

Ну а можно и подключить туда свой GPU если у вас лишние мощности простаивают.

По Toonkrafter: работает быстро! на видео пример генерации за несколько секунд

Приятного бесплатного пользования

#tool #frameinterpolation #animation

👍15

1.69K views11:38

GitHub - kijai/ComfyUI-DynamiCrafterWrapper: Wrapper to use DynamiCrafter models in ComfyUI

ComfyUI-DynamiCrafterWrapper

Я еще не писал что ToonCrafter прикрутили в ComfyUI? Какое чудовищное упущение! Вот, пишу.
Готовьте много VRAM.

У кого не хватило - идем в tost.ai

#tool #frameinterpolation #animation

GitHub

Wrapper to use DynamiCrafter models in ComfyUI. Contribute to kijai/ComfyUI-DynamiCrafterWrapper development by creating an account on GitHub.

🔥11

1.69K viewsedited 05:34

0:04

Generative Inbetweening: Adapting Image-to-Video Models for Keyframe Interpolation

Новый интерполятор кадров от Google DeepMind. Посмотрите на сайте насколько он круче FILM. Из двух кадров делает видео

А почему они не сравнили его со своим же VIDIM?

Код

#frameinterpolation #slowmotion

❤10👍6

1.76K views11:20

0:03

Появился демоспейс интерполятора кадров Generative Inbetweening
Работает он, кстати, на базе #SVD
Все не так хорошо как хотелось бы.
Детали съедает, объекты идут артефактами

Демо

#frameinterpolation #slowmotion

👍8❤1🤯1

1.84K views08:35

2:13

Framer: Interactive Frame Interpolation

Интерполяция кадров с контролем траектории.
Кажется, пора уже вводить термин креативная интерполяция кадров

Код ждем 28 октября
Демо ждем

#frameinterpolation #slowmotion #motioncontrol

🔥8

1.65K views16:17

Можете потыкать демку интерполятора кадров Framer
Код задерживается

Демо

#frameinterpolation #slowmotion #motioncontrol

👍4

1.57K views11:10

1:14

GIMM-VFI: Generalizable Implicit Motion Modeling for Video Frame Interpolation

Интерполяция кадров, создает кадры между существующими

Код

#frameinterpolation #slowmotion

👍6🔥1

1.76K views14:41

1:23

Topaz Labs Video AI 7

реставратор видео Starlight mini - видимо, облегченная для локального запуска версия - доступен в платном пакете от Topaz Labs за жалкие $249, с целым годом грядущих обновлений

Помимо наваливания разрешения с деталями есть интерполяция кадров (слоумойшен) и (!!!) работа с .EXR - что вообще уникально. Хотя возможно, я слишком мало интересуюсь коммерческими реставраторами

Спасибо @MIXTRESH

#videorestoration #restoration #denoise #deblur #antialias #upscalevideo #enhance #frameinterpolation #exr

🔥7👍3😁1

1.78K views08:29

1:16

Topaz Labs Astra

"Первый в мире" (ага) креативный апскейлер видео. Предлагают апскейлить сгенерарованные нейросетками видео до 4K, "с улучшением качества и добавлением мельчайших деталей". Под капотом новые модели Starlight

Умеет делать интерполяцию кадров, то есть добавлять кадры меж существующих (для слоумоушена)

Чтобы поклянчить доступ ставьте лайк официальному твиту и там в комментах напишите "Astra"

Или идем на офсайт и жмем кнопку Get early access

#upscalevideo #upscale #frameinterpolation

❤7😈1

2.04K viewsedited 15:52

astra.app

"Первый в мире" креативный апскейлер видео от Topaz Labs вышел из стадии раннего доступа и доступен для всех... от $39 в месяц

#upscalevideo #upscale #frameinterpolation

🥴5🤔1💩1🤡1

1.52K views07:41

2:00

FreeMorph: Tuning-Free Generalized Image Morphing with Diffusion Model

Морфинг (плавное перетекание) одного заданного кадра в другой за 30 секунд. Полагаю, можно использовать как интерполятор кадров

В 10X ~ 50X быстрее существующих методов, #SOTA в морфинге

Код

#frameinterpolation #morphing

🔥13👍4❤1

1.71K viewsedited 07:41

3:17