This media is not supported in your browser
VIEW IN TELEGRAM
Pixar использовали нейронный перенос стиля для стилизации огня в фильме Элементарно
Эмбер, одна из главных героев фильма, должна была быть сделана из материала, похожего на пламя, но не из реалистичного пламени, потому что тогда она бы выглядела жутко. Для отрисовки эталонного стиля наняли художника Джонатана Хоффмана. Стиль перенесли на рендера пламени и получили огненных персонажей, которых вы могли видеть в фильме.
Статья в WIRED
#styletransfer
Эмбер, одна из главных героев фильма, должна была быть сделана из материала, похожего на пламя, но не из реалистичного пламени, потому что тогда она бы выглядела жутко. Для отрисовки эталонного стиля наняли художника Джонатана Хоффмана. Стиль перенесли на рендера пламени и получили огненных персонажей, которых вы могли видеть в фильме.
Статья в WIRED
#styletransfer
🔥8
This media is not supported in your browser
VIEW IN TELEGRAM
У генератора видео Morphsudio обновка.
Теперь по умолчанию разрешение 1080p, хронометраж от 3 до 7 секунд
#text2video
Теперь по умолчанию разрешение 1080p, хронометраж от 3 до 7 секунд
#text2video
PAIR Diffusion: A Comprehensive MultimodalObject-level Image Editor
Редактор изображений на уровне объектов, не требующий инверсии.
Код
Демо (сейчас не работает)
#image2image#
Редактор изображений на уровне объектов, не требующий инверсии.
Код
Демо (сейчас не работает)
#image2image#
👍7
4D Gaussian Splatting for Real-Time Dynamic Scene Rendering
Вы должны это срочно увидеть!
У HyperReel появился конкурент и какой.
Гауссианы + временная составляющая = рендеринг динамической сцены с заданного ракурса. Мне пока непонятно сколько входных ракурсов надо чтобы это работало. Известно что тестировали на синетитических данных и датасетах реальных видео, снятых одновременно на от 1 до 15 камер. Видимо, как-то должно работать и на входном видео с одной камеры.
Короче, они описали гауссианами не только форму, но и движение и деформацию. При этом рендеринг в реальном времени, 70 кадров в секунду при разрешении 800 * 800 на RTX 3090, качество не ниже чем у конкурентов.
Код
Колаб
#novelveiw #rendering #stabilization #video2video #video2scene
Вы должны это срочно увидеть!
У HyperReel появился конкурент и какой.
Гауссианы + временная составляющая = рендеринг динамической сцены с заданного ракурса. Мне пока непонятно сколько входных ракурсов надо чтобы это работало. Известно что тестировали на синетитических данных и датасетах реальных видео, снятых одновременно на от 1 до 15 камер. Видимо, как-то должно работать и на входном видео с одной камеры.
Короче, они описали гауссианами не только форму, но и движение и деформацию. При этом рендеринг в реальном времени, 70 кадров в секунду при разрешении 800 * 800 на RTX 3090, качество не ниже чем у конкурентов.
Код
Колаб
#novelveiw #rendering #stabilization #video2video #video2scene
❤4👍4
This media is not supported in your browser
VIEW IN TELEGRAM
Masterpiece X - Generate
NVIDIA представила свою платформу создания 3D моделей по текстовому описанию. Создавать можно сразу с анимацией, судя по промовидео.
На старте дают 250 кредитов, этого хватит на 5 моделей.
Го генерировать!
#textto3D #text2animation
NVIDIA представила свою платформу создания 3D моделей по текстовому описанию. Создавать можно сразу с анимацией, судя по промовидео.
На старте дают 250 кредитов, этого хватит на 5 моделей.
Го генерировать!
#textto3D #text2animation
🔥7
Civitai.com переходит на платную основу. Пока частично Вводит палатные ничтяки и поощрения
😱12
Forwarded from CGIT_Vines (Marvin Heemeyer)
This media is not supported in your browser
VIEW IN TELEGRAM
Есть, в общем, такая продакшен-студия - Bad Decisions. Они чем-то напоминают или даже копируют Corridor Digital, но суть не в этом. Они сильно захайпились последнее время за счет переноса известных сцен из кино в 3D через использование Gaussian Splatting. Тут они перенесли фильм Shining, так же в полном видео есть Матрица, Бесславные ублюдки, Асасин и Гарри Поттер.
Я честно не могу сказать, что это прям очень частая потребность в 3D или кино-продакшене (я именно про перевод из кино-материала в 3D), но эффект производит интересный. Ладно, может быть есть польза данных траектории камеры и может быть для Deep композа удобно имплементировать материал.
Можно еще попробовать повытаскивать из игр данные, но тоже не понятно для чего, т.к. есть инструменты более удобные для того, чтобы вытащить оригинальную геометрию и текстуры сразу. (Поправьте, если еще видите какую-то киллер-фичу, которую я не углядел)
Я честно не могу сказать, что это прям очень частая потребность в 3D или кино-продакшене (я именно про перевод из кино-материала в 3D), но эффект производит интересный. Ладно, может быть есть польза данных траектории камеры и может быть для Deep композа удобно имплементировать материал.
Можно еще попробовать повытаскивать из игр данные, но тоже не понятно для чего, т.к. есть инструменты более удобные для того, чтобы вытащить оригинальную геометрию и текстуры сразу. (Поправьте, если еще видите какую-то киллер-фичу, которую я не углядел)
MiniGPT-v2:Large Language Model as a Unified Interface for Vision-Language Multi-task Learning
Визуально-языковая модель, наверно теперь такие LLM надо называть VLM
И как раз есть сравнение, см картинки (твиттер) с GPT-4V
Код
Демоспейс
Колаб
#chatbot #LLM #VLM #assistant
Визуально-языковая модель, наверно теперь такие LLM надо называть VLM
И как раз есть сравнение, см картинки (твиттер) с GPT-4V
Код
Демоспейс
Колаб
#chatbot #LLM #VLM #assistant
👍4
VideoReTalking: Audio-based Lip Synchronization for Talking Head Video Editing In the Wild
Генератор говорящей головы с липсинком, лучше недавнего wav2lip.
И даже продолжительное молчание отрабатывает +/- хорошо
Код
Колаб
#wav2lip #lipsync #talkinghead #audio2video
Генератор говорящей головы с липсинком, лучше недавнего wav2lip.
И даже продолжительное молчание отрабатывает +/- хорошо
Код
Колаб
#wav2lip #lipsync #talkinghead #audio2video
👎1
This media is not supported in your browser
VIEW IN TELEGRAM
Riffusion
Генератор песен, звучит офигительно, работает быстро.
Из минусов - продолжительность трека всего 12 секунд.
Запилил для вас пару цитат Бендера.
Кидайте творчество в коменты.
В коментах есть лайфхак
#text2music #text2song #text2audio
Генератор песен, звучит офигительно, работает быстро.
Из минусов - продолжительность трека всего 12 секунд.
Запилил для вас пару цитат Бендера.
Кидайте творчество в коменты.
В коментах есть лайфхак
#text2music #text2song #text2audio
🔥4