Нейронавт | Нейросети в творчестве
9.5K subscribers
3.68K photos
3.17K videos
40 files
4.13K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках не участвую

для связи @Neuronauticus
加入频道
Обновки ведущих видеогенераторов

Ray 2 - новая модель от Luma
Хвастается естественным движением и консистентностью. Доступен на платной подписке

Auto SFX - ltx.studio научился озвучивать свои и сторонние видео. Попробовать

Vidu 2.0 - генерация видео всего за 10 секунд. Улучшенная согласованность. Неограниченное количество бесплатных генераций в непиковые часы.

#text2video #image2video #video2sound #sfx
👍10👎1
Media is too big
VIEW IN TELEGRAM
Vidu Q1

Обновка видеогенератора

1080p
Обещают четкую картинку, кинематографичные переходы, звуковые эффекты синхронизированные с видео

При регистрации нового аккаунта с промокодом VIDUQ1
дают 100 приветственных кредитов (мне дали 180 😕).

А за лайк видео в твиттере можно выиграть 600 кредитов и что-то там еще

[update] после трех генераций требует подписку

#text2video #image2video #video2sound #sfx
Please open Telegram to view this post
VIEW IN TELEGRAM
👍2💩1
This media is not supported in your browser
VIEW IN TELEGRAM
Kling Sound

А также выпустили генератор звуков для видео
Или просто по текстовому описанию

#video2sound #text2sound #sfx #foley
👍4🔥31
Media is too big
VIEW IN TELEGRAM
ThinkSound

Модель от Tongyi Lab (авторов InspireMusic и много чего еще) создаёт реалистичный звук для видео. Архитектура - цепочка рассуждений (#CoT). Необычно для генерилки звука, да? Скоро достижения языковых моделей будут везде, к этому все идет.

Модель сначала генерирует общий звуковой фон, затем улучшает качество звука конкретных объектов на экране и, наконец, редактирует всё это по текстовым указаниям пользователя

Код
Демо

Спасибо @p0lygon

#Video2sfx #foley #sfx #audioediting #video2audio #text2sfx
🔥14👍1🤔1
Для рассуждающего генератора звука ThinkSound опубликован код обучения/файнтюна

Модель облегчили, оптимизировали расход памяти и GPU? упростили установку

Код
Демо

#Video2sfx #foley #sfx #audioediting #video2audio #text2sfx #any2audio
👍5
Media is too big
VIEW IN TELEGRAM
HunyuanVideo-Foley: Multimodal Diffusion with Representation Alignment for High-Fidelity Foley Audio Generation

Генератор звука к видео с текстовыми подсказками от Hunyuan
По ссылке в заголовке тонна примеров

Офсайт
Код
HF
Демо

#foley #video2audio #video2sound #sfx #video2sfx
6👍1🔥1
Нейронавт | Нейросети в творчестве
Video
Media is too big
VIEW IN TELEGRAM
Стало мне любопытно на каком языке озвучивает HunyuanVideo-Foley
Мне звучит как смесь китайского и немецкого.

Пихнул озвученный им самый драматичный эпизод русских сериалов в разные нейродубляжки. Мало кто умеет автоматически определять язык исходника. Rask.ai - один из тех кто умеет. Короче все кто умеет, определили эту речь как английскую. Ну и неудивительно, шотландцы например порой разговаривают на таком английском который мало кто из носителей языка в силах понять.

Ну и дубляж на русский с нейросетевого - вашему вниманию.

Хвастайтесь в коментах своими экспериментами

#humor #foley #video2audio #video2sound #sfx #video2sfx
😁21😭2👍1🔥1