Expressive Text-to-Image Generation with Rich Text

Занятная штука. Контроль генерации изображения через формат текста: цвет, стиль, сноски.

Код
Демо
Расширение для automatic1111

#text2image #style2image #format2image #font2image

Гугл анонсировал Google Assistant with Bard.
Скоро на андроидах.
Он сможет копаться в вашей почте, рассматривать ваши фотки чтобы настуч самостоятельно написать к ним пост в соцсети. И много другого полезного для Гугла

Что скажет Тим Кук?

#assistant #chatbot

В обновлении Яндекс браузера прикрутили фичу краткий пересказ видео.
Теперь длинные видео можно прочитать за пару минут.
Как я жил без этого?

#summary #video2text #video2summary

UniAudio: An Audio Foundation Model Toward Universal Audio Generation

Универсальная базовая модель генерации звука
- текст в речь
- клонирование голоса
- замена голоса по образцу
- вокал по образцу без дообучения
- улучшение качества звука без дообучения
- удаление шума
- выделение одного голоса из микса голосов
- текст в звук
- текст в музыку
- редактирование звука по тексту
- удаление эха
- редактирование речи текстовыми указаниями

Впечатляет? Примеров слишком много чтобы тащить сюда, смотрите на сайте проекта, авторы планируют добавить примеры других задач

Код

#audio #TTS #text2music #text2sound #speech2speech #voicecloning #demix #denoise #audioenhance

Insta-3D

Интерактивный демоспейс от ilumine.ai, где можно поиграть, сделав из картинки 3D-сцену и накидывая эффекты.

Вам понадобится карта глубины, ее можно сделать каким-нибудь генератором, поиск в этом канале по тегу #image2depth

#image2scene

SLiMe: Segment Like Me

Сегментатор на основе Stable Diffusion

Код
Колаб

#segmentation #image2mask

AutoGen

Платформа от Microsoft для создания мультиагентных систем. Это как ИИ-ассистент, только их там внутри несколько, и они взаимодействуют друг с другом.
Не знаю зачем вам это, но если надо, то вот оно есть в открытом доступе.

Код

#chatbot #assistant #LLM

Firefly Vector

Генератор векторных изобрашений по тексту. Делает готовые рекламные макеты, генерит логотипы и принты.

Записаться в бету

#text2vector

Firefly Vector Model или text-to-vector
Адобченко представила векторную модель Firefly. Adobe описывает новую модель как "первую в мире генеративную модель, ориентированную на создание векторной графики". Firefly для Illustrator сможет создавать всю векторную графику с нуля. Как и другие модели Firefly, векторная модель также обучалась на данных из Adobe Stock.
Молодцы они, конечно. Пока остальные рядятся в выравнивание и цензуру, Адобченко делает готовые инструменты и ворочает мешки.
https://techcrunch.com/2023/10/10/adobe-brings-its-firefly-generative-ai-models-to-vector-graphics-in-illustrator/

Firefly Image model 2 (beta)

В том же обновлении Firefly реалистичные человеки, улучшенное следование промпту, референсные картинки на вход.

#text2image #image2image