У меня стойкое ощущение что глаза меня обманывают, мозг меня обманывает, я что-то неправильно понял. Выглядит слишком хорошо

Ура, добывающая профессия теперь и в МЛ. Infinigen - «золотоносная» жила для генерации качественных синтетических 3D сцен для задач компьютерного зрения

Двигатель прогресса в МЛ - качественные данные. С этим много сложностей от этичного сбора до проклято-трудоемкой аннотации (особенно видео). Исследователи давно работают над симуляцией, и пока это не было достаточно хорошим решением (ограниченная вариативность, упрощенные текстуры и геометрии, зависимость от референсов).

Ученые из Принстона представили Infinigen - источник бесконечных возможностей генерации природных 3D сцен с автоматической аннотацией.

Infinigen восхитительный, потому что:
Процедурный. Каждый объект, от формы до текстуры, создается с нуля по стохастическим правилам и настраивается(!), а количество интерпретируемых человеком степеней свободы (типа материала и размера камней, формы листьев и лепестков) не менее 1070.

Геометрически достоверный. В нем не используются рельефные карты или прозрачности. Все детали геометрии реальные. В этом помогает Blender.

Вдохновлен эволюцией. Зрение млекопитающих развивалось в мире растений, животных, ландшафтов и природных явлений: огонь, дождь, снег. И важно в геологоразведке, навигации беспилотников, экологического мониторинга, спасательных работ, автоматизации сельского хозяйства.

Автоматически аннотируется. Для различных задач CV от оптического потока, 3D-flow сцены, нормалей поверхности до паноптической сегментации и границы окклюзии.

Доступный. Открытый код и artist-friendly с конвертацией Blender Nodes в питон.

Теперь почему это труд и нужен инпут сообщества.
Среднее время создания пары изображений 1080p составляет 3,5 часа. Примерно один час из этого времени используется GPU для рендеринга. Требует в среднем 24 Гб памяти (тестировали на 2 процессорах Intel(R) Xeon(R) Silver 4114 @ 2.20GHz и 1 из 5 NVidia-GPU).
Зато получается годно с первого раза.
Обещают в ближайшее время выложить предсимуляции и создать большой репозиторий с общей копилкой генераций.

🔑Сайт
⛏Код
📖Пейпер

@GingerSpacetail

"Кажется, первый случай [испытания Neuralink на человеке] произойдёт в конце этого года", - сказал Илон Маск на недавней конференции VivaTech в Париже

Дисклеймер: видео длинное, я не проверял, есть ли там такие слова

3D-видеоконференции от NVIDIA, никакого спецоборудования, достаточно вебки. Бонусом - стилизация гворящей головы.

Скрестили Maxine 3D и AERIAL 5G
(Nvidia Aerial - пакет разработки ПО, который позволяет провайдерам создавать высокопроизводительные программно определяемые 5G беспроводные радиосети с двумя важными параметрами. Во-первых, это канал передачи данных низкой латентности от сетевых интерфейсных карт Mellanox до памяти GPU и, во-вторых, это движок обработки сигналов физического уровня 5G, который позволяет хранить все данные в высокопроизводительной памяти GPU)

#video2dideo #humanavatar #videoconference #realtime

AvatarBooth: High-Quality and Customizable 3D Human Avatar Generation

Генерация анимируемого 3D-аватара по текстовому описанию. Возможна реконструкция персонажа по 4-6 фото с телефона или генератора изображений

Код обещают выложить

#textto3D #humanavatar #text2avatar #3Davatar

Слышали, ChatGPT в роли бабушки выдал рабочие (сам не проверял) ключи активации Windows 10? Так вот, это ерунда. На днях он выдал президентские коды пуска ЯО. Рабочие ли они пока никто не сообщил. Если у вас сработают, поделитесь результатами в комментах

Стащил у @neuraldvig

минутка флюидной красоты - целиком на нейронках

в этой завораживающей анимации органично соединились два важных для меня элемента:

лора, обученная на кислотных флюидных картинках. рад поделиться ей на civitai

собственный аналог дефорума созданный с помощью Stable Houdini. он позволяет использовать Automatic1111 как движок генерации а все команды отправлять из Houdini.
нодами очень удобно и наглядно удалось собрать мощный сетап - он идеально подходит для 2д флюидной анимации и не только - гифки в комментах

сетапом тоже буду рад поделиться. и ваши лайки и репосты мотивируют меня поскорее подготовить файл и стрим на ютуб - о том как им пользоваться. всем любовь!

LoRa AcidFluid
Stable Houdini

@тоже_моушн

Компания Reallusion выпустила Headshot 2.0 , последнюю версию своего плагина для создания головы с помощью ИИ для Character Creator 4 , добавив новый режим сетки для преобразования импортированных 3D-моделей. Плагин поставляется вместе с Character Creator 4.3.

Новый набор инструментов предназначен для работы с 3D-сканами, а также с цифровыми скульптурами,
и может справляться с неполным сканированием лица, используя ИИ для восстановления отсутствующих
или поврежденных частей исходной модели.
Headshot генерирует любые недостающие части головы, что позволяет импортировать сканы или скульпты
с волосами или даже головными уборами, а плагин игнорирует эти части исходной модели.

Headshot позиционируется как инструмент который одним щелчком мыши позволяет создать 3D-модели головы из одной фотографии актера с использованием методов ИИ. Головы можно создавать с текстурами 4096 x 4096 пикселей для использования в крупных планах или с текстурами 1024 x 1024 пикселей и 3D-волосами для использования в качестве персонажей толпы.

Новый режим сетки Headshot 2.0 позволяет преобразовывать импортированные 3D-сетки в персонажей Character Creator 4.
Несмотря на то, что у Character Creator есть собственная встроенная система импорта моделей , Reallusion позиционирует Headshot как « превосходный инструмент для работы с моделями которые имею серьезные недостатки», такими как необработанные 3D-сканы.
Модели можно импортировать в формате OBJ или FBX — хотя только FBX 2018 и более ранних версий — в виде полных 3D-персонажей, моделей голов или даже частичных голов.

Рабочий процесс поддерживает гуманоидных персонажей — хотя онлайн-документация предполагает, что он лучше работает со стандартными человеческими головами, — но не с нечеловеческими существами.

После создания 3D-голова может быть прикреплена к телу CC4 для экспорта с возможностью маскировать части лица,
чтобы избежать артефактов текстуры.

Официальное видео👈
Наш чатик👈