🐭 Фильм из мышиного мозга

Буквально через пару дней после того, как препринт из реплая стал статьёй в Nature Neuroscience, швейцарским исследователям удалось проникнуть в «сознание» мыши, которая смотрела фильм, расшифровать сигналы ее мозга и воссоздать увиденный ею ролик.

Группа учёных из Федеральной политехнической школы Лозанны (EPFL) создала инструмент, способный декодировать сигналы мозга грызуна в режиме реального времени, в итоге воссоздавая визуальный нарратив, разворачивающийся перед глазами мыши.

Алгоритм машинного обучения, получивший название CEBRA, был обучен ассоциировать нейронную активность с определенными кадрами видео. Затем CEBRA смог предсказать и собрать клип, который показывали мыши — чёрно-белый фильм 60-х годов, в котором мужчина бежит к машине и открывает багажник. На отдельном экране отображалась интерпретация CEBRA визуального опыта мыши, которая показала поразительно похожую реконструкцию, хотя и с некоторыми сбоями.

В исследовании, опубликованном вчера в журнале Nature, подробно описано, как учёные отслеживали и документировали активность мозга грызунов с помощью электродов, вставленных в область зрительной коры, а также оптогенетических зондов (генномодифицированные нейроны в их мозге светились зеленым цветом при возбуждении и передаче информации).

Обучение CEBRA включало в себя сами фильмы, которые смотрели мыши, и данные активности их мозгов, что позволило алгоритму выстроить нейронные корреляты конкретных кадров фильма. Затем алгоритму была показана новая активность, с которой он раньше не сталкивался, от мыши, которая смотрела слегка отличный видеоряд. На основе этого CEBRA смог предсказать, какой кадр смотрела мышь в режиме реального времени, и исследователи превратили эти данные в собственный фильм.

Это не первый случай, когда исследователи декодируют сигналы мозга для создания изображений. В прошлом месяце PetaPixel сообщил об исследователях из Университета Осаки (Япония), которые в марте смогли восстановить высокоточные изображения высокого разрешения на основе активности мозга с помощью Stable Diffusion.

А ещё в августе прошлого года Университет Радбоуда в Нидерландах разработал технологию, которая может переводить мозговые волны человека в фотографические изображения.


За наводку спасибо подписчику 💓

Так, ну было хоть и местами скучно, мне понравилось:

🪙 Gmail получит встроенную LLM для автоматического написания черновика. Например, отменили рейс и прислали вам письмо, вы можете сразу написать заявку на рефанд с помощью одной кнопки. В целом, ничего нового, делаю такое же с ChatGPT через плагин.

🪙 Google Maps получит обновление летом, а точнее его функция Immersive view - строите маршрут и он показывает его как в SimCity в 3D на основе реальных данных (скан реального мира), с машинками виртуальными и тп. Тут видео.

🪙 Google показал свой новый ответ GPT от OpenAI – Palm 2, это серия моделей от самой маленькой которая может работать оффлайн на телефоне и до самой большой которая работает в облаке. Bard, ChatGPT от Google, тоже перевели на Palm 2 уже сегодня. Еще в Bard добавят плагины, такие же как в ChatGPT. И с сегодня доступ открыли для всех:
https://bard.google.com

Google также показал интеграцию Bard в Google Docs, Slides, Tables и тп, тут как бы тоже все что вы уже видели от Microsoft.

🪙 Google поиск чуть изменит результаты выдачи, и первый остров станет пытаться отвечать на вопрос в стиле ChatGPT.

Если честно, очень логичный шаг, очень утомляет ходить в ChatGPT или Bing Chat когда ищешь ответ на вопрос, не всегда же приходишь пообщаться, иногда просто нужен быстрый ответ (но опция початиться тоже останется). "Остров ответа нейронкой" занимает немного места, так что сможете использовать Google как обычно, промотав ответ языковой модели. Видео тут.
Лица SEO-экспертов имаджинировали?

🪙 Теперь большой бизнес может купить тренировку своей большой языковой модели в Google Cloud через Vertex AI. Это, условно, если вы хотите в организации рабочего бота обученного на данных компании, и вам не хочется нанимать свой R&D отдел, вы можете заплатить им и они сделают все что нужно, на самых лучших моделях. Золотая жила и классный продукт.
Доступен тут, обещают ранний доступ: 
https://cloud.google.com/vertex-ai

🪙 Тут в целом можно посмотреть про AI штуки что показали, и запросить доступы:
https://labs.withgoogle.com/

В общем, как и ожидалось, Google долго запрягает, потому что они большие, но им есть куда встраивать AI-штуки, и главное они знают как их сделать удобными, молодцы (но мне все еще нравится подшучивать над ними когда у них что-то не получается ☺️)