Библиотека дата-сайентиста | Data Science, Machine learning, анализ данных, машинное обучение
18.8K subscribers
2.23K photos
111 videos
64 files
4.64K links
Все самое полезное для дата сайентиста в одном канале.

По рекламе: @proglib_adv

Курс по ML: https://clc.to/4hNluQ

Для обратной связи: @proglibrary_feeedback_bot

РКН: https://gosuslugi.ru/snet/67a5b03124c8ba6dcaa121c9
加入频道
😎 Times составил список 100 самых влиятельных людей в AI-индустрии

Список делится на разные категории. Вот главные лица категорий:

🔹 Лидеры: Сундар Пичаи — CEO Google и Alphabet. Попал в список за стремление компании занять главенствующую позицию в ИИ-индустрии.

🔹 Инноваторы: Лиза Су — CEO AMD. Текущее поколение ИИ-чипов компании, MI300, является самым быстрорастущим её продуктом.

🔹 Мыслители: Рэй Курцвейл — американский изобретатель и футуролог. В 1990 году Курцвейл верно спрогнозировал, что ИИ победит лучшего шахматиста до наступления нового тысячелетия, и что мобильные устройства, подключенные к глобальной информационной сети, появятся в следующем десятилетии. В 1999 году он предсказал, что к 2029 году компьютеры сравняются с человеческим интеллектом во всех областях.

🔹 Созидатели: Амандип Сингх Джилл — Посланник Генерального секретаря ООН по технологиям. Координирует сотрудничество между государствами-членами организации и представителями промышленности и гражданского общества.

🔗 Посмотреть весь список можно по этой ссылке
😁7🔥6👍4🤔3
This media is not supported in your browser
VIEW IN TELEGRAM
👆Шпаргалка по пошаговой работе над ИИ-проектом👆
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥12
This media is not supported in your browser
VIEW IN TELEGRAM
🌲 Supertree — инструмент для создания интерактивных виузализаций деревьев решений

🟣 Работает с Jupyter Notebooks, Jupyter Lab, Google Colab и другими ноутбуками, поддерживающими рендеринг HTML;

🟣 Позволяет зумить деревья;

🟣 Позволяет разворачивать и сворачивать выбранные узлы.

🔗 Ссылка на репозиторий проекта
👍11😁41
⚔️ Почему R лучше Python для Data Science

Это целый репозиторий, в котором автор перечисляет все преимущества использования языка R в науке о данных. Конечно же, это субъективное мнение.

Вот некоторые из перечисленных плюсов:

🔹RStudio удобнее Jupyter ноутбуков (например, там лучше устроена отладка кода, а также просмотр таблиц интерактивен по умолчанию);
🔹Экосистема R лучше настроена для работы с временными рядами;
🔹Агрегирование и окна проще реализовать в R с помощью dplyr, чем в Pandas.

🔗 Ознакомиться с репозиторием можно здесь
👍12😁12🌚5🥱4🤔1
🗄 Что такое ORM и зачем это нужно дата-сайентисту

Object-Relational Mapper (ORM) — это технология, которая позволяет работать с базами данных так, словно это объекты. Она упрощает взаимодействие с БД в коде и даже делает его более безопасным.

🧑‍💻 В Python одна из наиболее известных ORM — это SQLAlchemy. Она поддерживает MySQL, PostgreSQL, SQLite, Oracle и др. Вот как будет выглядеть подключение к базе данных SQLite с помощью SQLAlchemy:
from sqlalchemy import create_engine

db_url = 'sqlite:///mydatabase.db'
engine = create_engine(db_url)

with engine.connect() as conn:
result = conn.execute('SELECT 1')
print(result.fetchone())


👀 Для дата-сайентиста важно то, что SQLAlchemy предоставляет множество методов для манипуляций с данными. Вы можете легко вставлять, обновлять и удалять записи, а также выполнять SQL-запросы.
👍32
📊 Основные методы анализа данных для новичков

Вот как работают ключевые методы Data Science:

Описательная статистика — анализируйте средние значения, разброс и распределение данных для лучшего понимания

Регрессия — предсказывайте будущее: найдите связь между переменными и используйте её для прогнозов

Классификация — автоматически разделяйте данные на категории, например, определяя клиентов по предпочтениям

Кластеризация — объединяйте похожие данные в группы для выявления скрытых закономерностей

Чтобы применить основные методы анализа данных, сначала откройте Python. Установите библиотеку Pandas, которая поможет работать с данными. Далее загрузите свой файл, чтобы начать анализ.

#база
Please open Telegram to view this post
VIEW IN TELEGRAM
4👾2👍1
This media is not supported in your browser
VIEW IN TELEGRAM
Google выпустила инструмент для превращения любой научной статьи в подкаст

Illuminate — это text-to-audio сервис, который помогает быстро ознакомиться с содержимым научных статей.

Пока инструмент доступен только по запросу — нужно встать в список ожидания. Однако на странице Illuminate уже есть подкасты по известным в сфере ИИ научным статьям:

▪️Attention is All You Need
▪️Chain-of-Thought Prompting Elicits Reasoning in Large Language Models
▪️On Limitations of the Transformer Architecture
▪️MLP-Mixer: An all-MLP Architecture for Vision

🔗 Ссылка на Illuminate
9🔥4
🐍 Python Training — курс по Python для бизнес-аналитиков JPMorgan

Небольшой курс сосредоточен на введении в вычисления и визуализацию данных в Python. Подходит для тех, кто не имеет опыта программирования.

Вот темы, которые охватывает курс:

▪️основы Python (в Jupyter);
▪️базовые вычисления и работа с данными (NumPy, Pandas);
▪️работа с API;
▪️визуализация данных (Matplotlib, Seaborn);
▪️лучшие практики Python.

🔗 Ссылка на курс
6🥰2
👨‍🎓️📊 7 мифов о профессии Data Scientist

Вокруг науки о данных возникло множество разнообразных заблуждений, мешающих освоить эту замечательную дисциплину. Развенчиваем наиболее распространённые мифы о профессии Data Scientist.

🔗 Читать статью
🥰4🥱2🌚2🤩1
Привет, друзья! 👋

Мы готовим статью о будущем AI и его влиянии на разработку. Нам важно ваше мнение! 🤖

1️⃣ Как вы думаете, AI действительно изменит мир разработки?
2️⃣ Какие плюсы и минусы использования AI в разработке вы видите? 💡
3️⃣ Есть ли у вас примеры успешного применения AI в ваших проектах? 🛠️

Поделитесь своими идеями в комментариях! Самые интересные идеи и предложения мы обязательно включим в нашу статью. Спасибо за участие! 🙌
👍2🎉2
🧑‍💻 Статьи для IT: как объяснять и распространять значимые идеи

Напоминаем, что у нас есть бесплатный курс для всех, кто хочет научиться интересно писать — о программировании и в целом.

Что: семь модулей, посвященных написанию, редактированию, иллюстрированию и распространению публикаций.

Для кого: для авторов, копирайтеров и просто программистов, которые хотят научиться интересно рассказывать о своих проектах.

👉Материалы регулярно дополняются, обновляются и корректируются. А еще мы отвечаем на все учебные вопросы в комментариях курса.
👍1
📊Plotlars — Rust-библиотека для отрисовки графиков

🔘Выступает в качестве обёртки вокруг библиотеки Plotly, чтобы упростить процесс создания визуализаций из Polars DataFrame.
🔘Поддерживает различные типы графиков и предлагает интуитивно понятный интерфейс для настройки визуализаций.
🔘Интегрируется с Jupyter Notebooks.

🔗 Ссылка на репозиторий проекта
Please open Telegram to view this post
VIEW IN TELEGRAM
7👍4
🍉 Подборка лучших статей «Библиотеки программиста» за август: сохраняй в заметки, чтобы не пропустить #самыйсок

🔢 Математика для Data Science: необходимый минимум
🐍 Python: универсальный язык программирования для начинающих и профессионалов
🛠️ 9 инструментов для бэкенд-разработчика: ИИ-ассистент DevOps-инженера и Regular Expression Tester
🤖🛠️ ТОП-25 опенсорсных инструментов для вашего ИИ-проекта
🧮🏭 Индустриальная математика: когда ∫f(x)dx равно миллиардам
🧪 Байесовское A/B-тестирование vs частотное: преимущества, недостатки и способ реализации на Python
🧠⬇️ Есть мнение: уровень знаний айтишников снизился
🎨 ТОП-7 библиотек визуализации данных в 2024 году: обзор и сравнение
🐍📈 Бэктест на Python: оцениваем торговую стратегию
🐍🔍 7 малоизвестных возможностей стандартной библиотеки Python
🤖 6 основных алгоритмов машинного обучения: руководство для начинающих
🤖🆓13 опенсорсных инструментов для ИИ-разработчиков
👍3
Самые полезные каналы для программистов в одной подборке!

Сохраняйте себе, чтобы не потерять 💾

🔥Для всех

Библиотека программиста — новости, статьи, досуг, фундаментальные темы
Книги для программистов
IT-мемы
Proglib Academy — тут мы рассказываем про обучение и курсы
Азбука айтишника — здесь мы познаем азы из мира программирования

🤖Про нейросети
Библиотека робототехники и беспилотников | Роботы, ИИ, интернет вещей
Библиотека нейрозвука | Транскрибация, синтез речи, ИИ-музыка
Библиотека нейротекста | ChatGPT, Gemini, Bing
Библиотека нейровидео | Sora AI, Runway ML, дипфейки
Библиотека нейрокартинок | Midjourney, DALL-E, Stable Diffusion

#️⃣C#

Книги для шарпистов | C#, .NET, F#
Библиотека шарписта — полезные статьи, новости и обучающие материалы по C#
Библиотека задач по C# — код, квизы и тесты
Библиотека собеса по C# — тренируемся отвечать на каверзные вопросы во время интервью и технического собеседования
Вакансии по C#, .NET, Unity Вакансии по PHP, Symfony, Laravel

☁️DevOps

Библиотека devops’а — полезные статьи, новости и обучающие материалы по DevOps
Вакансии по DevOps & SRE
Библиотека задач по DevOps — код, квизы и тесты
Библиотека собеса по DevOps — тренируемся отвечать на каверзные вопросы во время интервью и технического собеседования

🐘PHP

Библиотека пхпшника — полезные статьи, новости и обучающие материалы по PHP
Вакансии по PHP, Symfony, Laravel
Библиотека PHP для собеса — тренируемся отвечать на каверзные вопросы во время интервью и технического собеседования
Библиотека задач по PHP — код, квизы и тесты

🐍Python

Библиотека питониста — полезные статьи, новости и обучающие материалы по Python
Вакансии по питону, Django, Flask
Библиотека Python для собеса — тренируемся отвечать на каверзные вопросы во время интервью и технического собеседования
Библиотека задач по Python — код, квизы и тесты

Java

Книги для джавистов | Java
Библиотека джависта — полезные статьи по Java, новости и обучающие материалы
Библиотека Java для собеса — тренируемся отвечать на каверзные вопросы во время интервью и технического собеседования
Библиотека задач по Java — код, квизы и тесты
Вакансии для java-разработчиков

👾Data Science

Книги для дата сайентистов | Data Science
Библиотека Data Science — полезные статьи, новости и обучающие материалы по Data Science
Библиотека Data Science для собеса — тренируемся отвечать на каверзные вопросы во время интервью и технического собеседования
Библиотека задач по Data Science — код, квизы и тесты
Вакансии по Data Science, анализу данных, аналитике, искусственному интеллекту

🦫Go

Книги для Go разработчиков
Библиотека Go разработчика — полезные статьи, новости и обучающие материалы по Go
Библиотека Go для собеса — тренируемся отвечать на каверзные вопросы во время интервью и технического собеседования
Библиотека задач по Go — код, квизы и тесты
Вакансии по Go

🧠C++

Книги для C/C++ разработчиков
Библиотека C/C++ разработчика — полезные статьи, новости и обучающие материалы по C++
Библиотека C++ для собеса — тренируемся отвечать на каверзные вопросы во время интервью и технического собеседования
Библиотека задач по C++ — код, квизы и тесты
Вакансии по C++

💻Другие каналы

Библиотека фронтендера
Библиотека мобильного разработчика
Библиотека хакера
Библиотека тестировщика
Вакансии по фронтенду, джаваскрипт, React, Angular, Vue
Вакансии для мобильных разработчиков
Вакансии по QA тестированию
InfoSec Jobs — вакансии по информационной безопасности
Библиотека разработчика игр | Gamedev, Unity, Unreal Engine

📁Чтобы добавить папку с нашими каналами, нажмите 👉сюда👈

Также у нас есть боты:
Бот с IT-вакансиями
Бот с мероприятиями в сфере IT

Мы в других соцсетях:
🔸VK
🔸YouTube
🔸Дзен
🔸Facebook *
🔸Instagram *

* Организация Meta запрещена на территории РФ
1👍1