Российская база бухгалтерской отчетности
Наши коллеги из Института проблем правоприменения при ЕУСПб проделали большую работу и недавно опубликовали сводную Российскую базу бухгалтерской отчетности. Это большой информационный ресурс, который будет ежегодно обновляться и включает в себя не только все годовые неконсолидированные отчетности российских организаций, но и сведения об организациях, не подавших отчетность несмотря на такую обязанность. Существует возможность загружать данные по годам, а не только единой базой, это тоже можно сделать.
Коллеги из канала Если быть точным провели свое небольшое мини-исследование на основе этих данных и показали, как это можно использовать в при анализе различных социально-экономических показателей.
Наши коллеги из Института проблем правоприменения при ЕУСПб проделали большую работу и недавно опубликовали сводную Российскую базу бухгалтерской отчетности. Это большой информационный ресурс, который будет ежегодно обновляться и включает в себя не только все годовые неконсолидированные отчетности российских организаций, но и сведения об организациях, не подавших отчетность несмотря на такую обязанность. Существует возможность загружать данные по годам, а не только единой базой, это тоже можно сделать.
Коллеги из канала Если быть точным провели свое небольшое мини-исследование на основе этих данных и показали, как это можно использовать в при анализе различных социально-экономических показателей.
Map Mania 🗺
Map Mania - прекрасный блог для всех любителей картографии!
Также мне понравился небольшой симпатичный проект AllmapsHere, который определяет, где вы находитесь в настоящий момент, если бы это происходило на старинной карте.
Map Mania - прекрасный блог для всех любителей картографии!
Также мне понравился небольшой симпатичный проект AllmapsHere, который определяет, где вы находитесь в настоящий момент, если бы это происходило на старинной карте.
city roads 🌏
Напомню о существовании замечательного сервиса city roads.
Назовите город и на этом веб-сайте отобразятся все дороги в пределах данного города. Мы такое уже видели у Насти, но готовы смотреть еще и еще!
Отмечу, что и в R можно без особого труда сделать подобную карту.
Напомню о существовании замечательного сервиса city roads.
Назовите город и на этом веб-сайте отобразятся все дороги в пределах данного города. Мы такое уже видели у Насти, но готовы смотреть еще и еще!
Отмечу, что и в R можно без особого труда сделать подобную карту.
tmap 4.0 🌏
На CRAN вышел новый долгожданный релиз 4.0 библиотеки tmap для создания тематических карт! 🎉 Это действительно существенное изменение библиотеки, которая была полностью переписана и теперь содержит множество новых функций, измененный синтаксис и обновленные наборы данных. Новый синтаксис уже используется в книге Geocomputation with R.
Но самое приятное - это расширения с новыми типами слоев (глифы) в tmap.glyphs ⚡, возможность работать с сетевыми данными в tmap.networks 🔥 через sfnetworks и создание deck.gl 3D-карт в tmap.deckgl 🌟 (пока как proof-of-concept, поскольку deckgl уже 2 года как не обновляли).
На CRAN вышел новый долгожданный релиз 4.0 библиотеки tmap для создания тематических карт! 🎉 Это действительно существенное изменение библиотеки, которая была полностью переписана и теперь содержит множество новых функций, измененный синтаксис и обновленные наборы данных. Новый синтаксис уже используется в книге Geocomputation with R.
Но самое приятное - это расширения с новыми типами слоев (глифы) в tmap.glyphs ⚡, возможность работать с сетевыми данными в tmap.networks 🔥 через sfnetworks и создание deck.gl 3D-карт в tmap.deckgl 🌟 (пока как proof-of-concept, поскольку deckgl уже 2 года как не обновляли).
Geocomputation with Python 🐍
Jakub Nowosad написал о том, что полностью закончена работа над первым изданием книги Geocomputation with Python, входящей в общий проект geocompx с книгами для изучения и преподавания геовычислений на нескольких языках программирования (R, Python и Julia).
Данная книга является всеобъемлющим ресурсом для работы с географическими данными на Python. В книге дается обзор возможностей Python для анализа пространственных данных, а также десятки отработанных примеров, охватывающих весь спектр стандартных операций ГИС.
Анонс Geocomputation with Python has arrived можно прочесть на сайте, также есть возможность заказать книгу, бумажный экземпляр которой выйдет после 14 февраля 2025 г.
Jakub Nowosad написал о том, что полностью закончена работа над первым изданием книги Geocomputation with Python, входящей в общий проект geocompx с книгами для изучения и преподавания геовычислений на нескольких языках программирования (R, Python и Julia).
Данная книга является всеобъемлющим ресурсом для работы с географическими данными на Python. В книге дается обзор возможностей Python для анализа пространственных данных, а также десятки отработанных примеров, охватывающих весь спектр стандартных операций ГИС.
Анонс Geocomputation with Python has arrived можно прочесть на сайте, также есть возможность заказать книгу, бумажный экземпляр которой выйдет после 14 февраля 2025 г.
fishR 🐟🐠🐡
Веб-сайт fishR посвящен теме, связанной с языком программирования R и... рыболовством! Здесь вы найдете библиотеки, книги, упражнения для занятий, данные, записи блога, что может быть полезным не только биологам, но и стать примером использования R в прикладных целях.
Веб-сайт fishR посвящен теме, связанной с языком программирования R и... рыболовством! Здесь вы найдете библиотеки, книги, упражнения для занятий, данные, записи блога, что может быть полезным не только биологам, но и стать примером использования R в прикладных целях.
GitIngest
Недавно появился сервис GitIngest, позволяющий делать быструю расшифровку любого репозитория Git в текст, в оптимизированном формате вывода для запросов LLM.
В результате вы получите:
◾ структуру файлов и каталогов
◾ обзор с количеством необходимых токенов
◾ краткое содержание
Простой способ использования сервиса - заменить в адресе GitHub репозитория
Недавно появился сервис GitIngest, позволяющий делать быструю расшифровку любого репозитория Git в текст, в оптимизированном формате вывода для запросов LLM.
В результате вы получите:
◾ структуру файлов и каталогов
◾ обзор с количеством необходимых токенов
◾ краткое содержание
Простой способ использования сервиса - заменить в адресе GitHub репозитория
git на ingest.Time Series
Анализ временных рядов в R представлен довольно неплохо, у нас на канале была подборка материалов и книг, 👉 здесь расположено начало сборника. Сейчас есть возможность сделать небольшое дополнение:
1. Библиотека distantia позволяет сравнивать временные ряды (+ статья автора библиотеки по DTW-расстоянию).
2. Библиотека nixtlar на основе TimeGPT - генеративного предобученного преобразователя для прогнозирования временных рядов, разработанного Nixtla. Здесь нужно получить API key. Большое количество возможностей есть прямо из коробки. 🔥
3. PyTimeTK - библиотека анализа временных рядов на Python обзавелась неплохими прикладными руководствами (автор - известный нам Matt Dancho, автор аналогичных библиотек, например, modeltime в R).
Анализ временных рядов в R представлен довольно неплохо, у нас на канале была подборка материалов и книг, 👉 здесь расположено начало сборника. Сейчас есть возможность сделать небольшое дополнение:
1. Библиотека distantia позволяет сравнивать временные ряды (+ статья автора библиотеки по DTW-расстоянию).
2. Библиотека nixtlar на основе TimeGPT - генеративного предобученного преобразователя для прогнозирования временных рядов, разработанного Nixtla. Здесь нужно получить API key. Большое количество возможностей есть прямо из коробки. 🔥
3. PyTimeTK - библиотека анализа временных рядов на Python обзавелась неплохими прикладными руководствами (автор - известный нам Matt Dancho, автор аналогичных библиотек, например, modeltime в R).
nixtlar
Очень интересная идея - использовать для прогнозирования временных рядов генеративный предварительно обученный преобразователь, такой как TimeGPT. Изначально TimeGPT был разработан на Python, но теперь доступен пользователям R через библиотеку {nixtlar}. Помимо прочего, модель может обнаруживать аномалии временных рядов.
1. Устанавливаем библиотеку
2. Получаем API-ключ на dashboard.nixtla.io (пока все бесплатно и VPN не понадобился)
3. Загружаем образец данных и строим прогноз
4. Визуализируем результат
Хотелось бы сравнить прогнозы модели, например, с тем, что делает modeltime и другими методами, но и без этого в целом подход весьма интересный.
Очень интересная идея - использовать для прогнозирования временных рядов генеративный предварительно обученный преобразователь, такой как TimeGPT. Изначально TimeGPT был разработан на Python, но теперь доступен пользователям R через библиотеку {nixtlar}. Помимо прочего, модель может обнаруживать аномалии временных рядов.
1. Устанавливаем библиотеку
install.packages("nixtlar")2. Получаем API-ключ на dashboard.nixtla.io (пока все бесплатно и VPN не понадобился)
library(nixtlar)
nixtla_set_api_key(api_key = "API_key")
3. Загружаем образец данных и строим прогноз
df <- nixtlar::electricity
nixtla_client_fcst <- nixtla_client_forecast(df, h = 8, level = c(80,95))
4. Визуализируем результат
nixtla_client_plot(df, nixtla_client_fcst, max_insample_length = 200)
Хотелось бы сравнить прогнозы модели, например, с тем, что делает modeltime и другими методами, но и без этого в целом подход весьма интересный.
Мне очень нравится литературный проект "Модель для сборки", пусть это и не Data Science, но... незаметно присоединяйтесь!
Forwarded from Модель для сборки Official
Все официальные ресурсы программы "Модель для сборки"
Друзья, нас становится все больше, и не все знают о наших ресурсах. Время от времени мы актуализируем и публикуем для вашего удобства все основные ссылки на ресурсы программы "Модели для сборки". Сохраните себе и будьте с нами!
Официальный сайт программы: mds.ru
Официальный канал в Telegram : https://yangx.top/model_dlyasborki
Чат-общалка программы в Telegram: https://yangx.top/mds_ru
Оф. сообщество VKontakte: https://vk.com/ru_mds
Instagram: https://www.instagram.com/mds_team/
YouTube канал программы: https://www.youtube.com/channel/UCsyGoMSar84e0Vu5RBKcYLQ
Где слушать "Модель для сборки":
Все свежие выпуски программы слушаем на аудиосервисе "Soundstream" - https://soundstream.media/channel/model-dlya-sborki
или скачиваем мобильное приложение Саундстрим.
Новое мобильное приложение "MDS Collection" - Аудиобиблиотека архивов программы в одном удобном приложении. Скачивайте в магазинах мобильных приложений.
Сайт https://mds-online.ru - старейший аудиоархив программы в сети интернет.
Если вы хотите поддержать проект:
Донаты через систему DonationAlerts:
https://www.donationalerts.com/r/mds_official
Спасибо и будьте с нами!
Друзья, нас становится все больше, и не все знают о наших ресурсах. Время от времени мы актуализируем и публикуем для вашего удобства все основные ссылки на ресурсы программы "Модели для сборки". Сохраните себе и будьте с нами!
Официальный сайт программы: mds.ru
Официальный канал в Telegram : https://yangx.top/model_dlyasborki
Чат-общалка программы в Telegram: https://yangx.top/mds_ru
Оф. сообщество VKontakte: https://vk.com/ru_mds
Instagram: https://www.instagram.com/mds_team/
YouTube канал программы: https://www.youtube.com/channel/UCsyGoMSar84e0Vu5RBKcYLQ
Где слушать "Модель для сборки":
Все свежие выпуски программы слушаем на аудиосервисе "Soundstream" - https://soundstream.media/channel/model-dlya-sborki
или скачиваем мобильное приложение Саундстрим.
Новое мобильное приложение "MDS Collection" - Аудиобиблиотека архивов программы в одном удобном приложении. Скачивайте в магазинах мобильных приложений.
Сайт https://mds-online.ru - старейший аудиоархив программы в сети интернет.
Если вы хотите поддержать проект:
Донаты через систему DonationAlerts:
https://www.donationalerts.com/r/mds_official
Спасибо и будьте с нами!
Speech and Language Processing 📖
Обстоятельная книга Speech and Language Processing (авторы Dan Jurafsky и James H. Martin, Stanford University) знакомит с фундаментальными основами и алгоритмами, лежащими в основе обработки естественного языка, компьютерной лингвистики и распознавания речи с помощью языковых моделей без привязки к языкам программирования, начиная от регулярных выражений и токенизации, также рассматривая контекстное обучение, RAG, распознавание речи, преобразование текста в речь и многие другие вопросы NLP.
Must have! в своей области.
Обстоятельная книга Speech and Language Processing (авторы Dan Jurafsky и James H. Martin, Stanford University) знакомит с фундаментальными основами и алгоритмами, лежащими в основе обработки естественного языка, компьютерной лингвистики и распознавания речи с помощью языковых моделей без привязки к языкам программирования, начиная от регулярных выражений и токенизации, также рассматривая контекстное обучение, RAG, распознавание речи, преобразование текста в речь и многие другие вопросы NLP.
Must have! в своей области.
Seeing Theory ✨
Веб-сайт Seeing Theory - замечательная визуальная иллюстрация по введению в теорию вероятностей и математическую статистику, дополняющая соответствующую книгу, предварительный pdf-вариант которой можно загрузить.
Сайт Seeing Theory создал Daniel Kunin на D3.js, когда он был студентом в Brown University. Выглядит очень здорово!
Как интересное дополнение можно посмотреть иллюстрацию The Animated Elliptic Curve по введению в эллиптические кривые и криптографию, а также попробовать поработать в новом математическом редакторе corca.app.
Ну а если вы действительно любите красоту математических утверждений - добро пожаловать на Theorem of the Day, галерею прекрасных, порой даже неожиданных формулировок теорем!
Веб-сайт Seeing Theory - замечательная визуальная иллюстрация по введению в теорию вероятностей и математическую статистику, дополняющая соответствующую книгу, предварительный pdf-вариант которой можно загрузить.
Сайт Seeing Theory создал Daniel Kunin на D3.js, когда он был студентом в Brown University. Выглядит очень здорово!
Как интересное дополнение можно посмотреть иллюстрацию The Animated Elliptic Curve по введению в эллиптические кривые и криптографию, а также попробовать поработать в новом математическом редакторе corca.app.
Ну а если вы действительно любите красоту математических утверждений - добро пожаловать на Theorem of the Day, галерею прекрасных, порой даже неожиданных формулировок теорем!
Steven Ponce Visualizations ⚡
Steven Ponce - аналитик данных, который делает прекрасные визуальные проекты, участвует в челледжах, но самое главное - делится своими наработками включая R-код на своем веб-сайте и на GitHub.
Кстати, похожие визуальные решения обсуждает Наталья Киселева на канале Chatting Charts. ✨
Steven Ponce - аналитик данных, который делает прекрасные визуальные проекты, участвует в челледжах, но самое главное - делится своими наработками включая R-код на своем веб-сайте и на GitHub.
Кстати, похожие визуальные решения обсуждает Наталья Киселева на канале Chatting Charts. ✨
{forgts}: Excel -> {gt} 💥
Как перевести Excel-таблицу в HTML-документ на основе RMarkdown или Quarto? Конечно, можно загрузить таблицу, скажем, с помощью
Есть и другой путь: устанавливаем библиотеку {forgts}:
и далее указываем путь к нашему Excel файлу
При этом полностью сохраняется форматирование, включая цвет текста, выделения, цвет ячейки и прочее форматирование.
Как перевести Excel-таблицу в HTML-документ на основе RMarkdown или Quarto? Конечно, можно загрузить таблицу, скажем, с помощью
read_excel(), который угадывает расширение Excel-файлов, сформировать код для библиотеки {gt}, а затем заняться улучшением таблицы. Есть и другой путь: устанавливаем библиотеку {forgts}:
pak::pak("luisDVA/forgts")и далее указываем путь к нашему Excel файлу
forgts("/path/book.xlsx")При этом полностью сохраняется форматирование, включая цвет текста, выделения, цвет ячейки и прочее форматирование.
The R Workshop Book
Небольшой вводный курс The R Workshop Book (автор Rebecca L. Barter) от базовых основ R до Tidyverse поможет быстро разобраться с основами языка R и настроить рабочий процесс. Если нужно очень быстрое введение в Tidyverse - подойдет курс от Sophie Lee, который называется Introduction to R with Tidyverse.
Напомню, что больше ссылок на различные курсы можно посмотреть в разделе Курсы сайта с источниками по языку R.
Небольшой вводный курс The R Workshop Book (автор Rebecca L. Barter) от базовых основ R до Tidyverse поможет быстро разобраться с основами языка R и настроить рабочий процесс. Если нужно очень быстрое введение в Tidyverse - подойдет курс от Sophie Lee, который называется Introduction to R with Tidyverse.
Напомню, что больше ссылок на различные курсы можно посмотреть в разделе Курсы сайта с источниками по языку R.
Алгебраическая геометрия это довольно сложная наука и имеет множество связей с другими областями математики, такими как комплексный анализ, топология, теория чисел, комбинаторика. Схемы, пучки, максимальные или простые идеалы, кольца, мотивы - все эти понятия "не то, что вы думаете" для математика.
Нет сомнений в том, что в любой науке, чтобы достигнуть высот, нужно долго и много учиться. Вот пример тому: The Rising Sea - книга, которую собирал Ravi Vakil (Stanford University) на основе трудов Гротендика (в частности, EGA), является введением в алгебраическую геометрию и занимает > 800 страниц!
Давайте предположим, а если бы он включил сюда небольшой "джентельменский набор", скажем, производные категории, "слегка расширил" сведения по теории пересечений, добавил торические многообразия, многообразия Фано + K3-поверхности, элементы теории Ходжа, усилил сведения по коммутативной алгебре... то это "введение" запросто бы утроилось в размере.
Наука, по сути, это "язык жрецов", учиться ему можно всю жизнь.
Нет сомнений в том, что в любой науке, чтобы достигнуть высот, нужно долго и много учиться. Вот пример тому: The Rising Sea - книга, которую собирал Ravi Vakil (Stanford University) на основе трудов Гротендика (в частности, EGA), является введением в алгебраическую геометрию и занимает > 800 страниц!
Давайте предположим, а если бы он включил сюда небольшой "джентельменский набор", скажем, производные категории, "слегка расширил" сведения по теории пересечений, добавил торические многообразия, многообразия Фано + K3-поверхности, элементы теории Ходжа, усилил сведения по коммутативной алгебре... то это "введение" запросто бы утроилось в размере.
Наука, по сути, это "язык жрецов", учиться ему можно всю жизнь.
Модель Солнечной системы в движении. 🔭🪐
Завораживает! 🛸
Пользуясь случаем, передаю ❤️ привет каналу Спутник ДЗЗ! 🛰️ Создатели канала очень уважают язык R, делают публикации, связанные с R... и неравнодушны к каналу Наука и данные. 😉
Всем хороших выходных! 👋
Завораживает! 🛸
Пользуясь случаем, передаю ❤️ привет каналу Спутник ДЗЗ! 🛰️ Создатели канала очень уважают язык R, делают публикации, связанные с R... и неравнодушны к каналу Наука и данные. 😉
Всем хороших выходных! 👋