С тем что в государственных информационных системах есть неактуальные или неполные данные - мы привыкли. Выясняются и примеры "прямого подлога" данных. Конкретно попалось правительство Московской области с системой загрязнения воздуха [1]

Честно говоря слов нет. Есть только вопрос, будут ли последствия?

Ссылки:
[1] https://habr.com/ru/post/481488/

#data #opendata

В Колумбии за счёт средств Open Contracting Partnership делают аналитическую систему для анализа данных госзакупок о чём выложили тендерную документацию [1]. Сумма контракта $50 000 USD, а в основе системы должен быть Open Contracting Data Standard. $50 000 - это чуть более 3 миллионов рублей, что по российским меркам совершенно небольшая сумма. Но надо учитывать что в самой тендерной документации заказчик уже проделал большую работу создав эскизы интерфейса, описав пользовательские сценарии и продумав задачу. Кроме того там всего лишь 21 GB данных о 8 миллионах контрактных процедур.

До 14 февраля можно направлять вопросы, до октября включительно необходимо закончить работу. Казалось бы - прекрасный проект, надо прямо сейчас подаваться. Тем более что у нашей команды есть опыт и создания порталов clearspending.ru и spending.gov.ru

Но есть два больших минуса, политический и технический:
- политический в том что российских разработчиков там не ждут, увы
- технический в том что основной язык Open Contracting Partnership - это Javascript, а мы все работаем с языком разработки Python.

Тем не менее если в России найдется команда которая захочет выиграть такой колумбийский тендер и визуализировать их закупки, мы можем помочь с консультацией о том как правильно анализировать сведения о закупках и контрактах.

Ссылки:
[1] https://open-contracting-partnership.forms.fm/public-procurement-dashboard-development-for-colombia/forms/7589

#opendata #opencontracting

​​Открытые данные ФСИН: число осужденных в России растёт только по наркопреступлениям

На сайте Федеральной службы исполнения наказаний РФ есть раздел с открытыми данными. Там опубликованы цифры по количеству осужденных за разные типы преступлений в динамике. Если эти данные верные, то единственная категория преступлений, по которой количество осужденных растёт — это преступления, «связанные с распространением наркотиков» (формулировка ФСИН). С 2005 года их стало больше в 2,5 раза.

Как видно из графика, в этот же период практически перестали сажать в тюрьму за хулиганство — падение почти 100%. Число осужденных за изнасилования, кражи, вымогательство, грабежи и разбой упало более чем вдвое.

На этом фоне рост наркопреступлений заставляет задуматься: действительно ли на общем фоне снижения преступности полиция стала ловить в 2,5 раза больше наркоторговцев? Алексей Кнорре из Института проблем правоприменения при Европейском Университете в Санкт-Петербурге ещё в 2017 году выяснил, что три четверти осужденных за наркопреступления — это потребители, а не распространители наркотиков. Такой перекос, по мнению исследователей — результат «палочной» системы в МВД, когда за отчетный период необходимо раскрыть плановое количество преступлений: выявлять потребителей значительно легче, чем распространителей.

Есть на графике и другие странности. Например, еще сильнее, чем грабежи и изнасилования, упало число осужденных за «умышленное причинение тяжкого вреда здоровью». Однако это падение выглядит искусственным: оно подозрительно совпадает со всплеском убийств. Есть вероятность, что одни и те же действия до 2009 года квалифицировали как умышленное причинение тяжкого вреда, повлекшее за собой смерть потерпевшего, а начиная с 2010 — как убийство.

Пока прозрачность ФСИН ограничивается этим и ещё несколькими небогатыми датасетами, мы не можем уверенно говорить, что стоит за цифрами. Искать ответы придется по старинке журналистам и правозащитникам. Но открытые данные хороши уже тем, что позволяют видеть такие странности — и задавать неудобные вопросы. «Системный Блокъ» будет регулярно исследовать общедоступные датасеты — и визуализировать то, что заставляет задуматься.

Источник данных: ФСИН

#opendata

Сколько ни пиши о госзакупках, всегда упомянешь дотационные республики (c)

Счетная палата РФ выпустила рейтинг регионального протекционизма в госзакупках выявив регионы в которых на поставщиков из этого же региона уходит 80-90% всех контрактов и общей суммы по всем контрактам. Об этом с утра пишет РБК [1], об этом можно прочитать на сайте "Госрасходы" [2] (проект Счетной палаты).

Можно из статьи и из рейтинга убедиться что в лидерах почти всегда несколько субъектов федерации, для которых очень было бы интересно сравнить уровень дотационности их бюджета и уровень их протекционистской политики.

Но то о чём не написали журналисты, так это то что изначально авторы работы считали не просто рейтинг протекционизма, а "степень интегрированности" субъектов федерации. На странице рейтинга можно открыть страницу каждого субъекта федерации и увидеть долю поставщиков из других субъектов федерации в контрактах для конкретного субъекта федерации.

Например, Республика Карачаево-Черкесия [3], распределение контрактов по суммам за 2019 год:
- 86.1% Карачаево-Черкесская республика
- 4.9% Москва
- 3.5% Ставропольский край
- 1.5% Краснодарский край
- 4% все остальные субъекты федерации.

Можно увидеть что несмотря на высокую дотационность, большая часть контрактов остаётся в республике и лишь небольшая часть уходит в другие субъекты федерации.

А вот другой пример, Новгородская область [4], противоположная крайность, структура их расходов на 2019 год:
- 28.8% Новгородская область
- 22.3% Санкт-Петербург
- 12.6% Ивановская область
- 11.5% Москва
- 8.9% Владимирская область

Можно увидеть что в самой области поставщики лишь на чуть менее 30% закрывают потребности госзаказчиков.

И так далее. В принципе любой желающий может замерить и составить ещё хоть не один десяток таких рейтингов.
Например:
- рейтинг влияния Москвы и Санкт-Петербурга на рынок госзаказа (по доле Московских и Питерских поставщиков);
- рейтинг интегрированности субъектов в федеральный округ - по доле сумм контрактов с субъектами федерации в своём федеральном округе;
- рейтинги протекционизма по отраслям - ИТ, строительство, фармацевтика, медицинские изделия и так далее

И так далее и тому подобное. Только на анализ данных по экономической связности и протекционизму могут уйти годы.

Как Вы уже догадались над рейтингом работала наша команда в Счетной палате. Мы продолжаем развивать аналитические инструменты портала Госрасходы и готовить новые интересные материалы.

P.S. Все данные доступны как открытые данные для выгрузки и повторного использования.

P.S.S. Напоминаю что у нас есть инициатива Дата лаборатория [5] партнерства с ВУЗами и исследовательскими центрами. Если у Вас нет своих ресурсов подсчитать какую-то сложную аналитику на уже выгруженных первичных данных, то мы можем с этим помочь.

Ссылки:
[1] https://www.rbc.ru/economics/26/02/2020/5e55460d9a79472e99363438
[2] https://spending.gov.ru/analytics/ratings/rating-protectionism/
[3] https://spending.gov.ru/analytics/ratings/rating-protectionism/09/
[4] https://spending.gov.ru/analytics/ratings/rating-protectionism/53/
[5] https://spending.gov.ru/datalab/

#opendata #procurement #goszakaz

Минэкономразвития запустило портал data.economy.gov.ru [1] состоящий из разделов "Системообразующие предприятия" и "Для регионов" где представлены данные по списку системообразующих предприятий в России и аналитические материалы по данным ПФР.

Хочется сказать про этот проект что-то хорошее, но сказать нечего.

Список предприятий опубликован в формате Excel, а аналитика в PDF. То есть как раз данных там и нет. Похоже авторы перепутали название домена, и выбрали под-домен data, вместо nodata.

Хотя и сам список системообразующих предприятий интересен.

Ссылки:
[1] https://data.economy.gov.ru

#opendata #nodata

Я тут ранее много ругался на то как ведут свои реестры и информационные системы Минэкономразвития, Минюст России и многие другие органы власти и время от времени хвалил то Минкультуры России то Минфин России за то что у них ситуация обстоит получше.

И это, конечно правда, если сравнивать. Но если сравнивать даже наиболее продвинутые из органов власти с реальным миром, то и там всё, мягко говоря, далеко не так хорошо.

Например, единый портал бюджетной системы (ЕПБС) является частью системы "Электронный бюджет". Большая система со множеством подсистем, реестров и данных которые публикуются там регулярно. На мой взгляд система, с одной стороны значительно переросла себя по сложности того что там публикуется и и по навигации по ней, а с другой стороны эта сложность превращается в огромное число несвязанных разделов на сайте и, что значительно хуже, разделов неактуальных.

Среди размещенных там, самых разных срезов данных, в основном предоставляемых на веб страницах сайта и иногда в виде открытых данных, не меньше чем в 10 разделах данных не обновлялись с января 2018 года (2.5 года).

Самый наглядный и очевидный всем пример - это паспорта участников бюджетного процесса [1].

Если посмотреть на них то:

- у Министерства цифрового развития название всё ещё "Министерство связи и массовых коммуникаций", а руководитель не назначен (сменился в январе 2020 г., 6 месяцев назад)
- у Роскосмоса руководителем всё ещё является Комаров Игорь Анатольевич (с 28 мая 2018 года руководителем является Дмитрий Рогозин)
- у Генпрокуратуры России руководитель всё ещё Чайка Юрий Яковлевич (сменился в январе 2020 года, 6 месяцев назад)
- у Верховного суда руководителем указан первый заместитель Верховного судьи Серков Петр Павлович. Интересно, а Лебедев об этом знает?

И так далее. Там много неактуальной информации как по внесённым участникам бюджетного процесса, так и по тем которые появились или изменились и особенно по их руководителям.

Я привожу этот пример исключительно как понятный всем пример того как официальные государственные сведения становятся недостоверными по той причине что не актуализируются, причём неактуализируются они не в "замороженных" или "выводимых из эксплуатации" информационных системах. А во вполне хорошо профинансированных.

Аналогично можно пройтись по многим другим разделам на сайте во многих из которых нет данных за последние 2.5 года.

На случай если сайт закроют на техобслуживание, скриншоты у меня в фэйсбуке https://www.facebook.com/ibegtin/posts/10157556711463263

Ссылки:
[1] http://budget.gov.ru/epbs/faces/p/%D0%91%D1%8E%D0%B4%D0%B6%D0%B5%D1%82%D0%BD%D0%B0%D1%8F%20%D1%81%D0%B8%D1%81%D1%82%D0%B5%D0%BC%D0%B0/%D0%A3%D1%87%D0%B0%D1%81%D1%82%D0%BD%D0%B8%D0%BA%D0%B8%20%D0%B1%D1%8E%D0%B4%D0%B6%D0%B5%D1%82%D0%BD%D0%BE%D0%B3%D0%BE%20%D0%BF%D1%80%D0%BE%D1%86%D0%B5%D1%81%D1%81%D0%B0

#finances #opengov #opendata #errors

Я бы сказал удивительно, но на самом деле не очень то что на сайте Открытого бюджета Москвы есть новость о том что проект бюджета на 2021-2023 годы внесен в Московскую городскую думу [1] а ссылки на сам текст внесенного проекта бюджета или данные отсутствуют.

В виде текста в формате DOCX он есть на сайте МГД [2], для тех кому очень лень извлекать таблицы из этого файла вручную рекомендую утилиту docx2csv [3] с её помощью можно извлечь все таблицы в CSV формате или в виде Excel файлов.

Ссылки:
[1] https://budget.mos.ru/news05112020
[2] https://duma.mos.ru/ru/0/regulation_projects/corebofs002080000nb3mf7d2btjvc48
[3] https://github.com/ivbeg/docx2csv

#opendata #moscow #budget

Свежая публикация об открытых данных в России в сборнике Open Government Data in Russia [1] за авторством Ольги Пархимович (@ahminfin). Много хороших примеров и изложение того что с открытыми государственными данными в России

Ссылки:
[1] https://link.springer.com/chapter/10.1007/978-3-030-42855-6_22

#opendata #opengov

13 латиноамериканских стран поменяли свои законы о госзакупках чтобы скрыть сведения о сделках о покупке вакцин. Всё это в расследовании [1] Red Palta (Латиноамериканская сеть журналистов по вопросам транспарентности и борьбы с коррупцией)

Вот так многие страны десятилетия идут в сторону прозрачности госрасходов, а потом во время пандемии всё это стремительно схлопывается. Потому что у пандемии относятся почти как к военному положению и потому что игра идёт по тем правилам кто сильнее. Когда крупный международный фарм. бизнес задаёт правила игры, то у правительств стран нет выбора (мало выбора) кроме как скрывать такие сделки. А скрывают их не столько от граждан, сколько от других стран чтобы те не знали реальных цен и им было бы сложнее торговаться.

Ссылки:
[1] https://www.redpalta.org/post/benefits-to-pharmaceutical-companies-in-the-purchase-of-vaccines/

#opendata #opengov #secrecy #covid19

В США Казначейство опубликовало набор данных о ежесуточных поступлениях в федеральный бюджет U.S. Government Revenue Collections [1]. Это данные начиная с октября 2004 года, обновляемые ежедневно и охватывающие 17 показателей за сутки включая сведения о суммах поступлений, тип поступления (электронно, по почте, через терминал) и других.

Если бы к этим данным ещё была декомпозиция по видам налогоплательщиков, видам налогов и неналоговых платежей - было бы ещё интереснее для анализа влияния COVID-19 и других глобальных и менее глобальных событий с точки зрения поступления средств на счета бюджета.

В целом же видно что казначейство США идёт по принципу что "лучше понемногу, но хорошего качества" и публикуют наборы данных с ежедневным и ежемесячным обновлением, с продуманными метаданными, документацией, удобным API и так далее. Что неплохо, но как-то уж очень медленно.

Ссылки:
[1] https://fiscaldata.treasury.gov/datasets/revenue-collections-management/u-s-government-revenue-collections

#opendata #usa #budgets