Ivan Begtin
8.1K subscribers
2.01K photos
3 videos
102 files
4.74K links
I write about Open Data, Data Engineering, Government, Privacy, Digital Preservation and other gov related and tech stuff.

Founder of Dateno https://dateno.io

Telegram @ibegtin
Facebook - https://facebook.com/ibegtin
Secure contacts [email protected]
加入频道
Сегодня вышел в свет доклад об этике в цифровых технологиях от Центр подготовки руководителей цифровой трансформации где коллектив авторов написали так много разделов что читать их можно долго, если бы они не были написаны так хорошо что читать их было бы легко и полезно.

Как мог, я тоже влился в его подготовку, и во всех разделах про этику работы с данными выступил как автор.

Доклад можно прочитать по ссылке [1]

Ссылки:
[1] http://ethics.cdto.center/

#digital #ethics #dataethics
CNews раньше меня написали обзор ИТ части послания Президента [1], а я думаю что можно добавить.

Добавить можно то что:
a) Национальные проекты и отечественные ПО - это не 100% взаимосвязь и не 100% замещение. И важны акценты, отечественное ПО, а не всё ИТ. То есть железо будет китайское и все уже с этим смирились.
б) Высокоскоростной интернет в школах с одной стороны, но усиление регулирования сети с другой стороны.
в) Бесплатный Рунет - это лобби крупнейших интернет компаний (Яндекс, Mail.ru и далее по списку) и, конечно, снижение доходов интернет-провайдеров. Интересно будет дойти до оценок стоимости такого внедрения и увидеть как будут сходиться в боях сотовые операторы, крупнейшие провайдеры и интернет компании.
г) Большие данные - это хорошо, но открытость данных опять потеряна. Я даже догадываюсь кто готовил именно эту часть послания Президента(

Но, всё это меркнет, конечно, по сравнению с новостью об отставке Правительства РФ.

Ссылки:
[1] https://www.cnews.ru/news/top/2020-01-15_putin_anonsiroval_proekt

#it #data #digital
Forbrukerrådet, Норвежский потребительский совет выпустил отчёт "Out of control" [1] о том как потребителей эксплуатирует рекламная индустрия. Какими методами это делается, что собирается и так далее с акцентом на мобильные приложения и сервисы знакомств и мобильные приложения для женщин.

Особенность исследования в том что анализировались условия использования этих сервисов и проводился последующий юридический анализ этих условий и использования данных в принципе.

Исследование полезное тем более что в во второй его части, технической, очень подробно разбираются трекеры встроенные в приложения [2] и то куда и какие сведения приложения передают.

Краткий вывод в приложения пересылают очень много личных сведений о пользователям внешним сервисам, многие из них делают это даже когда приложения закрыты, через службы работающие на заднем фоне.

Сложно дать какую-либо рекомендацию здесь кроме как не пользоваться ни одним из сервисов знакомств.

Ссылки:
[1] https://fil.forbrukerradet.no/wp-content/uploads/2020/01/2020-01-14-out-of-control-final-version.pdf
[2] https://fil.forbrukerradet.no/wp-content/uploads/2020/01/mnemonic-security-test-report-v1.0.pdf

#privacy
Eric Jaffe из Sidewalk Labs пишет о социальных и экономических эффектах того что китайское правительство обеспечило мониторинг качества воздуха и обеспечило доступность этих данных для публики [1].

Среди фактов которые он приводит:
- 1400 станций мониторинга в 337 городах покрывающие 98% населения
- открытость данных, в том числе для разработчиков
- доступность информации сильно повлияла на рынок устройств очистки воздуха, покупки недвижимости и планирования поездок

Рассуждения как минимум любопытны в свете создания системы мониторинга качества воздуха в России.

Ссылки:
[1] https://medium.com/sidewalk-talk/what-happened-when-china-provided-its-cities-with-real-time-pollution-data-561f9b94fabc

#opendata #data
В Колумбии за счёт средств Open Contracting Partnership делают аналитическую систему для анализа данных госзакупок о чём выложили тендерную документацию [1]. Сумма контракта $50 000 USD, а в основе системы должен быть Open Contracting Data Standard. $50 000 - это чуть более 3 миллионов рублей, что по российским меркам совершенно небольшая сумма. Но надо учитывать что в самой тендерной документации заказчик уже проделал большую работу создав эскизы интерфейса, описав пользовательские сценарии и продумав задачу. Кроме того там всего лишь 21 GB данных о 8 миллионах контрактных процедур.

До 14 февраля можно направлять вопросы, до октября включительно необходимо закончить работу. Казалось бы - прекрасный проект, надо прямо сейчас подаваться. Тем более что у нашей команды есть опыт и создания порталов clearspending.ru и spending.gov.ru

Но есть два больших минуса, политический и технический:
- политический в том что российских разработчиков там не ждут, увы
- технический в том что основной язык Open Contracting Partnership - это Javascript, а мы все работаем с языком разработки Python.

Тем не менее если в России найдется команда которая захочет выиграть такой колумбийский тендер и визуализировать их закупки, мы можем помочь с консультацией о том как правильно анализировать сведения о закупках и контрактах.

Ссылки:
[1] https://open-contracting-partnership.forms.fm/public-procurement-dashboard-development-for-colombia/forms/7589

#opendata #opencontracting
Вышел глобальный отчёт о мировом богатстве за 2019 год от Credit Suisse Research [1] и хотя напрямую к теме моего канала он не относится, но будет интересен всем кто интересуется как распределяется мировое богатство по богатым и бедным. Цифр в отчете собрано немало, есть профили отдельных стран, включая Россию и много показателей по всему миру

Интересные факты:
- ~ 361триллионов USD - глобальное богатство в 2019 году
- ~47 миллионов долларовых миллионеров в 2019 году
- 70849 USD - среднее богатство в 2019 году на одного взрослого
- 459 триллионов USD - ожидаемое мировое богатство к 2024 году

В отчете есть немало примеров того есть ли зависимость между богатством и ценами на недвижимость, доля женщин в списке Forbes 400 которые не наследовали, а сами сформировали своё богатство и многое другое.

Прямая ссылка на PDF отчёта [2] и на приложенный к нему Databook с таблицами и пояснениями [3]

Ссылки:
[1] https://www.credit-suisse.com/about-us/en/reports-research/global-wealth-report.html
[2] https://www.credit-suisse.com/media/assets/corporate/docs/about-us/research/publications/global-wealth-report-2019-en.pdf
[3] https://www.credit-suisse.com/media/assets/corporate/docs/about-us/research/publications/global-wealth-databook-2019.pdf

#economy #wealth #globalwealth
Дайджест коротких и материалов:
- Австралийский G2G сервис Notify [1] - это система рассылок внутри государства. Госслужащие регистрируются в нём, загружают списки email'ов и телефонов и имеют возможность для отправки писем и SMS централизовано. С открытым кодом [2] и за деньги [3]. Всё ровно по австралийской модели погружения внутрь госаппарата ключевых ИТ сервисов, но предоставление их по фиксированной цене и без необходимости госорганам проводить торги.

- данные из утечек по Луанде (Luanda Leaks) в виде списка компаний на сервере OCCRP [4]. Структурированно по компаниям, странам и интегрировано с остальными данными OCCRP

- Women, Business and the Law 2020 [5] доклад с индексом от Всемирного банка по влиянию законов и регулирования на вовлечение женщин в экономику. Со множеством цифр и таблиц

- Минэкономразвития России предлагает создать российский аналог Github'а за 2.1 млрд. рублей [6]. Идея может быть и неплоха, но сумма огромна. С другой стороны если это заменит текущий мёртвый Фонд алгоритмов и программ, то быть может дело и стоит того. Остаётся лишь вопрос стоимости и того что форма ЧГП для таких проектов может подойти лучше. В принципе это похоже на австралийские G2G проекты. Не без российской специфики, конечно.

- РБК в статье от 17 января утверждают что Константин Носков (глава Министерства цифрового развития России) уходит в отставку [7] и гадают кто может прийти ему на смену. Кто бы это ни был, мы узнаем очень скоро.

- Open Referall, открытый проект по разработке стандартов обмена данными о людях, здоровье и соцуслугах [8] анонсировали инструментарий по обработке данных [9]

- Bird Toolbox [10] коллекция инструментов для журналистов расследователей и множество статей о том как расследования на данных проводятся.

- Awsome Shodan Queries [11] наиболее интересные и странные запросы которые можно делать через систему Shodan, сканирующую интернет на всевозможные доступные сервисы. Например, через неё находят подключенные к интернету камеры для детей или рентгеновские установки.

- полугодовой давности расследование о том как турецкий власти перевозят оружие в Ливию [12]. Нельзя сказать насколько оно непредвзято, но довольно детально. Любопытно что они в расследовании используют инструменты от Palantir что врядли по карману маленькой НКО даже в Вашингтоне.

- диаграмма того как устроено ИТ в правительстве Германии [13]. Очень наглядно, но на немецком языке

Ссылки:
[1] https://notify.gov.au/
[2] https://github.com/govau/notify
[3] https://notify.gov.au/pricing
[4] https://aleph.occrp.org/datasets/1554
[5] https://openknowledge.worldbank.org/handle/10986/32639
[6] https://www.kommersant.ru/doc/4225365
[7] https://www.rbc.ru/politics/17/01/2020/5e21b5599a79475340a567df
[8] https://openreferral.org/
[9] https://openreferral.org/introducing-open-referrals-data-transformation-toolkit/
[10] https://bird.tools/
[11] https://github.com/jakejarvis/awesome-shodan-queries
[12] https://c4ads.org/blogposts/2020/1/2/assets-in-flight-libyas-flying-armories
[13] https://pbs.twimg.com/media/ELhXoRvWoAAMGyF?format=jpg&name=4096x4096

#opendata #data #ddj #digest #opensource
Учитывая масштабы события со сменой правительства, уходом Юрия Чайки и, похоже, неокончателен этот список событий, очень много вопросов и ожиданий и вопросов:

1. Какова будет структура нового пр-ва? Есть ощущение что часть министерств может потерять/обрести полномочия, новые названия и тд. В общем что реформа будет структурная, а не только персональная.

2. Что с Минкомсвязью и полномочиями Акимова? Сделают всё таки выделенного вице-премьера по цифре без совмещения полномочий? Разделят ли Минкомсвязь или наоборот наполнят новыми функциями?

3. Какова судьба Аналитического центра при Пр-ве? Останется ли он и будет ли глубоко перезагружен?

4. Какова судьба цифровой экономики? Напомню что меняется генпрокурор, а у генпрокуратуры большая часть их цифровизации именно в нацпрограмме "Цифровая экономика", кроме того проекты вроде НСУДа могут быть подвергнуты ревизии

5. И вот какова судьба НСУДа - это тоже большой вопрос

6. Останется ли Силуанов и какова будет тогда политика Минфина в части открытости их данных если он не останется?

7. Что в целом будет в политике правительства по обеспечению прозрачности? Будут ли системные изменения и возврат открытости в публичную повестку?

8. Что будет с имеющимися госкомиссиями при Пр-ве? Новыми госкомиссиями?

9. Что будет с РФРИТом который только-только распределил несколько миллиардов и который управлялся текущим составом Минкомсвязи?

Ну а в качестве итога могу сказать сейчас что когда вот это, последнее Правительство было сформировано в мае 2018 года кулуарно в последующие месяцы было очень много разговоров что многие в нём действуют так "словно живут последний день", уж очень много решений были слишком уж "прямолинейными".

Не знаю что будет с новым правительством в итоге. Ждём

#government
Вышел доклад "Этика и ответственность публичных алгоритмов" (Ethique et responsabilité des algorithmes publics) [1] от Национальной школы управления во Франции École nationale d'administration (ENA) подготовленного по заказу центра публичных инноваций Etalab.

В докладе разбираются этические аспекты применения алгоритмов в государственном управлении, в первую очередь, во Франции и Евросоюзе.

В основном доклад посвящён юридическим вопросам работы алгоритмов, открытым данным и открытому коду (сode publics) и полезен всем кто изучает регулирование в этой области и знает французский язык.

В дополнение к нему руководство Etalab по применению алгоритмов [3], также на французском в виде сжатого руководства с открытым кодом [4]

Ссылки:
[1] https://www.etalab.gouv.fr/wp-content/uploads/2020/01/Rapport-ENA-Ethique-et-responsabilit%C3%A9-des-algorithmes-publics.pdf
[2] https://www.ena.fr
[3] https://guides.etalab.gouv.fr/algorithmes/guide/
[4] https://github.com/etalab/guides.etalab.gouv.fr

#opensource #opendata #algorithms
Как ни странно в мире довольно мало государственных приложений для iPhone или Android. Помимо российских госуслуг примеры или за пределами наблюдений за лидерами цифровых сервисов или их просто нет.

Например, в Великобритании есть продвинутый портал GOV.UK [1], но отсутствует приложение с госсервисами, причём отсутствует осознано и публично декларировалось именно так ещё в 2016 году [2]

А вот в Италии полным ходом идёт разработка Italia App [3], через которое гражданин получит возможность через мобильное приложение взаимодействовать с госорганами, оплачивать счета и так далее. Очень похоже на российские госуслуги, но ещё в разработке. Причин почему государства редко создают мобильные приложения множество. Помимо технических сложностей здесь есть ещё и сложность в привлечении способных разработчиков, постоянного обновления приложения, то что это должна быть согласованная политика на уровне правительства, иначе приложение перестанет работать при обновлении регламентов той или иной процедуры и многое другое.

Пока подобных все-государственных приложений в мире очень мало.

Ссылки:
[1] https://www.gov.uk
[2] https://govinsider.asia/smart-gov/why-britain-banned-mobile-apps/
[3] https://io.italia.it/

#govservices
Пока без моих комментариев
Forwarded from Нецифровая экономика (Oleg Salmanov)
У нацпрограммы "Цифровая экономика", похоже, сменится и руководитель (министр цифрового развития), и куратор - отец Алексеич (aka вице-премьер Акимов), видимо, покидает правительство. Кто же станет нашим отцом-настоятелем? Дон Рэмович собственной персоной?

http://www.rbc.ru/politics/21/01/2020/5e2031369a79473db4c58398?fromtg=1
Стал известен новый состав Правительства РФ [1] и стала известна его новая структура [2]. Какое-никакое, но это существенное изменение за последние 8 лет. Для многих долгожданное, для кого-то неизбежное, но безусловно с некоторыми важными изменениями.

Во первых сменился "куратор цифры". Судя по всему им будет первый вице-премьер Андрей Белоусов [3], а также сменился Министр цифрового развития и тд. и теперь это Максут Шадаев , ранее вице-премьер Ростелекома, директор РТ-Лабс (дочерней структуры Ростелекома) и министр по ИТ в Московской области.

Можно ли теперь предсказать что будет далее с регулированием ИТ, цифры и тд?

Про Максута можно сказать что нет сомнений что в ИТ отрасли он понимает и в его профессионализме сомнений никогда не было, ему было что показать в Московской области. Об остальной его биографии лучше прочитать на Tadviser [4]. О том как его назначение отразится на отрасли мы узнаем когда пройдут первые назначения руководителей подведов, замминистров и тд.

В целом приход Белоусова и Шадаев похоже, означают переписывание всей программы "Цифровая экономика" и перезапуск множества из уже запущенных в рамках неё проектов.

В целом от нового правительства есть ощущение его "прикладного характера". Не берусь судить будут ли решения более этичными и социальными по сравнению с предыдущими, но над ним хотя бы перестанут откровенно смеяться. Де-одиоизация (избавление от хотя бы части одиозных чиновников) это не так уж плохо.

Лично меня по прежнему приоритетно интересует судьба открытости в органах власти, будет ли она возвращена, будут ли открытые данные, доступность данных в принципе и многое другое.

P.S. Архив сайта Минкавказа я сделал

Ссылки:
[1] https://www.rbc.ru/politics/21/01/2020/5e20346e9a79474028fe8a83
[2] http://kremlin.ru/events/president/news/62622
[3] http://government.ru/gov/persons/123/
[4] http://government.ru/gov/persons/627/
[5] http://www.tadviser.ru/index.php/Персона:Шадаев_Максут_Игоревич

#government
Как меня дополняют коллеги: Алексей Оверчук стал вице-премьером , курирующим цифровую экономику. Так что видимо Андрей Белоусов будет курировать нацпроекты, а Алексей Оверчук конкретно цифру
Весьма познавательная статья в Washington Monthly от том что работники ритейла в США превращаются в полуроботизированную рабочую силу из-за алгоритмов управляющих то что, когда и как им делать [1]. В статье " Why Today’s Shopping Sucks" разбирается то как это происходит на практике. И это важнейший фактор того что называют цифровой трансформацией бизнеса в потребительском секторе - мониторинг длины очередей, фактов продажи на смену и работника, скорости среднего обслуживания клиента и тд. - это всё сейчас части автоматизации, цифровизации и алгоритмов измеряющих эффективность работы сотрудников если не лучше, то точно без человеческого фактора.

Поэтому и отвечая на вопрос заменят ли роботы рядовых сотрудников в ритейле в ближайшее время? Нет, не заменит. "Роботы" (роботизированные алгоритмы) заменят их начальство и обеспечат весьма жёсткий контроль за "рабочей силой". Это уже давно внедрено в сервисах такси, где водитель является суть продолжением алгоритмической системы и которая сама выступает диспетчером, координатором движения и заказов и тд.

Ссылки:
[1] https://washingtonmonthly.com/magazine/january-february-march-2020/why-todays-shopping-sucks/

#privacy #future #retail
Десятки тысяч международных студентов и работников из других стран в Канаде получили визы автоматически за счёт роботизированных алгоритмов. Vancover Sun пишут об этом в статье "Douglas Todd: Robots replacing Canadian visa officers, Ottawa report says" [1]. Во внутреннем отчете департамента иммиграции страны упоминается о применении алгоритмов автоматического принятия решения и раздражённости граждан их применением.

Ссылки:
[1] https://vancouversun.com/opinion/columnists/douglas-todd-robots-replacing-canadian-visa-officers-ottawa-report-says

#ai #privacy #algorithms #canada
РБК пишет что в ФАС определились с требованиями к предустановке российского ПО на устройства [1], по крайней мере на уровне согласованной позиции внутри ведомства.

Предполагается по датам введение регулирования пред-установки российского ПО:
с 1 июля 2020 года предустановка российского ПО станет обязательной для всех смартфонов;
с 2021 года — для планшетов;
с 2022 года — для компьютеров;
с 2023 года — для Smart ТВ и ТВ-приставок.

И наличие 3-х критериев:
- право на ПО принадлежит российскому лицу;
- ПО реализуется на территории России;
- разработчик в течение последних пяти лет не нарушал закон в области персональных данных.

Для каждого вида товара будут установлены разные перечни видов софта. Предварительно для смартфонов это: поиск, антивирус, навигатор (карты), мессенджер, социальные сети, госуслуги, персональная платежная система МИР.

По текущей концепции получается что за пред-установку ПО отвечает производитель, не дистрибьютор.

Остаётся при этом очень много вопросов:
1. В целом это регулирование не про защиту прав потребителей, а про локализацию перс данных и операторов коммуникаций в России.
2. Что будет делать Apple которые вообще не предполагали подобной предустановки ПО, будут ли они реально уходить из России?
3. Начнётся ли "охота на ведьм" и борьба с "серым рынком" смартфонов без предустановленного российского ПО? Мы ведь понимаем что не все телефоны реализуются через салоны связи и интернет магазины.
4. Будут ли эти программы удаляемыми?

Я не могу припомнить ни одной страны с аналогичным регулированием. И, если его внедрение не провалится в России, то как бы такое не начали делать и многие другие страны.

Ссылки:
[1] https://www.rbc.ru/technology_and_media/22/01/2020/5e2872179a79471f2dd6bf11?from=from_main

#privacy
Вышел отчёт The state of Open humanitarian data [1] о доступности данных о гуманитарных катастрофах. Отчёт создан центром по гуманитарным данным при ООН [2] который собрал более 17 тысяч наборов открытых данных о 253 территориях из 1251 источника на 23 января 2020 года [3].

Отчёт полезен как отчёт о деятельности самого центра и как пример кооперации большого числа организаций оказывающих гуманитарную помощь. Сам проект по сбору данных мог бы быть хорошим примером МЧС по координации помощи при катастрофах в Российской Федерации.

Ссылки:
[1] https://centre.humdata.org/wp-content/uploads/2020/01/StateofData2020.pdf
[2] http://www.humdata.org/
[3] https://data.humdata.org/

#opendata #un #humdata
Forwarded from Ах, этот Минфин (Olya Parkhimovich)
В середине ноября мы запустили новый проект Счетной палаты РФ «Госрасходы», в котором не только агрегируем данные о госфинансах из разных источников, но и анализируем их, а также формируем профили каждого национального проекта. Чаще всего пользователи спрашивали у нас API к данным. Теперь он открыт, бесплатен, документирован и готов к использованию в ваших проектах и исследованиях. Вся информация о API и документация доступны по ссылке: https://spending.gov.ru/pages/devs_api/
До дня открытых данных [1] осталось 45 дней и ещё не поздно зарегистрироваться и принять участие!

Каждый год день открытых данных мы проводим как негосударственное некоммерческое мероприятие проходящее по всему миру и конкретно в Москве организуем его мы в @infoculture

Если Вы хотите принять участие как докладчик, партнер, а может быть даже и спонсор(!) напишите на [email protected] обязательно. Если Вы решите провести мероприятие у себя в регионе, тоже напишите нам и мы поможем привлечь больше участников.

В дне открытых данных принимают участие представители НКО, преподаватели, чиновники, представители бизнеса, активисты и все кто деятельно работает с данными во всех их формах и ипостасях.

Помните что открытость - это то что мы делаем своими руками!

Ссылки:
[1] http://opendataday.ru/msk

#opendata #opengov
История с блокировкой Startmail.com [1] - это какая-то особая форма глупости со стороны регуляторов. Причина проста - блокировки в России покрывают исключительно трафик относящийся к http/https запросам и не затрагивают электронную почту. Правда глупость тут не только в невозможности спецслужб выявить генераторов писем о минировании, но и в реакции правоохранительных органов на подобные анонимные письма. Реальная проблема и какая-то нереально неэффективная работа по её исправлению.

Ссылки:
[1] https://www.rbc.ru/rbcfreenews/5e2980589a79478385d6a6e2

#email #security