Telegram Group Search
Госзатратам 10 лет!

10 лет назад (4 февраля 2014 года) был запущен проект «Госзатраты» (clearspending.ru) - один из первых порталов-агрегаторов данных о госконтрактах. За это время сайт посетили 16 млн уникальных посетителей, а мы собрали данные о 55 млн контрактов.

10 лет мы непрерывно скачиваем данные с ftp-сервера портала Госзакупок, преобразовываем их и предоставляем разработчикам в формате API и открытых данных (спасибо Минфину России, Федеральному Казначейству и техподдержке ЕИС Госзакупки за публикацию данных и оперативную реакцию).

С 2014 по 2019 год мы также проводили хакатоны и семинары, а с 2019 года портал был в режиме поддержки в связи с переходом команды на работу над порталом СП РФ «Госрасходы» (spending.gov.ru, надеемся, что сайт будет доступен). Но даже режим поддержки требовал регулярного обновления скриптов в связи с регулярно изменяющимися схемами данных ЕИС Госзакупки.

С августа 2023 года мы вернулись к активной работе над проектом и разрабатываем новую версию базы данных и новый сайт. Скоро мы откроем альфа-версию и будем вести разработку в «открытом режиме», оперативно реагируя на обратную связь и предложения (пишите на почту [email protected] или в лс). Для доступа к API нужно будет зарегистрироваться, но будет достаточно времени для перехода на новую схему данных. Если вы хотите посмотреть на сайт быть «альфа-тостером» - посмотреть на сайт до его появления и дать обратную связь - пишите.

За эти 10 лет многие данные стали открытыми. Не меньше данных успели появиться в открытом доступе, и исчезнуть из него. Мы надеемся, что данные о госзакупках останутся доступными для граждан. К сожалению, вызывает опасения информация о закрытии с июля 2024 года ftp-сервера госзакупок (zakupki.gov.ru/epz/main/public/news/news_preview.html?newsId=34208), и пока нет однозначной информации о том, будут ли эти данные доступны кому-то кроме госорганов (мы обязательно направим наши пожелания Минфину и Казначейству).

Благодарим наших пользователей, поставщиков данных и, конечно, команду проекта.
Изостатистика - одна из первых книг по инфографике

Так как мы решаем большую задачу «собрать бюджеты России за 100 лет», приходится часто искать новые источники исторических книг и документов. Одной из самых интересных находок стала книга И.П. Иваницкого «Изостатистика. Изобразительная статистика и венский метод», изданная в «Москве-Ленинграде» в 1932 году.

Изостатистика, как оказалось, примерно то же самое, что в современном мире называют «инфографикой», и что в книге зовется «количественной системой диаграммирования».

Книга описывает базовые принципы создания диаграмм, приводит большое количество примеров исторических инфографик и разбирает каждую из них.

К сожалению, книга черно-белая, но все равно уникальная.

Скачать книгу можно с сайта НЭБ (уникальный источник исторических книг): https://rusneb.ru/catalog/000199_000009_005073846/

#открытыеданные #инфографика #диаграммы
Минфин России опубликовал план по реализации мероприятий в области открытых данных на 2024-2025 годы

К сожалению, документ [1] настолько обобщенный и абстрактный, что выделить в нем что-то новое или конкретизированное не представляется возможным. Ежегодно Минфин обещает поддерживать актуальное состояние наборов открытых данных, проводить формальные вопросы об оценке качества открытых данных, раскрывать дополнительные сведения и улучшать визуализацию.

Интересно, что в Плане на 2024-2025 гг появился пункт «Обеспечение публикации наборов открытых данных Минфина России на иных сайтах (сайтах третьих сторон) (единый портал бюджетной системы Российской Федерации)». Честно говоря, не знаю, давно ли для Минфина России портал ЕПБС стал «сайтом третьих сторон» :).

Но, если мы посмотрим на отчет за 2022 год [2] (отчет за 2023 год еще не опубликован), то увидим, что в 2022 году:

- «обращений о качестве размещенных на оф. сайте Минфина России наборов открытых данных не поступало»;
- «запросы на раскрытие данных от потребителей не поступали» (О_О);
- «новые наборы открытых данных в 2022 году не размещались»;
- опрос о качестве данные прошел только 21 респондент (а это возможно только в том случае, если данный опрос не был анонсирован пресс-службой).

То есть, по мнению Минфина России, никто за год по открытым данным не обратился, ничего нового запросил, на качество не пожаловался. Очень странная ситуация. Не стесняйтесь обращаться и запрашивать ;-).

И больше всего удивляет, что и Минфином России, и Казначейством России ежегодно проделывается (все еще) огромная работа по раскрытию и актуализации открытых данных на портале ЕПБС. Но, судя по ежегодным планам/отчетам, ничего этого нет (как и запросов от граждан).

[1] https://minfin.gov.ru/ru/opendata/work/events?id_57=306101-plan_ministerstva_finansov_rossiiskoi_federatsii_po_realizatsii_meropriyatii_v_oblasti_otkrytykh_dannykh_v_2024-2025_godakh
[2] https://minfin.gov.ru/ru/opendata/work/events?id_38=301243-otchyot_o_khode_vypolneniya_v_2022_godu_plana_ministerstva_finansov_rossiiskoi_federatsii_po_realizatsii_meropriyatii_v_oblasti_otkrytykh_dannykh_v_2022-2023_godakh

#госфинансы #открытыеданные #минфин
Столетняя реклама или неожиданные находки в Бюджете Санкт-Петербурга за 1923 год

Сегодня у нас прошла очередная встреча по проекту «Петербургский цифровой архив госфинансов и госуправления», с которым мы победили в конкурсе Комитета финансов Санкт-Петербурга «Твой Бюджет 2.0». Это была первая встреча в Центральном государственном архиве Санкт-Петербурга, к которой нам подготовили 257 дел. Их в дальнейшем оцифруют, чтобы гражданам был доступен бюджет Санкт-Петербурга за 100 лет.

Теперь мы понимаем, что значит «подготовить дела на выдачу». Эта деятельность включает в себя выявление, поиск, осмотр и постраничную нумерацию каждого дела.

Конечно, интереснее всего самые старые дела. Первым документом, который мы открыли, был Бюджет Санкт-Петербурга за 1923 год. Одной из первых страниц дела была телеграмма с указаниями о подготовке местного бюджета (скрин 1). А вот оборотная сторона телеграфного бланка заполнена рекламой, да еще такой, которую современный ФАС бы точно не пропустил (скрин 2).

Вот такие неожиданности можно встретить в документах, которым ровно 100 лет. А сколько всего нас еще ждет…
Минфин России опубликует 4 тома «Истории Министерства финансов России» в открытом доступе

В прошлом году мы активно писали Минфину запросы на публикацию в открытом доступе сериала об Истории финансов России (и он его, все-таки, опубликовал https://www.group-telegram.com/ahminfin.com/623).

В этом году мы задались вопросом доступности 7 томов, посвященных истории Минфина России. Как выяснилось, три тома за 1802-1913 гг уже опубликованы на официальном сайте, а еще 4 тома за 1903-2002 гг будут опубликованы до конца этого года.

Спасибо Минфину за открытость🤗, а мы, со своей стороны, готовим кое-что интересное к Дню архивиста 🤫
День открытых данных: 6 марта с 11:00

6 марта с 11:00 в онлайн-формате пройдет ежегодный День открытых данных. В этом году будут представлены выступления об открытых данных в российской науке, об особенностях работы со статистикой внешней торговли, презентация нового проекта Dateno и многое другое.

В 12:45 расскажу о том, что происходит в области открытых госфинансов: повышается ли уровень финансовой открытости, доступ к каким наборам данных мы потеряли, что ожидать в ближайшее время и над какими проектами мы сейчас работаем.

Заспойлерю несколько скриншотов обновленной версии сайта проекта «Госзатраты», расскажу как мы собираем 5 тысяч исторических документов о госфинансах и как мы победили в конкурсе СПб «Твой Бюджет 2.0», по результатам которого Петербургские госорганы опубликуют в открытом доступе 150 тысяч страниц о финансах Петербурга за 100 лет.

Регистрация по ссылке: https://opendataday.ru/msk
Открытые данные в Армении

На прошлых выходных мы провели первый Open Data Day в Армении. Он прошел в уютной атмосфере лофта Еревана с выступлениями представителей госорганов, дата-специалистов и журналистов.

Армения находится в начале своего пути работы с открытыми данными, поэтому на Дне открытых данных планами Министерства Высокотехнологичной Промышленности поделился Аршак Левонович Керобян, начальник Управления цифровизации.

Самым интересным, на мой взгляд, является намерение Министерства поддерживать концепцию open by default - открытость по умолчанию. В этой концепции все, что не является закрытым, должно быть доступным и открытым. Россия не придерживается концепции открытости по умолчанию, поэтому существует (устаревший) список наборов данных, которые должны быть открытыми.

Вторым интересным моментом является инвентаризация всех государственных данных и публикация созданного каталога. При этом, была озвучена идея о том, что госорганы не могут пользоваться и ссылаться на те данные, которые не включены в каталог. На мой взгляд, это отличное решение для того, чтобы госорганы своевременно вносили информацию о своих наборах данных (тем самым актуализируя каталог) и не забывали публиковать их в открытом доступе.

Рассказывали также доработке закона О свободе информации и о том, какую бурную дискуссию он вызвал даже среди потенциальных бенефициаров, которые так долго боролись за повышение открытости и прозрачности.

Закон о персональных данных также сейчас разрабатывают. Удивительно, что для регистрации информации о гражданах существует несколько не связанных друг с другом реестров, каждый из которых устаревает через пять минут.

Надеюсь, что все это (ну или хотя бы то, что касается открытых данных) в ближайшее время будет реализовано.

Кстати, некоторое время назад мы запустили общественный портал открытых данных Армении (https://data.opendata.am), загрузив первые 815 наборов данных. Государственный портал армянское правительство тоже анонсировало.
Цифровой архив госфинансов: Бюджеты Российской империи и СССР в виде книг и открытых данных

К Дню архивиста мы (Инфокультура и Институт Гайдара) запускаем новый проект - Цифровой архив госфинансов и госуправления (finlibrary.ru). Наша главная задача - сохранить и сделать доступными и машиночитаемыми исторические документы о госфинансах. Мы хотим собрать источники о государственном бюджете за 150 лет, агрегировать наиболее полную базу статистических сборников и подготовить открытые данные для разработчиков.

Среди собранных документов можно найти Государственные бюджеты СССР и РСФСР, выпуски журнала “Проблемы экономики” и бюллетени Счетной Палаты РФ, документы департаментов Минфина XIX века, книги по истории Минфина России, бюджеты городов и многое другое. Уже сейчас в нашей базе данных собраны государственные бюджеты за 80 лет, с практически непрерывным покрытием 1866-1945 гг.

При разработке проекта мы делаем акцент на следующих пунктах:

1. Полнота базы данных: мы добавляем все те источники, которые можем найти (не забывая о проверке наличия открытых лицензий). На данный момент мы частично собрали источники из проекта «Исторические документы» Минфина России и проекта «Исторические материалы», а также нашли еще несколько проектов, документы с которых агрегируем в этом году.

2. Открытые данные: мы хотим не только собрать базу документов и добавить к ним текстовый слой, но и разработать на основе них наборы открытых данных.

3. Уникальные документы: года 4 мы скупаем исторические документы с профильных площадок и сканируем их. Также для данного проекта мы отсканировали личный архив исторических книг А.Л. Кудрина (в который вошли, например, 7 томов истории Минфина России). А в 2022 году мы оцифровали архивные отчеты Счетной Палаты.

4. Метаданные: большинство документов, которые мы собрали, практически не систематизированы, поэтому мы ставим для себя задачу обогатить их метаданными и разработать для этого соответствующие классификаторы.

«Почти 25 лет назад Минфин начал сохранять, формировать и популяризировать историю государственных финансов. 
Мне приятно осознавать, что эта деятельность активно развивается и сегодня благодаря усилиям нового поколения специалистов в области компьютерной обработки информации.
 
Желаю исследователям и пользователям проекта «Цифровой архив госфинансов и госуправления» успехов в их непростой, но чрезвычайно интересной работе, требующей универсальных навыков в самых разных сферах – от истории и архивного дела до современных цифровых технологий», - Алексей Кудрин (@AlekseiKudrin), д.э.н., главный научный сотрудник, член Попечительского совета Института Гайдара.

Иногда самые интересные книги могут быть написаны от руки. Например, исторические бюджеты Санкт-Петербурга. Такие случаи требуют особого внимания и поэтому работы предстоит очень много. Мы заинтересованы в партнерах и волонтёрах. Нам нужна помощь в следующих задачах:

⁃ сбор исторических документов с сторонних сайтов;
⁃ разметка базы данных;
⁃ разработка справочников и классификаторов;
⁃ создание наборов открытых данных;
⁃ предоставление исторических документов на оцифровку.

Будем рады пожеланиям и предложениям. Пишите на почту [email protected] (Ольге Пархимович) или в телеграм @k0shk. Более подробную информацию о проекте можно найти в анонсе: https://finlibrary.ru/s/finarchive/page/news.
Чаты госорганов - отдельный вид искусства

Иногда диалоги госорганов с гражданами бесценны. Пока Минфин России традиционно отвечает на все комментарии по опубликованным на выходных ребусам и загадкам и ищет спрятанные цветочки, граждане пытаются выяснить законодательное регулирование криптовалюты (см. прикрепленный скрин).

Но есть и другие примеры. Коллега недавно столкнулась с проблемой неправильного начисления налогов на недвижимость и ошибочных пени. Для решения проблемы были использованы все возможные способы: обращение гражданина, звонок инспектору, личная встреча с замом начальника инспекции, запросы в Прокуратуру. Ситуация длилась несколько недель, все предложенные ФНС решения не срабатывали (сотрудники ФНС упорно предлагали вписать в декларацию то, что в нее не вписывалось), ничего не помогало.

На удивление помог официальный телеграм-чат ФНС: стоило описать в чате ситуацию, как в этот же день перезвонил вежливый сотрудник и решил проблему. Вот такой лайфхак, пользуйтесь :)
Институт Гайдара» и АНО «Информационная культура» запустили  новый проект  - «Цифровой архив госфинансов и госуправления».

Таким образом, мы расширили массив для работы с экономикой данных.

Теперь благодаря новому поколению специалистов в области компьютерной обработки информации мы можем
сохранить исторические источники о государственных финансах и госуправлении и сделать их доступными для экономистов, историков, исследователей, разработчиков и всех, кто интересуется.

Самые ранние материалы исследования датируются концом XIX - началом ХХ века. Теперь они оцифрованы, и  исследователи, учёные получат доступ к уникальным материалам, охватывающим более двух веков истории российских государственных финансов, а студенты смогут реализовать свои проекты, используя оцифрованные и верифицированные наборы данных.
Статистические данные Банка России в формате временных рядов теперь доступны по API и в виде машиночитаемых наборов данных

Всего доступно 49 статистических показателей, среди которых можно найти:

- статистику по ипотечному жилищному кредитованию
- структуру денежной массы
- объемы кредитов, предоставленных субъектам МСП
- платежный баланс РФ
- процентные ставки по вкладам физлиц в рублях
- сведения по кредитам нефинансовым организациям и физлицами
- и многое другое.

Также на сайте Банка России доступна подробная инструкция по работе с сервисом (https://www.cbr.ru/statistics/data-service/user_guide/) и документация к API (https://www.cbr.ru/statistics/data-service/APIdocuemntation/).

Отличная новость, т.к. не так часто нас балуют новыми открытыми данными, особенно финансовыми. Было бы здорово, если и другие финансовые организации возьмут пример с Банка России. Например, Сбер мог бы расширить и детализировать данные, доступные сейчас в СберИндексе, а Тинькофф - хотя бы добавить возможность скачивать данные, доступные в графиках Тинькофф Индекса.

Ссылка на сервис получения данных: https://www.cbr.ru/statistics/data-service/
Предложение Военного отдела Минфина, от которого невозможно отказаться 🙈. 1948 год.

Этот, и многие другие документы, мы отсматривали в Центральном архиве Санкт-Петербурга.

На днях Центральный архив СПб опубликовал первый тендер в рамках проекта «Петербургский цифровой архив госфинансов и госуправления», с которым мы выиграли конкурс «Твой Бюджет 2.0» в прошлом году. В рамках данного тендера будет оцифровано 60 тысяч образов. Всего наш лимит - 150 тысяч образов, которые будут доступны всем без регистрации и смс.

Кстати, сегодня, в День города Санкт-Петербурга, информационный портал «Архивы Санкт-Петербурга» снова доступен бесплатно всем желающим (после регистрации): https://spbarchives.ru
«Первое и важнейшее условие существования всякой благоустроенной системы госфинансов заключается в полнейшей гласности и отчетности расходов каждого фартинга казенных денег», 1870 г.

Удивительно, но все обоснования открытости и подотчетности государства, звучавшие при создании Открытого Правительства, разработке концепции открытых данных и развитии открытости не только в России, но и в других странах, были сформулированы еще 150 лет назад в издании Ливерпульской ассоциации финансовых реформ «Как англичане критикуют свои государственные расходы» (1870 год).

Авторы описывают необходимость открытости и подотчетности госорганов, работу государства за счет налогов граждан, необходимость бережного отношения к деньгам граждан, необходимость еще большей открытости Великобритании, а также высказывают сомнения в точности и добросовестности раскрываемой информации.

Второе издание 1908 года, пополнившее библиотеку Инфокультуры благодаря Максиму Осовскому, мы оцифровываем для проекта Цифрового архива госфинансов (@finlibraryru, подписывайтесь, будем делиться новостями проекта и находками).

Оригинал текста на скриншоте, но для удобства цитирую ниже:

«Первое и важнейшее условие существования всякой благоустроенной системы госфинансов заключается в полнейшей гласности и отчетности расходов каждого фартинга казенных денег. Государственные люди не должны забывать, что большинство доходов казны собирается в форме налогов. т.е. принудительным образом и без вознаграждения подданного каким-нибудь личным эквивалентом. Расход каждого фартинга казенных денег, поэтому, имеет особое, чуть ли не священное значение и должен совершаться с соблюдением величайшей бережливости, осторожности и гласности. … Таким образом, по мысли ливерпульского общества, власть должна производить расходы так, чтобы не только представители народа, но и всякий частный человек имел возможность проследить и проверить, куда и каким путем ушел из рук правительства каждый фартинг денег, ежегодно ассигнуемых народом на нужды государства».
Анкета одного из ЗАГСов Московской области предлагает при регистрации ребенка предоставить логин и пароль от личного кабинета Госуслуг. А мы потом удивляемся, как через Госуслуги квартиры продают без ведома владельцев, и другим видам мошенничества.

Поле как будто бы зачеркнуто, но не удивлюсь, если молодые родители от гормонов или эмоций в него что-то впишут. Да и в целом его наличие в печатной форме (да и наличие самой печатной формы) вызывает большие вопросы.
Пожалуй, самое оригинальное про новую ИТ-ипотеку (можно еще и версию про разблокировку Youtube сделать):

«Приходит Чебурашка в Минцифры и говорит:
— Постановление по ипотеке вышло?
— Нет,— говорит Шадаев.— Как выйдет сообщу!
На следующий день Чебурашка снова приходит в минцифры и спрашивает:
— Постановление вышло?
А Шадаев говорит:
— Если ты еще хоть раз спросишь про постановление, я у тебя аккредитацию заберу!
На третий день Чебурашка приходит и спрашивает:
— А вы можете просто так аккредитацию забрать?
Нет, не можем,— отвечает Шадаев.
— А постановление по ипотеке вышло?»

(с) @mixmebar из ИТ-чата @MIT_union
Рубрика "Цифровая милота"
Всё-таки у нас очень доброе Минцифры - аккредитованному ИТ-специалисту Чебурашке дали всё, что он хотел получить.
А ведь могли и уши гвоздями к полу прибить
2024/10/04 02:20:40
Back to Top
HTML Embed Code: