Сделать дампы данных по организациям по видам или по регионам из портала бюджетных учреждений bus.gov.ru и выложить их в виде датасетов за 1.5 часа

[ivbeg]

Цель

Сделать дампы данных по организациям по видам или по регионам из портала бюджетных учреждений bus.gov.ru и выложить их в виде датасетов за 1.5 часа

Контекст

У bus.gov.ru есть недокументированное API для поиска и выгрузки данных по конкретной организации. Не обязательно обрабатывать весь их дамп с кучей XML файлов, можно взять только это API.

Эндпоинты:

• поиск http://bus.gov.ru/public/agency/extendedSearchAgencyNew.json?action=&agency=%D0%B2%D1%8B%D1%81%D1%88%D0%B0%D1%8F%20%D1%88%D0%BA%D0%BE%D0%BB%D0%B0&documentTypes=A&okatoSubElements=false&orderAttributeName=rank&orderDirectionASC=false&page=1&pageSize=10&ppoSubElements=false&primaryActivitySubElements=false&searchTermCondition=and&secondaryActivitySubElements=false&vguSubElements=true&withBranches=true
• карточка организации http://bus.gov.ru/public/agency/agency.json?agency=169503
• справочник видов организаций http://bus.gov.ru/public/nsi/vgu.json
• справочник регионов http://bus.gov.ru/public/getSelectorRegions.json

  Задача

• скачать и установить локально MongoDB - http://mongodb.org
• выгрузить в коллекцию MongoDB данные по одному виду организации или по одному региону из bus.gov.ru
• преобразовать данные коллекции в дамп JSON (через Mongojson)
• сделать статическую страницу с описанием дампа
• повторить задачу для максимально возможного числа регионов/видов организации

  Необходимые навыки

• базовое знание языка программирования Python
• базовое владение JSON, HTTP, API

  Оценки трудоёмкости

Ожидаемое время на задачу не более 1.5 часа

Приобретаемые навыки

Навык быстрой подготовки наборов данных для дальнейшей работы Навык работы с порталом bus.gov.ru

Вопросы

Вопросы можно писать на ibegtin@infoculture.ru или в комментариях к этой задаче