augusto-herrmann / transparencia-dados-abertos-brasil

A survey of Brazilian states' and municipalities' transparency and open data portals, as well as institutional websites, obtained from several public data sources. 🇧🇷 Levantamento de portais estaduais e municipais de transparência e dados abertos, bem como os portais institucionais, obtido a partir de diversas fontes públicas de dados.
Other
57 stars 10 forks source link

Incluir mapeamento com códigos COD P-Code #26

Open augusto-herrmann opened 2 years ago

augusto-herrmann commented 2 years ago

Após uma provocação do @fititnt surgiu a ideia de incluir no mapeamento os códigos P-Code de localidades geográficas de dados para a ajuda humanitária, referentes aos municípios brasileiros, que são usados por organizações internacionais.

COD (Common Operational Datasets) são os dados usados nas operações do Escritório das Nações Unidas para a Coordenação de Assuntos Humanitários (ENUCAH), ou OCHA, na sigla em inglês. E os P-Codes de localidades geográficas são um desses datasets.

fititnt commented 2 years ago

MEU HERÓI!


Vou dar ping também no @ppKrauss. Te marcando porque além do Herrmann, podemos começar a revisar (ou pelo menos darem ideia de como acham que é melhor alternativa, sem precisar mexer nos scripts e troca de demails) o que acabou virando P-Codes publicados pela OCHA FIS DATA em https://data.humdata.org/dataset/brazil-administrative-level-0-boundaries, e que tinha sido baseado nesse post publico aqui Necessary steps to implement a new country without p-codes (like Brazil) quickX3/issues/66.

Dois problemas:

Primeiro: quando foi feita sugestão inicial de P-Codes baseado nos códigos do IBGE, tanto mesoregiões e microregiões não viraram P-Codes. O IBGE tem esses shapefiles, usa eles para calculos estatísticos, a OCHA inclusive pode ir até adm6, mas a proposta atual de P-Codes considera adm2 já as UFs do Brasil. Embora isso não mude o fato de que, por exemplo, MG3106200 ainda representaria o cidade de Belo Horizonte, isso poderia mudar MG3106200 de adm3 para até adm5. Porem ainda tem necessidade de incluir bairros (ou algo menor que bairros, então, e creio que geralmetne usa-se até adm6 (talvez nem isso)

Primeiro: pelo menos a planilha bra_admgz_ibge_2020.xlsxXLSX lá do HDX (HDX = data.humdata.org), é uma das 3 que houve reclamação de não estar num padrão interno da OCHA. Frase literal que ouvi de um colega super expert da World Food Programme:

_"Original source, but not Enhanced: There are a few countries (ARG, BRA, CHL) for which high reliability government sourced data is available. However, these aren’t formatted in the ITOS standard other Geodatabases are (admin2Name_en, admin2Pcode, etc), which would cause them to break an automation pipeline. After the initial release, probably worth identifying a short-list of countries whose geometry is clean, but just require attribute format standardization. I’ve previously cleaned up every HDX boundary attribute when I did a manual import of COD data in hdxattributes.zip."

E sim, o ITOS standard (pelo menos versão mais recente) provavelmente não tem documentação publica.