transparencia-mg / remuneracao

dataset que contém arquivos da consulta de remuneração mensal dos servidores
https://transparencia-mg.github.io/remuneracao/
0 stars 0 forks source link

Separador de milhares não identificado na validação do goodtables.io #7

Open fjuniorr opened 3 years ago

fjuniorr commented 3 years ago

A validação do goodtable.io não está reportando o erro de tipo de coluna que é reportado pela validação com a biblioteca frictionless-py:

cat datapackage.json | jq -c '.resources[0]' > resource.json # extraindo um único recurso para validação
frictionless validate --source-type resource resource.json
# The cell "8.209,02" in row at position "3231" and field "remuner" at position "10" has incompatible type

A correção do schema é feita adicionando a propriedade groupChar em todas as colunas númericas (Vide 5ca712d0f5ec2d7f9b62d4f76c7cba1b0dd2f6ba).

No entanto, precisamos investigar porque o goodtables.io não foi capaz de identificar esse erro.

Ps. Usei a ferramenta jq e esse tutorial para extrair um único recurso do datapackage.json