Prepara Apresentação Grupo de Dados dia 18/08/2023

[gabrielbdornas]

@Andrelamor, passando o olho na apresentação Datapackage Manager for CKAN - DPCKAN (Fechamento Curso CKAN Escola de dados OKRBR) penso que não seria necessário modificarmos nada.

Gostaria de sua opinião sobre.

Minha idéia seria fazermos um treinamento rápido da apresentação na véspera do encontro só p se certificar que tudo está nos conformes.

Coisas que podemos acrescentar, na fala, são:

• Os problemas atuais do plugin e um próximo passo referente à integração deste com o dpckan ou as novas ferramentas da frictionless.
• Criação imediata de rotinas GitHub para acompanhar o crescimento desta comunidade, nos moldes criados na organização o-futuro-ja-comecou.

[Andrelamor]

perguntas orientadoras:

• faz sentido usar o padrão de metadados? isso é uma dor comum no compartilhamento e (re)uso dos dados? - referência em https://transparencia-mg.github.io/reveal.js/presentations/20230804_minas_de_dados_overview_dta/index.html#/1/1
• um dos produtos do grupo pode ser a publicação de dados no PdA?

[Andrelamor]

PRÓXIMOS DESAFIOS

• slide de compartilhamento de experiências e aprendizados:

PRÓXIMOS DESAFIOS Ecossistema de demanda e oferta de dados incipiente em MG. Gap de conhecimento tanto de publicadores quanto de usuários - Data Literacy. Conhecimentos específicos até para as pessoas que trabalham na área. Tamanho do banco necessário para comportar bases complexas (dados geospaciais).

• o grupo compartilha a percepção deles? o que se pensa como outros produtos/entregas para resolver? por exemplo, estratégicas para o data literacy?

• faz sentido gerar uma organização no github, com frames de projetos e filosofia docs like code?

[Andrelamor]

pontos da apresentação

• quem do grupo conhece/usa rotineiramente os portais PdT/PdA? é possível compartilhar uma percepção da experiência do uso?

• necessidade de popular o PdA, em escala, por adesão; ferramenta open source

• adoção do uso da especificação de metadados

• dificuldades motivaram a adoção de interface gráfica

• questão da ativação do ecossistema

• questões tecnológicas por parte da capacidade de oferta (i.e. contratação de empresa, técnicos, editais, lei de inovação) provavelmente um tema à parte

[gabrielbdornas]

demonstrar facilidade para utilização dos dados

• Premissa: utilização de especificação frictionless:

from frictionless import Package
from requests import get

ckan_datapackage = get('http://projetockan.cge.mg.gov.br/datapackage-creator/show-datapackage-json/fd3619b2-db62-45c2-8c15-52cba375a290')
package = Package(ckan_datapackage.json())
resource = package.get_resource('crimes-violentos-2022-1')
df = resource.to_pandas()

Penso que demonstrar algo utilizando campos de data e Dinheiro (valor) seria bem interessante, pois isso, de fato, é uma dor para quem trabalha com análise de dados.

[Andrelamor]

demonstrar facilidade para utilização dos dados

• Premissa: utilização de especificação frictionless:

from frictionless import Package
from requests import get

ckan_datapackage = get('http://projetockan.cge.mg.gov.br/datapackage-creator/show-datapackage-json/fd3619b2-db62-45c2-8c15-52cba375a290')
package = Package(ckan_datapackage.json())
resource = package.get_resource('crimes-violentos-2022-1')
df = resource.to_pandas()

Penso que demonstrar algo utilizando campos de data e Dinheiro (valor) seria bem interessante, pois isso, de fato, é uma dor para quem trabalha com análise de dados.

esta demonstração é útil para qualquer fórum desta temática, principalmente se comparada ao pandas sem frictionless, quando ocorrem problemas de encoding, interpretação equivocada de ponto, vírgula, etc

[gabrielbdornas]

Este PR é um exemplo de melhoria contínua da documentação com auxílio dos consumidores.