okfn-brasil / querido-diario

📰 Diários oficiais brasileiros acessíveis a todos | 📰 Brazilian government gazettes, accessible to everyone.
https://queridodiario.ok.org.br/
MIT License
1.11k stars 409 forks source link

[Novo spider base] DIONET #724

Closed trevineju closed 7 months ago

trevineju commented 2 years ago

Como apontado em #648, a Imprensa Oficial do ES aparenta ser um sistema publicador de diários. Ela publica pra cidade de Serra-ES (já em produção no Querido Diário), mas também para outras cidades mapeadas no censo: capital vitória, são mateus, linhares...

Para a cidade de Serra-ES, foi percebida uma API:

url = f"https://ioes.dio.es.gov.br/apifront/portal/edicoes/edicoes_from_data/%7Bdate.year%7D-%7Bmonth%7D-%7Bday%7D.json?subtheme=diariodaserra"

A tarefa dessa issue seria explorar se outras cidades também publicam pelo dio.es de forma padronizada, se sim, criar uma base para eles. Adicionalmente, refatorar o spider de Serra para utilizar a base.

ayharano commented 2 years ago

Lista de clientes que possam ser relacionados ao projeto querido-diario: https://www.ionews.com.br/clientes

ayharano commented 2 years ago

Anúncio do uso do sistema DIO/ES que foi iniciado em 2 de agosto de 2021: https://www.amunes.org.br/noticia/ler/2154/estamos-de-mudanca-agora-nossas-publicacoes-serao-no-dio-es

ayharano commented 2 years ago

Municípios de acordo com https://www.amunes.org.br/prefeituras:

Município URL do diário oficial Publicação própria Usa o sistema de DIO/ES
Afonso Cláudio - - -
Água Doce do Norte - - -
Águia Branca - - -
Alegre - - -
Alfredo Chaves - - -
Alto Rio Novo - - -
Anchieta - - -
Apiacá - - -
Aracruz - - -
Atílio Vivacqua - - -
Baixo Guandu - - -
Barra de São Francisco - - -
Boa Esperanca - - -
Bom Jesus do Norte - - -
Brejetuba - - -
Cachoeiro de Itapemirim - - -
Cariacica https://www.cariacica.es.gov.br/publicacoes/diario-oficial Sim Não
Castelo - - -
Colatina - - -
Conceicão da Barra - - -
Conceicão do Castelo - - -
Divino de São Lourenco - - -
Domingos Martins - - -
Dores do Rio Preto - - -
Ecoporanga - - -
Fundão https://ioes.dio.es.gov.br/dom Não (Associação dos Municípios) Sim
Governador Lindenberg - - -
Guacuí - - -
Guarapari https://ioes.dio.es.gov.br/dom Não (Associação dos Municípios) Sim
Ibatiba - - -
Ibiracu - - -
Ibitirama - - -
Iconha - - -
Irupi - - -
Itaguacu - - -
Itapemirim - - -
Itarana - - -
Iuna - - -
Jaguare - - -
Jeronimo Monteiro - - -
João Neiva - - -
Laranja da Terra - - -
Linhares - - -
Mantenopolis - - -
Marataízes - - -
Marechal Floriano - - -
Marilândia - - -
Mimoso do Sul - - -
Montanha - - -
Mucurici - - -
Muniz Freire - - -
Muqui - - -
Nova Venecia - - -
Pancas - - -
Pedro Canário - - -
Pinheiros - - -
Piuma - - -
Ponto Belo - - -
Presidente Kennedy - - -
Rio Bananal - - -
Rio Novo do Sul - - -
Santa Leopoldina - - -
Santa Maria de Jetibá - - -
Santa Teresa - - -
São Domingos do Norte - - -
São Gabriel da Palha - - -
São Jose do Calcado - - -
São Mateus - - -
São Roque do Canaã - - -
Serra https://ioes.dio.es.gov.br/diariodaserra Sim Sim - -
Sooretama - - -
Vargem Alta - - -
Venda Nova do Imigrante - - -
Viana https://ioes.dio.es.gov.br/dom Não (Associação dos Municípios) Sim
Vila Pavão - - -
Vila Valerio - - -
Vila Velha https://diariooficial.vilavelha.es.gov.br/ Sim Não
Vitoria https://diariooficial.vitoria.es.gov.br/ Sim Não
trevineju commented 2 years ago

@ayharano acho que, pela perspectiva de pensar se vale a pena fazer a classe pro DIO/ES pois vai abarcar várias cidades, seu comentário anterior, do anúncio de migração, já atende. Agora seria o caso de, de fato, criar a classe.

Quanto ao mapeamento, é excelente termos, mas acho que como é gestão de conhecimento do projeto, poderia ficar num quadro melhor organizado. Ainda não está público pois estava editando recentemente, mas teremos um quadro "Expansão de Cidades no QD" (vou pedir pro Giulio tornar público). Lá estamos fazendo a gestão do progresso de cidades. Uma preview: image

Essa parte que você classifica se é publicação própria ou se usa o DIO/ES poderia ficar na coluna de observações. Tudo bem você esperar para liberar isso com o Giulio e migrarmos daqui?

ayharano commented 2 years ago

@trevineju claro, podemos mover essa estrutura para um local mais adequado. Eu vi essa estrutura de planilha do próprio projeto, mas como não sabia qual seria o melhor caminho a interagir, temporariamente inclui como uma tabela markdown em um comentário

ayharano commented 2 years ago

Buscando por site:gov.br ionews em https://google.com.br além dos clientes já listados, aparentemente os seguintes municípios também usam o sistema:

trevineju commented 2 years ago

São José dos Campos já tem issue e PR aberto (#618 / #654 ). Assim, ao existir uma base para o sistema DIONET, haveria necessidade de refatorá-lo.

ayharano commented 2 years ago

São José dos Campos já tem issue e PR aberto (#618 / #654 ). Assim, ao existir uma base para o sistema DIONET, haveria necessidade de refatorá-lo.

Fiz a listagem mas ainda não tive tempo hábil de fazer a triagem e verificar se realmente é o mesmo sistema base.

Após essa validação, comento aqui e, se for o caso, em quaisquer PRs/issues relevantes

trevineju commented 2 years ago

Sem problemas, @ayharano! Inclusive, obrigada pela cuidadosa verificação. :3

Comentei aqui apenas pq estava atualizando o board das cidades e notei. Fora isso, não tem nenhuma issue/PR aberto que mencione cidades daqui (com exceção de Serra-ES, que já foi atacado). Já te ajudei na conferência (: