Closed trevineju closed 1 month ago
Panambi - RS: rs_panambi-periodo.log | rs_panambi-periodo.csv rs_panambi.log | rs_panambi.csv
Gravataí - RS: rs_gravatai-periodo.log | rs_gravatai-periodo.csv rs_gravatai.log | rs_gravatai.csv
Estrela - RS: rs_estrela-periodo.log | rs_estrela-periodo.csv rs_estrela.log | rs_estrela.csv
Candelária - RS: rs_candelaria-periodo.log | rs_candelaria-periodo.csv rs_candelaria.log | rs_candelaria.csv
Bento Gonçalves - RS: rs_bento_goncalves-periodo.log | rs_bento_goncalves-periodo.csv rs_bento_goncalves.log | rs_bento_goncalves.csv
Dois Irmãos - RS: rs_dois_irmaos-periodo.log | rs_dois_irmaos-periodo.csv rs_dois_irmaos.log | rs_dois_irmaos.csv
Horizontina - RS: rs_horinzontina-periodo.log | rs_horinzontina-periodo.csv rs_horinzontina.log | rs_horinzontina.csv
Sobradinho - RS: rs_sobradinho-periodo.log | rs_sobradinho-periodo.csv rs_sobradinho.log | rs_sobradinho.csv
São João do Polesine - RS: rs_sao_joao_do_polesine-periodo.log | rs_sao_joao_do_polesine-periodo.csv rs_sao_joao_do_polesine.log | rs_sao_joao_do_polesine.csv
Santa Rosa - RS: rs_santa_rosa-periodo.log | rs_santa_rosa-periodo.csv rs_santa_rosa.log | rs_santa_rosa.csv
Nenhuma das coletas por período apresentou erros.
Já as completas, três municípios apresentaram algumas ocorrências de TimeOut, mas, aparentemente, sem prejuízos à coleta. [Bento Gonçalves (23); Dois Irmãos (8); Estrela (1)]
Horizontina apresentou 9 casos de erro 404. Confirmei que são de URLs quebradas no próprio site do município.
AO ABRIR uma Pull Request de um novo raspador (spider), marque com um
X
cada um dos items da checklist abaixo. Caso algum item não seja marcado, JUSTIFIQUE o motivo.Layout do site publicador de diários oficiais
Marque apenas um dos itens a seguir:
Código da(s) spider(s)
custom_settings
em meu raspador.Testes
.log
deste teste está anexado na PR..log
e.csv
deste teste estão anexados na PR..log
e.csv
deste teste estão anexados na PR.Verificações
.csv
gerados pela minha coleta conforme a documentação não encontrando problemas..log
gerados pela minha coleta conforme a documentação não encontrando problemas.Descrição
Esta contribuição foi iniciada por @AlexJBSilva em #1046. Na PR inicial, Alex adicionava dois padrões de uma vez. Aqui, a partir do uso dos commits de lá (cherry pick), o escopo foi reduzido, integrando apenas um deles.