AO ABRIR um Pull Request de um novo raspador (spider), marque com um X cada um dos items do checklist
abaixo. NÃO ABRA um novo Pull Request antes de completar todos os items abaixo.
Checklist - Novo spider
[x] Você executou uma extração completa do spider localmente e os dados retornados estavam corretos.
[x] Você executou uma extração por período (start_date e end_date definidos) ao menos uma vez e os dados retornados estavam corretos.
[x] Você verificou que não existe nenhum erro nos logs (log_count/ERROR igual a zero).
[x] Você definiu o atributo de classe start_date no seu spider com a data do Diário Oficial mais antigo disponível na página da cidade.
AO ABRIR um Pull Request de um novo raspador (spider), marque com um
X
cada um dos items do checklist abaixo. NÃO ABRA um novo Pull Request antes de completar todos os items abaixo.Checklist - Novo spider
start_date
eend_date
definidos) ao menos uma vez e os dados retornados estavam corretos.log_count/ERROR
igual a zero).start_date
no seu spider com a data do Diário Oficial mais antigo disponível na página da cidade.Descrição
Faz alguns ajustes em raspadores que já estavam no repositório, mas inutilizados, e já adiciona as novas cidades na lista de spiders habilitados. Municípios: Prado - BA ( ba_prado.txt | ba_prado.csv ) Teolândia - BA ( ba_teolandia.txt | ba_teolandia.csv ) Tucano - BA ( ba_tucano.csv |ba_tucano.txt ) Crucilândia - MG (mg_crucilandia.csv | mg_crucilandia.txt ) Piranguinho - MG ( mg_piranguinho.csv | mg_piranguinho.txt ) Cerrito -RS ( rs_cerrito.csv | rs_cerrito.txt ) Barão de Antonina - SP ( sp_barao_de_antonina.csv | sp_barao_de_antonina.txt ) Penápolis - SP ( sp_penapolis.csv | sp_penapolis.txt )