okfn-brasil / querido-diario

📰 Diários oficiais brasileiros acessíveis a todos | 📰 Brazilian government gazettes, accessible to everyone.
https://queridodiario.ok.org.br/
MIT License
1.12k stars 411 forks source link

Remove classe base FECAM e todos os municípios derivados #1144

Closed trevineju closed 6 months ago

trevineju commented 6 months ago

O repositório tem diversos raspadores não sendo utilizados, pois eles foram desenvolvidos no início do projeto (+4 anos atrás) e precisam de ajustes e revisão.

Destes raspadores inativos, os casos que são possíveis de reativar tem issues abertas, marcadas com [revisão retroativa], então é um trabalho em andamento. Porém, para o caso do padrão FECAM, ainda que revisemos a base e os 270 municípios que a utiliza, não poderemos integrá-los ao projeto no momento, pois o formato do diário é fragmentado e, para termos diários desse tipo, precisamos endereçar a remodelagem do banco de dados primeiro (que começará a ser feito em breve)

Como o impedimento aqui vai além da raspagem em si, não vejo sentido em manter 271 arquivos parados no repositório, por isso, esta PR os removeram.

Entretanto, para não perder o desenvolvimento feito, deixo uma branch (https://github.com/okfn-brasil/querido-diario/tree/fecam_backup) no repositório. Assim, quando as limitações que bloqueiam sua integração forem superadas, podemos retomar a tarefa de revisão e integração a partir da branch.

trevineju commented 6 months ago

para a ciência de vcs, @ogecece @rennerocha @jvanz