Novo municipio Maracacume

antonishuamani commented 3 weeks ago

AO ABRIR uma Pull Request de um novo raspador (spider), marque com um X cada um dos items da checklist abaixo. Caso algum item não seja marcado, JUSTIFIQUE o motivo.

Layout do site publicador de diários oficiais

Marque apenas um dos itens a seguir:

[ ] O layout não se parece com nenhum caso da lista de layouts padrão
[ ] É um layout padrão e esta PR adiciona a spider base do padrão ao projeto junto com alguns municípios que fazem parte do padrão.
[ X] É um layout padrão e todos os municípios adicionados usam a classe de spider base adequada para o padrão.

Código da(s) spider(s)

[ ] O(s) raspador(es) adicionado(s) tem os atributos de classe exigidos.
[ ] O(s) raspador(es) adicionado(s) cria(m) objetos do tipo Gazette coletando todos os metadados necessários.
[ ] O atributo de classe start_date foi preenchido com a data da edição de diário oficial mais antiga disponível no site.
[ ] Explicitar o atributo de classe end_date não se fez necessário.
[ X] Não utilizo custom_settings em meu raspador.

Testes

[ ] Uma coleta-teste da última edição foi feita. O arquivo de .log deste teste está anexado na PR.
[ ] Uma coleta-teste por intervalo arbitrário foi feita. Os arquivos de .loge .csv deste teste estão anexados na PR.
[ X] Uma coleta-teste completa foi feita. Os arquivos de .log e .csv deste teste estão anexados na PR.

log_ma_maracacume.txt ma_maracacume.csv

Verificações

[ X] Eu experimentei abrir alguns arquivos de diários oficiais coletados pelo meu raspador e verifiquei eles conforme a documentação não encontrando problemas.
[ X] Eu verifiquei os arquivos .csv gerados pela minha coleta conforme a documentação não encontrando problemas.
[ X] Eu verifiquei os arquivos de .log gerados pela minha coleta conforme a documentação não encontrando problemas.

Descrição

trevineju commented 3 weeks ago

[ X] Uma coleta-teste completa foi feita. Os arquivos de .log e .csv deste teste estão anexados na PR.

oi, @antonishuamani. Você marcou que executou e anexou os arquivos, porém não o fez. Pode anexar os arquivos?

antonishuamani commented 3 weeks ago

[ X] Uma coleta-teste completa foi feita. Os arquivos de .log e .csv deste teste estão anexados na PR.

oi, @antonishuamani. Você marcou que executou e anexou os arquivos, porém não o fez. Pode anexar os arquivos?

acabei de anexar os archivos que voce solicitou

trevineju commented 3 weeks ago

acabei de anexar os archivos que voce solicitou

boa, @antonishuamani! Obrigada! Olhei os logs e a coleta parece estar boa e certa.

trevineju commented 3 weeks ago

Vou remover o outro raspador que adicionou à PR. Não teria problema contribuir com dois (ficaria faltando só adicionar os arquivos de teste), mas a questão é que o documento do diário oficial - escolhe qualquer um daqui https://altoparnaiba.ma.gov.br/diario/diario pra ver - é um diário agregado de vários municípios e não um documento exclusivo de Alto Paraíba. E a arquitetura do QD demanda outro fluxo para adicionar um diário agregado, coisa que ainda não temos para a Federação do Maranhão.

antonishuamani commented 3 weeks ago

Vou remover o outro raspador que adicionou à PR. Não teria problema contribuir com dois (ficaria faltando só adicionar os arquivos de teste), mas a questão é que o documento do diário oficial - escolhe qualquer um daqui https://altoparnaiba.ma.gov.br/diario/diario pra ver - é um diário agregado de vários municípios e não um documento exclusivo de Alto Paraíba. E a arquitetura do QD demanda outro fluxo para adicionar um diário agregado, coisa que ainda não temos para a Federação do Maranhão.

O outro raspador (Parnaíba) foi um descuido; na verdade, eu não tinha a intenção de adicioná-lo ao PR. Estava apenas testando um novo código, então não tenho problema em que ele seja removido.

trevineju commented 3 weeks ago

O outro raspador (Parnaíba) foi um descuido; na verdade, eu não tinha a intenção de adicioná-lo ao PR. Estava apenas testando um novo código, então não tenho problema em que ele seja removido.

Sem problemas. Se você não usar a sua main para fazer contribuições, esse tipo de descuido tende a não acontecer. Fica a dica pras próximas ;)

antonishuamani commented 3 weeks ago

muito obrigado pelos conselhos. likes

okfn-brasil / querido-diario