[fix] br_ans_beneficiarios - Githubissues

basedosdados / pipelines

🔀 Orquestrador de fluxos de captura, ingestão e tratamento de dados da BD

https://basedosdados.github.io/pipelines/

33 stars 13 forks source link

[fix] br_ans_beneficiarios #827

Closed folhesgabriel closed 2 months ago

folhesgabriel commented 2 months ago

Problema

Run crashada
O log sugere que a data de atualização dos arquivos extraida do site era um valor nulo.

Diagnóstico

Por algum motivo trocaram a URL da pasta no FTP que contém os dados da tabela
A URL passou de https://dadosabertos.ans.gov.br/FTP/PDA/informacoes_consolidadas_de_beneficiarios/ para https://dadosabertos.ans.gov.br/FTP/PDA/informacoes_consolidadas_de_beneficiarios-024/
Adicionaram 024 no final rs

Conserto

Atualizei a URL e adicionei um check para quebrar o flow se a response não for 200