basedosdados / pipelines

🔀 Orquestrador de fluxos de captura, ingestão e tratamento de dados da BD
https://basedosdados.github.io/pipelines/
33 stars 13 forks source link

[fix] br_cvm_fi #850

Closed folhesgabriel closed 1 month ago

folhesgabriel commented 1 month ago

Este PR refatora a lógica de checagem de novas atualizações na fonte original para as pipelines do conjunto br_cvm_fi

  1. Inseri a task check_if_outdate para realizar a tarefa de verificação;
  2. Inseri a task generate_links_to_download, que gera uma lista com links que serão baixados;
  3. Modifiquei os valores default do Parâmetro dbt_alias, de False para True;
github-actions[bot] commented 1 month ago

Coverage

Tests Skipped Failures Errors Time
2 0 :zzz: 0 :x: 2 :fire: 1.442s :stopwatch: