ResidenciaTICBrisa / 04_PipelineTCU

É um Pipeline de dados desenvolvido para o TCU, com o objetivo de reunir dados referente à transição energética do Brasil até 2050. Usamos Azure e Scripts de extração em Python.
https://residenciaticbrisa.github.io/04_PipelineTCU/
MIT License
1 stars 1 forks source link

Adição do script de extração dos dados do Anuário Estatístico de Energia Elétrica #188

Closed Victor-oss closed 1 year ago

Victor-oss commented 1 year ago

Criação da classe excelScrapper responsável por baixar o script, da classe anuarioHandler responsável por transformar o arquivo e salvar as tabelas retiradas dele e também foi adicionado o arquivo atualiza_tabela.yml responsável por automatizar a extração, limpeza e salvamento das tabelas como os arquivos certos usando o Git Actions (o Actions vai fazer parte da arquitetura do projeto para limpar e estruturar os dados para inserir no banco).