ResidenciaTICBrisa / 04_PipelineTCU

É um Pipeline de dados desenvolvido para o TCU, com o objetivo de reunir dados referente à transição energética do Brasil até 2050. Usamos Azure e Scripts de extração em Python.
https://residenciaticbrisa.github.io/04_PipelineTCU/
MIT License
1 stars 1 forks source link

[Pipeline] Orquestrar scripts de extração #145

Open EduardoGurgel opened 10 months ago

EduardoGurgel commented 10 months ago

Descrição

O Azure Data Factory é um serviço que permite orquestrar, agendar e criar fluxos de pipelines. Esta issue tem o objetivo de criar uma versão inicial que será padronizada para todas as outras tabelas.

Tarefas

Critérios de Aceitação

Stain19 commented 9 months ago

@EduardoGurgel e @Victor-oss a base de dados é o PNE 2050 ou PNE 2015?

Victor-oss commented 9 months ago

@EduardoGurgel e @Victor-oss a base de dados é o PNE 2050 ou PNE 2015?

PNE 2050

Victor-oss commented 9 months ago

O Git Actions vai fazer parte da arquitetura do projeto para limpar e estruturar os dados em tabelas para inserirmos no banco