ResidenciaTICBrisa / 04_PipelineTCU

É um Pipeline de dados desenvolvido para o TCU, com o objetivo de reunir dados referente à transição energética do Brasil até 2050. Usamos Azure e Scripts de extração em Python.
https://residenciaticbrisa.github.io/04_PipelineTCU/
MIT License
1 stars 1 forks source link

[Pipeline] Orquestrar carga de dados no SQL server DataFactory #146

Closed EduardoGurgel closed 9 months ago

EduardoGurgel commented 10 months ago

Descrição

O Azure Data Factory é um serviço que permite orquestrar, agendar e criar fluxos de pipelines. Esta issue tem o objetivo de criar uma versão inicial que será padronizada para todas as outras tabelas.

Tarefas

Critérios de Aceitação

EduardoGurgel commented 9 months ago

Tutorial publicado:

https://www.youtube.com/watch?v=FR7DYRSQ9SM

EduardoGurgel commented 9 months ago

Concluído!

EduardoGurgel commented 8 months ago

Pipeline de ingestão de dados

image