Criar captura e tratamento de GPS da API Zirix

prefeitura-rio / pipelines

Gerenciador de fluxos de captura e subida de dados no datalake da Prefeitura do Rio de Janeiro | https://docs.dados.rio/guia-desenvolvedores/pipelines/

https://prefect.dados.rio/

Other

32 stars 0 forks source link

Criar captura e tratamento de GPS da API Zirix #658

Closed pixuimpou closed 2 months ago

pixuimpou commented 2 months ago

Dataset: br_rj_riodejaneiro_onibus_gps_zirix
Todos os pipelines em produção, sem acesso público
Tabelas do dataset veículos, passar para o mesmo dataset (br_rj_riodejaneiro_onibus_gps_zirix)
Tabelas: mesmos nomes do gps_sppo atual

Etapas:

[x] Criar pipelines de captura
[x] Criar queries até gps_sppo
[x] Criar pipelines de materialização

pixuimpou commented 2 months ago

@eng-rodrigocunha vai revisar o PR hoje