prefeitura-rio / pipelines

Gerenciador de fluxos de captura e subida de dados no datalake da Prefeitura do Rio de Janeiro | https://docs.dados.rio/guia-desenvolvedores/pipelines/

https://prefect.dados.rio/

Other

33 stars 0 forks source link

Captura e tratamento de dados de operadores #578

Closed pixuimpou closed 6 months ago

pixuimpou commented 7 months ago

ChangeLog

Captura dados de operadores Jaé
Captura dados de operadores STU
Criação de lógica para salvar dados em buckets privados

mergify[bot] commented 7 months ago

@pixuimpou esse pull request tem conflitos 😩

mergify[bot] commented 7 months ago

@pixuimpou esse pull request tem conflitos 😩

mergify[bot] commented 6 months ago

@pixuimpou esse pull request tem conflitos 😩

github-actions[bot] commented 6 months ago

Análise da árvore de código

Os seguintes arquivos são afetados diretamente por alterações realizadas nesse pull request:

pipelines/rj_smtr/constants.py
pipelines/rj_smtr/br_rj_riodejaneiro_onibus_gps/flows.py
pipelines/rj_smtr/init.py
pipelines/rj_smtr/br_rj_riodejaneiro_diretorios/init.py
pipelines/rj_smtr/utils.py
pipelines/rj_smtr/br_rj_riodejaneiro_stu/init.py
pipelines/rj_smtr/br_rj_riodejaneiro_bilhetagem/flows.py
pipelines/rj_smtr/br_rj_riodejaneiro_rdo/utils.py
pipelines/rj_smtr/br_rj_riodejaneiro_rdo/flows.py
pipelines/rj_smtr/materialize_to_datario/flows.py
pipelines/rj_smtr/br_rj_riodejaneiro_gtfs/flows.py
pipelines/rj_smtr/br_rj_riodejaneiro_stpl_gps/tasks.py
pipelines/rj_smtr/br_rj_riodejaneiro_brt_gps/tasks.py
pipelines/rj_smtr/schedules.py
pipelines/rj_smtr/br_rj_riodejaneiro_rdo/tasks.py
pipelines/rj_smtr/veiculo/flows.py
pipelines/rj_smtr/flows.py
pipelines/rj_smtr/br_rj_riodejaneiro_brt_gps/flows.py
pipelines/rj_smtr/br_rj_riodejaneiro_stu/flows.py
pipelines/rj_smtr/br_rj_riodejaneiro_sigmob/tasks.py
pipelines/rj_smtr/br_rj_riodejaneiro_onibus_gps/tasks.py
pipelines/rj_smtr/registros_ocr_rir/tasks.py
pipelines/rj_smtr/registros_ocr_rir/flows.py
pipelines/rj_smtr/projeto_subsidio_sppo/flows.py
pipelines/rj_smtr/br_rj_riodejaneiro_sigmob/flows.py
pipelines/rj_smtr/br_rj_riodejaneiro_stpl_gps/flows.py
pipelines/rj_smtr/br_rj_riodejaneiro_recurso/flows.py
pipelines/rj_smtr/br_rj_riodejaneiro_stu/tasks.py
pipelines/rj_smtr/tasks.py
pipelines/rj_smtr/veiculo/tasks.py
pipelines/rj_smtr/br_rj_riodejaneiro_diretorios/flows.py

Os seguintes usuários devem ser avisados sobre a alteração:

@eng-rodrigocunha
@hellcassius
@pixuimpou
@lingsv
@fernandascovino
@borismarinho