Atualizar conjuntos age7 com tabelas 2023

[gabrielbdornas]

Necessário incluir na documentação novos recursos 2023 como ft_despesa_2023.

Conforme conferência realizada com @silvianafaria, atualização de 31/01/2023 não trouxe nenhum dado do PdT de 2023.

[gabrielbdornas]

@silviana, incluo abaixo os passos seguidos para a demanda. Acredito ser interessante incluir o link deste issue no card das rotinas que você criará.

Atualização dos arquivos age7.yaml, datapackage.yaml, bem como criação de schemas para os recursos schemas/dm_empenho_desp_2023.yaml, schemas/dm_empenho_resto_2023.yaml, schemas/ft_despesa_2023.yaml, schemas/ft_diarias_2023.yaml, schemas/ft_restos_pagar_2023.yaml.

Antes de acessar a máquina virtural age7 para executar os comandos listados abaixo, foi necessário também solicitar Márcia do NUC a criação da tabela ft_despesa_2023 no banco de dados.

Acesso à máquina virtual age7 e execução dos comandos git status para verificar se havia algo não commitado (havia alguns arquivos de log, para os quais rodei git restore .), git pull origin main para buscar as modificações realizadas na documentação, make container-bash para acessar o docker container aonde o processo é executado e por fim ./all.sh para colocar o processo para rodar (que demora mais de 4 horas para ser finalizado).

Após finalização do processo rodado com o comando ./all.sh é necessário rodar os comandos dpckan resource <resource_name> create (um comando por tabela em cada conjunto) para que as novas tabelas apareçam nos respectivos conjuntos do Portal de Dados Abertos[^1].

Exemplos:

• despesa:

  cd build_datasets/despesa
  dpckan resource dm_empenho_desp_2023 create
  dpckan resource ft_despesa_2023 create

• diarias:

  cd build_datasets/diarias
  dpckan resource dm_empenho_desp_2023 create
  dpckan resource ft_diarias_2023 create

• restos_pagar:

  cd build_datasets/restos_pagar
  dpckan resource dm_empenho_resto_2023 create
  dpckan resource ft_restos_pagar_2023 create

[^1]: Utilizei comandos como ls build_datasets/despesa/data | grep _2023 para descobrir com mais facilidade em quais conjuntos os comandos deveriam ser executados.

[gabrielbdornas]

Tabela incluída no banco, conforme pode ser demonstrado no print abaixo:

[silvianafaria]

@AntonioMarcel @gabrielbdornas ao começar a criar as tabelas para 2024 me deparei com a seguinte situação:

• Ao tentar rodar o comando 'dpckan resource create' foi exibido uma msg de erro:

• 

[AntonioMarcel]

Ordem dos comandos

• ssh user@id: acessar máquina virtual
• make container-bash: acessar docker
• ./all.sh: roda o processo e demora mais de 4 horas
• dpckan resource create <table>

[gabrielbdornas]

@AntonioMarcel @gabrielbdornas ao começar a criar as tabelas para 2024 me deparei com a seguinte situação:

• Ao tentar rodar o comando 'dpckan resource create' foi exibido uma msg de erro:

@silvianafaria, conforme conversado com @AntonioMarcel, sugiro incluir este comentário no novo issue #197 e fechar este.