MPMG-DCC-UFMG / C01

Coleta de Dados Públicos
GNU General Public License v3.0
18 stars 9 forks source link

Coleta de Quadro Comparativo de Preços no site Fiscalizando com TCE #710

Closed iagoadvaz closed 3 years ago

iagoadvaz commented 3 years ago

Comportamento Esperado

Requisição da extração de arquivos contendo dados referentes aos Quadro Comparativo de Preços do site Fiscalizando com TCE.

Obs.: Por se tratarem de muitos municípios, seria interessante que os dados coletados fossem disponibilizados de forma gradual. Se possível por município.

Comportamento Atual

Não se aplica.

Localização

Não possui nenhuma coleta atualmente.

Para fins de organização separar dados a nível de município

(e.g. /datalake/ufmg/crawler/webcrawlerc01/quadro_comparativo_precos/Ipatinga).

Detalhes da fonte

https://fiscalizandocomtce.tce.mg.gov.br/

São de nosso interesse os Quadros Comparativos de Preços para todas as licitações de todos os municípios e todos os anos disponíveis. Será melhor descrito abaixo.

Obs.: priorizar a coleta para os municípios Arantina, Coqueiral, Cristais, Ijaci, Itamarati de Minas, Olaria, Passa Vinte, Pirapetinga, Ribeirão Vermelho e São Bento Abade.

Detalhes da trilha

Os dados aqui solicitados são de interesse da trilha M03, sob coordenação de Iago Domingues (iagoadvaz@gmail.com).

Screenshots e Links

Os screenshots a seguir mostram como acessar as informações de interesse da página:

  1. Ao acessar a página pela primeira vez, é preciso aguardar alguns segundos para que seja feita uma validação de segurança. Não é preciso realizar nenhuma ação. 01

  2. Ao inserir o nome do município é preciso que o faça com letra maiúscula e acentuação.

  3. Selecionar o ano no dropdown. A coleta deve ser realizada para todos os anos disponíveis.

  4. Clicar na lupa para seguir para a próxima página. 02

  5. Clicar em "Compras Públicas" 03

  6. Clicar em "Processo de Aquisição" 04

  7. Selecionar "Licitação". Costuma ser o default da página.

  8. Selecionar cada um dos Números de Processo disponíveis. 05

  9. Clicar em "Quadro Comparativo" 06

  10. Este processo pode demorar um pouco. Caso a coleta não seja realizada devido ao tempo de espera, favor gerar log informando: Nome do município, Ano, Número do Processo. 07

  11. Clicar no menu superior para exportação dos dados

  12. Selecionar CSV como extensão do arquivo. 08

iagoadvaz commented 3 years ago

Dados foram encontrados no banco de dados de MPMG