atviriduomenys / spinta

Spinta is a framework to describe, extract and publish data (a DEP Framework).
MIT License
10 stars 4 forks source link

Nepavyksta atsisiųsti csv failo #488

Closed Skirtum closed 11 months ago

Skirtum commented 1 year ago

Laba diena,

Bandau atsisiųsti šią laikmeną: https://atviriduomenys.vrk.lt/datasets/gov/vrk/ReitingoEilutes csv formatu. Pastebėjau, kad bandant atsisiųsti duomenis kiekviena iteracija atsisiunčia skirtingas kiekis duomenų.

Bandau susitikrinti su VRK.lt (pvz. kiek dalyvavo rinkėjų "rink_turo_pavad" = "2023 m. kovo 5 d. savivaldybių tarybų ir merų rinkimai (I turas)") ir matau, kad duomenų mažiau nei skelbiama vrk.lt svetainėje. Šiuose rinkimuose anot vrk dalyvavo: 1125658 (https://www.vrk.lt/savivaldybiu-tarybu-ir-meru-2023/rezultatai?srcUrl=/rinkimai/1304/1/1922/rezultatai/lt/rezultataiSavTarNariaiMeraiSavivaldybese.html) rinkėjų. Tačiau atsisiuntęs failą ir išsifiltravęs pagal tą laukelį randu tik 596472 eilutes.

Mano turimas atsisiųsto failo dydis: 683MB (maksimalus kiekis eilučių, kuriuos pavyko atsisiųsti).

Mėginau su FireFox'u ir su Chrome.

sirex commented 1 year ago

@aurjas čia matyt reikia susisiekti su VRK. Bet, klaida gali būti susijusi su:

Dar galima būtu siustis gabalais, bet irgi yra kita klaida:

sirex commented 11 months ago

Išspręsta padidinus timeout serveryje.