search

HS-Datadesk / koronavirus-avoindata

HS julkaisee Suomen koronavirustartunnat avoimena datana.
https://www.hs.fi/aihe/koronavirus/
MIT License
100 stars 27 forks source link

Coronadata palauttaa Internal Server Error #85

Closed Karvaporsas closed 3 years ago

Karvaporsas commented 3 years ago

Rajapinta

https://w3qa5ydb4l.execute-api.eu-west-1.amazonaws.com/prod/finnishCoronaData/v2

palauttaa virhettä kutsuttaessa.

quarian commented 3 years ago

Jaahas, näyttää että ollaan taas Lambdan kantokyvyn rajoilla. Katotaas.

quarian commented 3 years ago

Voin tod näk paikata väliaikaisesti muuttamalla noiden id:iden luomistapaa (jotta datan määrä vähenee), mutta tämä endpoint alkaa olla lambda-tiensä päässä. Hajoaakohan ihmisten systeemit jos muutan noiden tartuntojen id:itä?

Taustalla siis se että lambdalla joka ton datan parsii ja jakaa on 6 megan raja (AWS:n rajoitus) siinä mitä se pystyy läpi puskemaan ja sen rajan yli on nyt tässä menty.

Karvaporsas commented 3 years ago

Todennäköisesti hajoaa.

Mitä jos rajapinta tarjoaisi sairaanhoitopiireittäin datan finnishCoronaData/v2/HUS jne

Tai ottaisi parametrina montako päivää taaksepäin palautetaan dataa?

quarian commented 3 years ago

Mahdollista. Ei toki auta suoraan niitä jotka on jo integroitunu tohon rajapintaan.

Periaatteessa olisi kaikkien paras käyttää noita paremmin muotoiltuja rajapintoja:

Tartunnat: https://w3qa5ydb4l.execute-api.eu-west-1.amazonaws.com/prod/processedThlData Sairaala + kuolemat: https://w3qa5ydb4l.execute-api.eu-west-1.amazonaws.com/prod/finnishCoronaHospitalData

Katotaan mitä tälle tehdään, olen nyt kiinni muissa töissä mutta palaan asiaan.

quarian commented 3 years ago

@Karvaporsas katoppas josko toimisi. Siirsin sisällön paketoinnin lambdan sisään (sen sijaan että se gzipattaisiin API GW:ssä).

Karvaporsas commented 3 years ago

Lukeminen onnistui. Kiitoksia. :)