Test case 3: Range check av CORDEX-, CMIP- og referansedata

ketilt commented 4 months ago

Relaterte brukerhistorier:

Deler som ikke er fullt relevante for denne test casen er streket gjennom.

As a Norwegian RCM model data analyst, I want the system to ~ingest EURO-CORDEX data and observation-based data from multiple sources and~ find models that do not perform well over Norway to ensure the reliability in the modelling chain.

Kilder: \ https://docs.google.com/document/d/12joGOmBR4xNjGW45rXxaNbIMv8jDtqAZL0duI7WlwGk/edit?usp=sharing

Inputfiler

Bruk følgende inputfiler for EURO-CORDEX:

/lustre/storeC-ext/users/kin2100/MET/cordex/output/EUR-11/*/*/*/*/*/*/day/*/v*/

Bruk følgende inputfiler for CMIP:

/lustre/storeC-ext/users/klimakverna/CMIP/CMIP6.monthly/ssp???

Bruk følgende inputfiler for referansedata:

/lustre/storeC-ext/users/kin2100/MET/ReferenceData/seNorge2018
/lustre/storeC-ext/users/kin2100/MET/ReferenceData/KlinoGrid
/lustre/storeC-ext/users/kin2100/MET/ReferenceData/HySN2018v2005ERA5

Metode

Denne kvalitetssjekken gis en egen regel i Snakefile, som kan kalles via snakemake på kommandolinje. Sjekken kan kjøres på ei enkelt fil eller på alle filer i ei definert mappe.

Range check sjekker om dataene er innenfor forventede grenser. Dette vil også kunne indikere om gitt enhet stemmer med verdiene.

Output

Dersom fila passerer metadatasjekken, så flyttes den over til ei ny mappe (for datasett som er er klare til bruk for biasjustering og nedskalering).

ketilt commented 4 months ago

@doblerone Her trengs filplassering for CMIP, CORDEX og refdata for KiN

doblerone commented 3 months ago

@doblerone Her trengs filplassering for CMIP, CORDEX og refdata for KiN

done.

KSSno / Klimakverna-pilot-KAPy