Création d'un outil diagnostic IRVE qualitatif (comparaison entre plusieurs ressources)

stephane-pignal commented 3 months ago

Cas d'usage : le consolidé IRVE du 16/05/2024 comporte 20K lignes (pdc) en moins que celui du 13/05/2024 La target est donc de déterminer via une comparatif entre 2 ressources

libreoffice/excel tableaux dynamiques permet de croiser les données pour faire un diagnostic
explote.data.gouv permet une affichage clair sans possibilité de filter les données

D'une part via libreoffice/excel, cela est fastidieux et plante régulièrement (fichier 100K lignes)

D'autre part, le PAN et Qualicharge vont à court terme "durcir" le qualitatif des ressources. De nombreuses anomalies notamment dues une confusion d'interprétation sur certains champs (cf. @thbar https://github.com/etalab/schema-irve/issues/60) et le probable rajouts de nouveaux pour répondre aux besoins de Qualicharge.

Il semble pertinent de s'outiller d'un outil de diag qualitatif IRVE dont les specs restent à définir

stephane-pignal commented 3 months ago

@vdegove est-ce que metabase pourrait aussi faire ce job ?

thbar commented 3 months ago

@stephane-pignal j'ai quasi fini, je te tiens au courant. Metabase pourrait aider aussi effectivement, avec le bémol qu'on capitalise moins sur le code mis en place.

thbar commented 3 months ago

(on pourra le faire dans Metabase également pour que tu compares, ça te sera utile de toute façon vu ce que tu fais !)

thbar commented 3 months ago

Voir #3941 où j'utilise https://livebook.dev (installable librement) pour faire cette analyse

thbar commented 2 months ago

@stephane-pignal est-ce qu'on ferme ce ticket ? (quitte à réouvrir si besoin plus précis après bien sûr)

stephane-pignal commented 2 months ago

Un peu tôt pour fermer, je propose mardi prochain le 11/6. Ca te va ?

etalab / schema-irve

Création d'un outil diagnostic IRVE qualitatif (comparaison entre plusieurs ressources) #61