Suivre le nombre de "PDC" de la consolidation IRVE dans le temps

etalab / transport-site

Rendre disponible, valoriser et améliorer les données transports

https://transport.data.gouv.fr

198 stars 30 forks source link

Suivre le nombre de "PDC" de la consolidation IRVE dans le temps #3544

Closed thbar closed 8 months ago

thbar commented 1 year ago

Je ne crois pas qu'on dispose de grand chose pour ça et c'est dommage.

En travaillant sur #3543, j'ai remarqué que cette nuit on avait perdu (il me semble, sauf erreur) 2000 points de charge.

Je sais qu'il y a des logs etc, mais je pense qu'avoir un petit suivi du volume a minima permettrait de mieux suivre l'évolution.

Ca pourrait être fait grâce à une historisation tous les jours, par exemple, et analyse a posteriori.

À réfléchir mais je pense qu'avoir un peu de pilotage là dessus serait nécessaire.

AntoineAugusti commented 1 year ago

L'autre cas d'usage que je vois c'est d'avoir un chiffre dynamique/fiable sur le message de la catégorie charging-stations https://transport.data.gouv.fr/datasets?type=charging-stations

AntoineAugusti commented 1 year ago

Ça peut potentiellement se stocker en tant qu'entier dans stats_history via StatsHandler, peut-être pour tout ce qui se trouve dans geo_data. Un nombre de lignes simple.

thbar commented 1 year ago

Yes c'est une bonne idée de stocker ça a minima.

@AntoineAugusti que penses-tu d'historiser par ailleurs (pas forcément pour ce suivi) le jeu dans le temps, genre une fois par jour ? Je me demande si ça ne va pas nous aider à faire des analyses plus poussées, une fois qu'on aura constaté la chute ; je me pose aussi la question par rapport au travail sur le concentrateur IRVE qui va débuter, ça pourrait être bien utile de pouvoir dire "à telle date, tel fournisseur a modifié sa façon de codifier et ça pose problème".

AntoineAugusti commented 1 year ago

La base nationale statique IRVE est déjà historisée étant donné que c'est une ressource comme une autre.

select *
from resource_history rh
where rh.resource_id = 79624

donne 401 lignes actuellement

thbar commented 1 year ago

Merci @AntoineAugusti - j'ai pu grapher le résultat avec ta requête et un coup de Livebook (je partage ça à côté), ça donne actuellement:

C'est quand même grandement instable...

À partir du Livebook que j'ai créé il serait facile de lister jour par jour les "gros producteurs" qui disparaissent, par exemple.

À rediscuter j'en reste là pour le moment.

thbar commented 8 months ago

On va discuter de tout ça avec Qualicharge (Nicolas Forget et @jmaupetit), en l'état je clôture.