datagouv / hydra

Async metadata crawler for data.gouv.fr
3 stars 0 forks source link

[hydra] Ajouter un crontab sur les commandes purge-checks et purge-csv-tables #173

Open maudetes opened 1 month ago

maudetes commented 1 month ago

Les commandes pouvant être un peu lourdes, l'idée pourrait être de les programmer pour les faire tourner une fois par semaine pour commencer par exemple.

Le but général étant de limiter l'accroissement du nombre de rows dans checks et le nombre de tables dans la db hydra-csv.

bolinocroustibat commented 1 month ago

Currently on review on infra repo.

bolinocroustibat commented 1 month ago

The new crons will need latest hydra 2.0.1 deployed on prod, which includes the --quiet arguments to the CLIs, used by the crons. Don't merge the infra MR to main before hydra > 2.0.1 is deployed on prod.