Automatiser la récupération de données à partir d'un service externe

[IGNF-Xavier]

Implémenté dans le cadre du GPU, identifié pour certains cas d'usages, il faudrait challenger :

• [ ] la configuration d'un dépôt externe pour rapatriement de données et mise-à-jour de données et de géoservices
• [ ] traiter 2 cas différents :
  • [ ] données et géoservices remplacés par plus récent
  • [ ] données et géoservices précédents conservés et tagués/renommées comme historiques et nouvelles données et geoservices considérées comme plus récents

Types de service externe source : URL (à préciser), FTP (à préciser), API (à préciser)

[slafayIGN]

Nous avons mis en place un service interne de moissonnage de données pour récupérer des données, pour la plupart sur data.gouv.fr.

Il s'agit des sources de données :

• Bureaux de postes : https://datanova.laposte.fr/explore/dataset/laposte_poincont2/download/?format=shp&timezone=Europe/Berlin&lang=fr
• Equipements sportifs : https://www.data.gouv.fr/fr/datasets/r/c3ab5533-d93c-486a-879a-a30659029f73 , https://www.data.gouv.fr/fr/datasets/r/2ae45b77-d718-4425-bf25-5f4940d637c8
• DILA : https://www.data.gouv.fr/fr/datasets/r/73302880-e4df-4d4c-8676-1a61bb997f3d
• Etablissements sanitaires et sociaux : https://www.data.gouv.fr/fr/datasets/r/98f3161f-79ff-4f16-8f6a-6d571a80fea2
• Annuaire des archives publiques : https://data.culture.gouv.fr/explore/dataset/annuaire-des-services-darchives-publiques-en-france/download/?format=geojson&timezone=Europe/Berlin&lang=fr

Pour chacune de ces sources il a fallu réaliser un développement à façon. Pas forcément très lourd, mais ça ne passe pas à l'échelle si à chaque fois que quelqu'un ajoute une URL il faut modifier du code.

Ce qui a été fait pour le Géoportail de l'Urbanisme a aussi été fait à façon, pour ce besoin métier précis.

Il faut absolument préciser quels formats de sources on doit être capable de moissonner.