ecolabdata / ckanext-ecospheres

GNU Affero General Public License v3.0
3 stars 0 forks source link

Obsolescence des flux de moissonnage #8

Open Thesauruv opened 1 year ago

Thesauruv commented 1 year ago

Il a été constaté chez data.gouv que des métadonnées exposaient des URL de flux associés à des services inactifs. Il s'agit de mettre en place un moyen de contrôle de ce type d'obsolescence dans Écosphères.

Pas prioritaire pour aujourd'hui, à discuter en équipe.

Copie du mail de Thomas Gratier du 28.11.2022 à ce sujet :

Bonjour,

En complément des demandes précédentes, suite à la mise en place du moissonnage côté demo.data.gouv.fr, nous avons constaté que certains flux étaient obsolètes du fait de l'arrêt de http://mapserveur.application.developpement-durable.gouv.fr/

Exemple sur https://demo.data.gouv.fr/fr/datasets/service-de-telechargement-wfs-des-donnees-de-plu-de-salles-33498/ où l'URL WFS proposée est http://mapserveur.application.developpement-durable.gouv.fr/map/mapserv?map=/opt/data/carto/cartelie/prod/DDTM_33/33498_PLU_20111107.www.map&service=WFS&request=GetCapabilities

Quand on l'ouvre, on a un message "Le service est définitivement fermé". Nous avons vérifié, le retour http est 200 alors qu'il aurait fallu une page avec un code http 404 en retour plutôt pour déterminer facilement la défaillance/fin du service.

A priori, il faudrait comment gérer ces type de cas de votre côté pour éviter de proposer des flux associés aux métadonnées qui sont non fonctionnels lorsqu'on les moissonne. Cela pose aussi le problème de savoir, si on doit moissonner des métadonnées du Geocatalogue pour lesquelles il n'y a pas/plus de flux/données ouvertes associées.

Bien cordialement,

Thomas Gratier
---
Spécialiste "Géo" Etalab