Validation NeTEx

[ptitfred]

Intégrer le validateur Chouette Valid d'enRoute.

Documentation d'API.

Sujets voisins :

• https://github.com/etalab/transport-profil-netex-fr/issues/56
• https://github.com/etalab/transport-site/pull/4026
• https://github.com/etalab/transport-site/issues/3992

A faire

• [x] Client d'API. Fait dans https://github.com/etalab/transport-site/pull/4106.
• [x] Validateur bas niveau. Fait dans https://github.com/etalab/transport-site/pull/4140.
• [x] Intégrer dans le OnDemandLive (en cours). Fait dans https://github.com/etalab/transport-site/pull/4158.
• [ ] Intégrer dans la validation en arrière-plan. En cours dans https://github.com/etalab/transport-site/pull/4204.

(Liste non exhaustive.)

Pistes pour shipper

• [x] Validation juste du XSD (avec include_schema). Fait dans https://github.com/etalab/transport-site/pull/4165.

Questions ouvertes

• [ ] Comment interpréter les codes de messages ? Réponse d'Alban : pour l'instant le mieux est de se fier au code source du validateur
• [ ] Liste des valeurs possibles pour l'attribut "code" ? Réponse d'Alban : idem point précédent
• [ ] Possible d'avoir dans des champs spécifiques la valeur observée et la valeur attendue (pour affichage) ?
• [x] Certains messages n'ont pas l'attribut "code" . Réponse d'Alban : bug qui sera corrigé lors du sprint 116 (vendredi 13/09/2024)
• [ ] Quand le fichier est pas un xml/zip valide le validateur reste coincé en pending. Edit: j'ai un exemple de fichier XML qui coince également mais qui passe une fois archivé en zip. Aucun fichier simple ne passe ? Réponse d'Alban : On a vu ça dans notre supervision. On a fait des changements pour rattraper l'erreur (qui vient du validateur de la XSD).
• [ ] Nos plus gros fichiers semblent coincer (voire notamment b047ed5f-0820-403e-867d-142bf009b824 pour un fichier zip de 432Mo). Un timeout de notre côté sera implémenté. (Le plus gros fichier est un XML non compressé.) Réponse d'Alban : On va changer la configuration en production pour augmenter les resources maximums disponibles. On va tester en interne ce fichier en particulier.
• [ ] N'accepter que les archives zip.

Quelques stats

As of 2024-09-19

+---------------------------------+--------+
|              code               | count  |
+---------------------------------+--------+
| frame-calendrier-resources      | 101428 |
| frame-arret-resources           |  86397 |
| version-any                     |  84895 |
| frame-horaire-resources         |  83949 |
| unknown-reference               |  77777 |
| frame-ligne-resources           |  11528 |
| frame-reseau-resources          |  10346 |
| xsd-1877                        |   1772 |
| latitude-mandatory              |    503 |
| longitude-mandatory             |    503 |
| uic-operating-period            |    450 |
| valid-day-bits                  |    450 |
| composite-frame-ligne-mandatory |     92 |
| xsd-1845                        |     62 |
| xsd-1840                        |     19 |
| xsd-1871                        |     11 |
+---------------------------------+--------+

Conversations front

• "Premiers retours après 2 semaines"
• "Mise à disposition API Validateur NeTEx"

Sujets connexes :

• A propos de validation de NeTEx convertis automatiquement.

[ptitfred]

OnDemand disponible en production.