search

139bercy / format-commande-publique

Documentation du format de référence des données essentielles des marchés publics français
The Unlicense
14 stars 11 forks source link

Processus de moissonnage #12

Closed ColinMaudry closed 6 years ago

ColinMaudry commented 7 years ago

Que se passe t-il une fois la liste des URL des fichiers marchés récupérée ?

JSON :

  1. Vérification que les marchés n'ont pas déjà été moissonnés
  2. Validation avec le schéma correspondant
  3. Traitements :
    • Ajout du SIRET de l'acheteur à l'identifiant du marché pour le rendre unique au niveau national
    • Remplacer "Etat" par "État" dans marche-défense-securite.identificationAcheteur
    • Retirer les espaces dans *.id
  4. Ajout des données dans la BDD

XML :

  1. Vérification que les marchés n'ont pas déjà été moissonnés
  2. Validation avec le schéma correspondant
  3. Conversion XML > JSON
  4. Ajout du SIRET de l'acheteur à l'identifiant du marché pour le rendre unique au niveau national
  5. Ajout des données à la BDD
ColinMaudry commented 7 years ago

Autre sujet : Comment, au niveau des catalogues DCAT, optimiser le moissonnage des données par data.gouv.fr, de façon à ce qu'un même marché ne soit pas moissonné de multiples fois inutilement ?