mission-apprentissage / referentiel

GNU Affero General Public License v3.0
3 stars 1 forks source link

Organisme qui devrait sortir du Référentiel #120

Closed FlavieSauvebois closed 1 year ago

FlavieSauvebois commented 1 year ago

Le SIRET 538 258 070 00019 devrait sortir du référentiel car il n’est plus collecté côté CARIF. Quelle est la règle en place pour ce genre de cas dans le référentiel ? Dans quel délai le SIRET sort du référentiel ?

gasilber commented 1 year ago

Cet organisme:

https://referentiel.apprentissage.onisep.fr/organismes/53825807000019

est toujours présent dans l'un des fichiers SIFA-RAMSESE:

Liste_Etablissements_2021-06-04_SIFA_RAMSESE.csv:"0180865T";"53825807000019";"PR";"18033";"Centre de formations supérieures par apprentissage Hubert Curien";"CTR FORM SUP APPRENTISSAGE";"CCI";"25 rue Louis Mallet";;;"18000";"BOURGES";"018";"18";"Orléans-Tours"

Il apparaît également dans les fichiers CSV de la dares / deca:

grep 53825807000019 liste_etab_SIA_Dares_v3.csv 
0180865T;53825807000019;CFSA HUBERT CURIEN;BOURGES CEDEX;18022;0;1;1;1;1;0
0411085G;53825807000019;ASS DES APPRENTIS ECOLE HUBERT CURIEN;BOURGES;18000;0;1;1;1;1;0

Par contre il ne semble effectivement plus être dans le catalogue de formation ni des établissements. Mais l'organisme semble avoir été vu "actif" lors de l'import de ce matin (voir date_collecte ci-dessous): peut-être que la présence dans l'un des deux CSV mentionnés plus haut suffit à le garder actif?

Pour info, le contenu des données de cet organisme:

> coll = db.organismes
referentiel.organismes
> coll.findOne({"siret":"53825807000019"})
{
    "_id" : ObjectId("61bcd45092e138e87efe9698"),
    "siret" : "53825807000019",
    "_meta" : {
        "anomalies" : [ ],
        "date_import" : ISODate("2021-12-17T18:17:52.570Z"),
        "date_dernier_import" : ISODate("2023-04-06T04:02:39.160Z"),
        "date_collecte" : ISODate("2023-04-06T04:29:16.094Z")
    },
    "certifications" : [ ],
    "contacts" : [
        {
            "email" : "contact@ecole-curien.fr",
            "confirmé" : false,
            "sources" : [
                "acce"
            ],
            "date_collecte" : ISODate("2023-04-06T04:29:32.288Z")
        }
    ],
    "diplomes" : [ ],
    "lieux_de_formation" : [ ],
    "referentiels" : [
        "sifa-ramsese",
        "catalogue-etablissements"
    ],
    "relations" : [ ],
    "reseaux" : [ ],
    "uai_potentiels" : [
        {
            "uai" : "0180865T",
            "sources" : [
                "depp",
                "catalogue-etablissements",
                "sifa-ramsese",
                "deca",
                "tableau-de-bord"
            ],
            "date_collecte" : ISODate("2023-04-06T04:04:28.738Z")
        },
        {
            "uai" : "0411085G",
            "sources" : [
                "tableau-de-bord",
                "deca"
            ],
            "date_collecte" : ISODate("2023-04-06T04:05:11.070Z")
        }
    ],
    "etat_administratif" : "actif",
    "forme_juridique" : {
        "code" : "9220",
        "label" : "Association déclarée"
    },
    "raison_sociale" : "ASS DES APPRENTIS ECOLE HUBERT CURIEN",
    "siege_social" : true,
    "adresse" : {
        "academie" : {
            "code" : "18",
            "nom" : "Orléans-Tours"
        },
        "code_insee" : "18033",
        "code_postal" : "18000",
        "departement" : {
            "code" : "18",
            "nom" : "Cher"
        },
        "geojson" : {
            "geometry" : {
                "coordinates" : [
                    2.386806,
                    47.078835
                ],
                "type" : "Point"
            },
            "properties" : {
                "score" : 0.9792745454545454,
                "source" : "geo-adresse-api"
            },
            "type" : "Feature"
        },
        "label" : "25 Rue Louis Mallet 18000 Bourges",
        "localite" : "Bourges",
        "region" : {
            "code" : "24",
            "nom" : "Centre-Val de Loire"
        }
    },
    "nature" : "formateur",
    "uai" : "0180865T"
}

Si je regarde build.js ligne 34:

  await collectAll(["deca", "catalogue-etablissements", "sifa-ramsese", "refea"]);

on a une collecte de toutes ces sources "à égalité", positionnant la date de collecte, donc si cet organisme est dans deca et sifa-ramsese, il continuera a être collecté et ne sortira donc pas du référentiel.

FlavieSauvebois commented 1 year ago

Concernant le fichier SIFA-RAMSESE, le fchier csv de juin 2021 est le dernier exploité pour cette source. Après nous avons, avec la DEPP et le MNA, décidé de ne plus exploiter de fichier issu de SIFA car la base ACCE prends le relais. Potentiellement nous pourrions donc peut-être supprimer ce fichier des sources actuelles. Mais il est possible que certains OF présents dans le référentiel ne remontent que par cette source. Il faudrait donc faire un test et voir combien d'OF disparaissent du référentiel si on supprime ce fichier des données sources ? Et parmi ces OF combien ont déjà une UAI validée ?

Pour le fichier DECA: on ne peut pas s'en passer car on y récupère des UAI potentielles.

Peux-tu donc également supprimer cet OF "à la main" du référentiel, car l'OF en question me harcèle par mail pour ne plus être visible avec ce SIRET (il est présent avec un autre SIRET dans le Référentiel).

gasilber commented 1 year ago
gasilber@cervinia rofa % grep 53825807000019 *.csv
DEPP-CFASousConvRegionale_17122020_1.csv:"0180865T";"600";"06";"ministère de l'éducation nationale";;;"PR";"2";"UAI mère";18033;"Bourges";"CTR FORM SUP APPRENTISSAGE";"CCI";"53825807000019";01/09/1992;;;"25 rue Louis Mallet";;"18000";"BOURGES"
Liste_Etablissements_2021-06-04_SIFA_RAMSESE.csv:"0180865T";"53825807000019";"PR";"18033";"Centre de formations supérieures par apprentissage Hubert Curien";"CTR FORM SUP APPRENTISSAGE";"CCI";"25 rue Louis Mallet";;;"18000";"BOURGES";"018";"18";"Orléans-Tours"
liste_etab_SIA_Dares.csv:"0411085G";"53825807000019";"ASS DES APPRENTIS ECOLE HUBERT CURIEN";"BOURGES";"18000";0;1;1;1
liste_etab_SIA_Dares_v2.csv:"0180865T";"53825807000019";"CFSA HUBERT CURIEN";"BOURGES CEDEX";"18022";0;1;1;1;1
liste_etab_SIA_Dares_v2.csv:"0411085G";"53825807000019";"ASS DES APPRENTIS ECOLE HUBERT CURIEN";"BOURGES";"18000";0;1;1;1;1
liste_etab_SIA_Dares_v3.csv:0180865T;53825807000019;CFSA HUBERT CURIEN;BOURGES CEDEX;18022;0;1;1;1;1;0
liste_etab_SIA_Dares_v3.csv:0411085G;53825807000019;ASS DES APPRENTIS ECOLE HUBERT CURIEN;BOURGES;18000;0;1;1;1;1;0

Suppression manuelle dans les fichiers ci-dessus.

Réimport manuel dans le conteneur OVH des fichiers suivants:

DEPP-CFASousConvRegionale_17122020_1.csv 
Liste_Etablissements_2021-06-04_SIFA_RAMSESE.csv 
liste_etab_SIA_Dares.csv 
liste_etab_SIA_Dares_v2.csv 
liste_etab_SIA_Dares_v3.csv
gasilber commented 1 year ago

Suppression manuelle en base de données:

mongosh
use referentiel
coll = db.organismes
o = coll.deleteOne({"siret":"53825807000019"})

Organisme supprimé. Voir https://referentiel.apprentissage.onisep.fr/organismes?text=53825807000019