Suppression des OF dont le SIRET est fermé + source SIFA

[FlavieSauvebois]

A discuter lors de notre prochain stand-up

[FlavieSauvebois]

Je précise mon besoin :

• il faudrait identifier les OF dont le SIRET est fermé et qui ont pour source SIFA uniquement soit SIFA + Catalogue

[FlavieSauvebois]

430 OF avec SIRET fermés et issus du fichier SIFA 2021 uniquement – à supprimer ?

[gasilber]

Il faut également supprimer ces organismes des fichiers CSV SIFA

[FlavieSauvebois]

Bonjour Laurent,

Je ne sais pas pourquoi mais je ne vois pas ton message dans le ticket github.

Le Siret fermé correspond à l’état administratif = fermé dans le Référentiel.

[ldaverio]

Bonjour Flavie, c'est parce que j'ai trouvé la réponse entre temps, et supprimé ma question.

A ce stade, je sais supprimer les 432 OF de la base, il faut juste que je trouve le moyen le plus simple de les supprimer des sources aussi.

[FlavieSauvebois]

Oui il y a bien 432 OF concernés à ce jour par la suppression.

[ldaverio]

OF ayant un SIRET fermé et apparaissant uniquement dans SIFA 2021 :

use referentiel
org = db.organismes
org.countDocuments({"etat_administratif": "fermé", "referentiels": ["sifa-ramsese"]})

-> 434 OF trouvés

Liste des Identifiants des OF correspondants

org.find({"etat_administratif": "fermé", "referentiels": ["sifa-ramsese"]}, {_id: 1}).map(doc => doc._id.valueOf())

• {_id: 1} renvoie des documents avec le seul le champ _id (exemple : { "_id" : ObjectId("61bcd44a92e138e87efe82e1") })

• .map(doc => doc._id.valueOf()) remplace les documents par la valeur texte des ObjectIds

exportation (JSON ou CSV) des identifiants

Depuis le container :

mongo referentiel --eval 'db.organismes.find({"etat_administratif": "fermé", "referentiels": ["sifa-ramsese"]}, {_id: 1}).map(doc => doc._id.valueOf())' 

Depuis l'extérieur :

docker exec -it referentiel_mongodb bash -c 'mongo referentiel --quiet --eval "db.organismes.find({\"etat_administratif\": \"fermé\", \"referentiels\": [\"sifa-ramsese\"]}, {_id: 1}).map(doc => doc._id.valueOf())"' > of_fermes.json

Suppression des OF de MongoDb

org.deleteMany({"etat_administratif": "fermé", "referentiels": ["sifa-ramsese"]})

Suppression des OF de la source

Récupérer le fichier JSON généré précédemment. Supprimer les entrées correspondantes du fichier (TODO).

[ldaverio]

Le fichier d'export JSON généré hier ne contenait pas les infos nécessaire pour supprimer les 434 SIRET correspondants dans les fichiers sources RAMSESE. Je pensais qu'ils réapparaitraient ce matin, et que je pourrais recommencer la procédure après correction, mais ce n'est pas le cas.

Je pense qu'on peut observer la situation pendant quelques jours, et aviser.

[FlavieSauvebois]

Bonjour Laurent,
Je te confirme que les 434 OF sont bien réapparus ce matin dans le Référentiel

[ldaverio]

Ah, ok. Je ne les vois plus dans MongoDB. Il y a 647 SIRET fermés, mais 0 ayant 'sifa-ramsese' comme source unique. Je regarde de plus près.

[ldaverio]

Bonjour Laurent, Je te confirme que les 434 OF sont bien réapparus ce matin dans le Référentiel

Où/comment les vois-tu ? MongoDB continue à me répondre qu'il n'y en a plus :

> org.countDocuments({"etat_administratif": "fermé", "referentiels": ["sifa-ramsese"]})
0