Calcul des codes postaux en utilisant Datanova et les contours postaux

[jbouhadoun]

Cette pull request améliore la précision des calculs des codes postaux en utilisant des sources de données supplémentaires et fiables, tout en conservant une méthode de secours en cas d'absence de données dans les nouvelles sources.

• Utilisation des fichiers datanova.csv et contours_postaux.geojson situés dans db-migration/data.
• Calcul des codes postaux en croisant les données de ces fichiers.
• Si les codes postaux ne sont pas présents dans les deux fichiers, utilisation de l'ancienne méthode.

Remarque : Les fichiers datanova.csv et contours_postaux.geojson ne sont pas inclus dans le dépôt Git.

Exemple sur Dunkerque

• Bleu : Le code postal
• Rouge : Le code postal calculé avant cette PR avec l'ancienne fonction.
• Vert : Le code postal calculé avec la nouvelle fonction
  
  

[antoineludeau]

• Pour les fichiers datanova.csv et contours_postaux.geojson, il faudrait les mettre sur le S3 et les lire en mémoire en stream pendant la migration (solution idéale). Ou alors dans un premier temps, les ajouter au script de download-dataset pour les télécharger de quelque part (solution non-idéale) avant le lancement des fichiers de migration.

Exemple pour la solution avec lecture en stream sur S3:

const params = {
      Bucket: process.env.S3_BUCKET_NAME,
      Key: 'path/to/your/datafile.json', 
    };

const s3Stream = s3.getObject(params).createReadStream();

• Pour les vues, on pourrait utiliser les vues déjà existantes sur adresse (address_view) et toponyme commun (common_toponym_view) et ainsi ne pas refaire de query pour récupérer l'info des codes postaux.