Skip to content

Latest commit

 

History

History
113 lines (86 loc) · 2.79 KB

ReadMe.md

File metadata and controls

113 lines (86 loc) · 2.79 KB
Raw

Benchmark

BAN93

Volumétrie : 230.046 entités (38,99 Mo)

Requête Champ Sans Index Avec Index
0 id 16,277 ms 0,505 ms
1 id 65,989 ms 63,981 ms
2 id 79,285 ms 78,409 ms
3 id 118,167 ms 116,099 ms
10 nom_voie 53,061 ms 0,661 ms
11 nom_voie 59,211 ms 0,497 ms

Index

id

CREATE INDEX ban_id
   ON ban (id ASC NULLS LAST);
--Time : 8,5 s

nom_voie

CREATE INDEX ban_voie
   ON ban (nom_voie ASC NULLS LAST);
--Time : 4,9 s

Requêtes

0 : SELECT * FROM ban WHERE id = 'ADRNIVX_0000000268114257';
1 : SELECT * FROM ban WHERE id LIKE 'ADRNIVX_0000000268114257';
2 : SELECT * FROM ban WHERE id LIKE '%ADRNIVX_0000000268114257%';
3 : SELECT * FROM ban WHERE id LIKE '%0000000268114257';

10 : SELECT * FROM ban WHERE nom_voie = 'rue charles de gaulle';
11 : SELECT * FROM ban WHERE nom_voie LIKE 'rue charles de gaulle';

SIRENE

Volumétrie : 10.563.603 entités (8.514,09 Mo)

Requête Champ Sans Index Avec Index
20 depet 138.674,392 ms 109.476,719 ms
30 libvoie 140.194,666 ms 75.194,083 ms
31 libvoie 150.663,147 ms 566,153 ms

Index

id

CREATE INDEX siren_depet
   ON siren (depet ASC NULLS LAST);
--Time : 200.913,973 ms

libvoie

CREATE INDEX siren_voie
   ON siren (libvoie ASC NULLS LAST);
--Time : 300.584,191 ms

Requêtes

20 : SELECT * FROM siren WHERE depet = '93';

30 : SELECT * FROM siren WHERE libvoie = 'CHARLES DE GAULLE';
31 : SELECT * FROM siren WHERE libvoie LIKE 'CHARLES DE GAULLE';

Distance de Levenshtein

La fonction de géocodage s'effectue en utilisant la fonction levenshtein de l'extention fuzzystrmatch de PostgreSQL. Voici le comparatif entre la requête utilisée (levenshtein) et une optimisation (levenshtein_less_equal).

Quantité levenshtein levenshtein_less_equal
2683 270.646 ms 247.734 ms
298 30.100 ms 27.300 ms 
UPDATE siren93 s
SET banid = (SELECT b.id
	FROM ban b
	WHERE b.code_insee = s.code_insee
	AND levenshtein(LOWER(CONCAT(s.numvoie, ' ', s.typvoie, ' ', s.libvoie)), LOWER(CONCAT(b.numero, b.nom_voie))) < 8
	ORDER BY levenshtein(LOWER(CONCAT(s.numvoie, ' ', s.typvoie, ' ', s.libvoie)), LOWER(CONCAT(b.numero, b.nom_voie)))
	LIMIT 1)
WHERE s.siren LIKE '820%'; --Permet de ne retourner qu'environ 3.000 sociétés
UPDATE siren93 s
SET banid = (SELECT b.id
	FROM ban b
	WHERE b.code_insee = s.code_insee
	AND levenshtein_less_equal(LOWER(CONCAT(s.numvoie, ' ', s.typvoie, ' ', s.libvoie)), LOWER(CONCAT(b.numero, b.nom_voie)), 8) < 8
	ORDER BY levenshtein(LOWER(CONCAT(s.numvoie, ' ', s.typvoie, ' ', s.libvoie)), LOWER(CONCAT(b.numero, b.nom_voie)))
	LIMIT 1)
WHERE s.siren LIKE '820%'; --Permet de ne retourner qu'environ 3.000 sociétés