Comparaison entre une liste de plusieurs millions de fichiers et une table sous SQL Server

Bonjour à tous,

mon problème est le suivant.
Je dispose d'une liste de fichiers pour chacun desquels je devais vérifier l'existence dans une table SQL Server.
Jusque la, pour chaque fichier, je faisais une requête, si bien que pour 1 million de fichiers, je dois faire... 1 millions de requête.
Quelle serait selon vous la méthode la plus performante (surtout en gain de temps) pour comparer une aussi grosse liste à une table?

Au plaisir de vous lire

Jennifer

Faire un 1 million de requête, ne pose aucun soucis
Une astuce fait un Prepare d'une requète paramètrée, ensuite, il suffira de faire le Bind des paramètres qui change comme le nom de fichier
Ta requête ira plus vite car elle n'est pas reconstruire à chaque fois, le SGBD peut la passer en cache directement, conserver le Plan d'exécution, ...

Ne surtout pas faire un truc genre Query.SQL.Text := 'SELECT 1 FROM TableFichier WHERE NomFichier = ' + QuotedStr(Fichiers[i]); Open IsEmpty Close
tu dois le faire en deux temps
donc Query.SQL.Text := 'SELECT 1 FROM TableFichier WHERE NomFichier = :pFichier'; puis le Prepare
puis Query.ParamByName('pFichier').AsString := Fichiers[i]; puis le Open IsEmpty Close


Sinon une autre méthode, tu créés une table temporaire
Tu injectes ton fichier via des INSERT INTO par lot de 1000 (voir insertions en masse BULK ...)

Ensuite, tu fais une jointure
- INNER JOIN, tous les fichiers existants
- LEFT JOIN t2 ON t2.cle = t1.cle ... WHERE te2.cle IS NULL, tu auras tous les fichiers qui n'existent pas (une syntaxe souvent plus rapide qu'un NOT EXISTS)