Discussion :

[jeremy13]

Bonjour,

Je vous explique mon problème :
J'ai une table contenant plusieurs dizaine de milliers de lignes qui est composé comme ceci :

NUMERO
======
num_1
num_2
num_3
num_4

Pour l'instant rien de bien compliqué...puis j'ai un ensemble de nombre, par exemple

num_1
num_2
num_4

J'aimerai avoir une requete qui me retourne les numéros qui ne sont pas dans ma liste, par exemple pour ici : num_3...

J'ai essayé de généré un fichier sql pour chaque numéro de ma liste :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

select distinct 'ok' from pgw_customer where EXTERNAL_ID NOT IN('324322')

mais c'est beaucoup beaucoup trop lent!!

Merci d'avance pour vos réponses!

[soazig]

Bonjour,
J'ai nommé la table avec plusieurs milliers de ligne grosse_table et la table contenant la liste des numéro liste_numero.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
SELECT DISTINCT numero FROM grosse_table G
left outer join liste_numero L on L.numero=G.numero
where L.numero is null;

En revanche cela sera lent si tu n'as pas d'index sur numero dans grosse_table.
A+
Soazig

[jeremy13]

Bonjour,
J'ai nommé la table avec plusieurs milliers de ligne grosse_table et la table contenant la liste des numéro liste_numero.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
SELECT DISTINCT numero FROM grosse_table G
left outer join liste_numero L on L.numero=G.numero
where L.numero is null;

En revanche cela sera lent si tu n'as pas d'index sur numero dans grosse_table.
A+
Soazig

Ah..excuse moi, j'ai oublié de préciser que ma deuxième liste n'était pas une table mais une variable, chaque numéro est une variable Shell...Par exemple si on reprends ma première requête, ça donnerait :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

SELECT DISTINCT 'ok' FROM pgw_customer WHERE EXTERNAL_ID NOT IN('${varaible_ksh}')

Merci

[Cybher]

tu ne peux pas mettre toute ta liste dans un seul 'NOT IN' ?

[jeremy13]

c'est une liste de 150 000 numéros en principe...et ça pourrait monter à 600 000...
c'est un peu beaucoup, nan ?

[soazig]

Bonjour,
A mon avis la solution avec une table éventuellement temporaire contenant la liste des numéros est la plus simple.
Quand je dis temporaire, rien ne t'empêche de créer une vrai table au début du traitement, de la remplir par boucle dans ton shell et de la dropper après le select que je t'ai proposé.
En créant éventuellement le temps du traitement un index sur numero dans grosse table.

PS : A part si j'ai mal compris avec ta requête exemple tu ne peux avoir que les numéros de ta liste de numéros qui sont dans grosse_table, (tu récupère OK s'il ne sont pas dans grosse table). Or je pensais que tu voulais les numéros de grosse tables qui ne sont pas dans ta liste, et c'est ce que fait ma requête.

a+
Soazig

[abdallahi]

salut

tu peux tester

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
SELECT DISTINCT numero FROM grosse_table G
WHERE G.numero NOT IN SELECT(  liste_numero.numero)

d'ou Groose table est ta table origonale
et list_numero une table contient la liste de numero dont tu veux verfier

[soazig]

Rebonjour,
Pour répondre à abdallahi, il me semble avoir lu que pour les performances il vaut mieux faire un left join avec clé is null plutôt que d'utiliser un not in.
A+
Soazig

[SQLpro]

Il n'y a pas de règle stricte en matière de performances. Seul compte la vérification du coût d'exécution ou du coût estimé de la requête. Donc OUTER JOIN ... IS NULL ou NOT IN ou NOT EXISTS, tout est valable, mais il faut mesurer la chose.

Bien évidemment la solution avec une table temporaire indexée, et la table primaire elle aussi indexées sur cette colonne est la solution qui sera la plus rapide puisque le moteur pourra faire un MERGE ou un NESTED LOOP pour résoudre la jointure.

A +