Discussion :

[alsab]

Bonjour,

Je suis à la recherche de conseils pour le choix d'un SGBD.

J'ai une table avec 3 colonnes INT: id/user/link

Et je veux faire une recherche de ce type

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

SELECT * FROM table WHERE user IN (list1) AND link IN (list2)

list1 et list2 peuvent contenir jusqu'à 10000 INT.

Mon problème c'est que lorsque je fais une recherche avec 10000 INT dans chaque liste et une dizaine de millions de ligne dans la table, la recherche prend plusieurs dizaine de seconde.

Pour le moment j'ai fais des tests avec Mysql, Mongodb, Sphinxsearch, Solr.

Solr et sphinx sont les plus rapides avec environ entre 10 et 15 sec. Mais c'est pour un site internet donc il me faudrait quelques de beaucoup beaucoup plus rapide.

Donc si vous avez une meilleure solution je suis preneur.

Merci

[SQLpro]

Si vous voulez de réelles performances, il faut avant tout mettre les moyens sur la RAM de votre serveur et avoir des SGBDR qui soient performant naturellement sur de gros volumes comme Oracle ou SQL Server.
Autre chose important, vous irez sans doute plus vite en chargeant vos liste 1 et 2 dans des tables relationnelles et en les indexant puis en faisant la requête suivante :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
SELECT MesColonne --évitez le "étoile"
FROM   MaTable AS T
       INNER JOIN T_LISTE_1 AS L1 ON T.user = L1.user
       INNER JOIN T_LISTE_2 AS L2 ON T.user = L2.user

Globalement le temps de chargement, d'indexation et de la requête devrait tomber à 1 ou 2 secondes...

A +

[alsab]

Merci pour le conseil.

Je vais tester ça.