Discussion :

[a.elidrissi]

Bonjour,
je suis entrain de développer un simple moteur de recherche des formations en php et MySQL. le principe c'est de récupérer mes données depuis une grande base de données et de les stoker dans la base propre à mon moteur de recherche qui contient ces tables (keywords, training,keywords_has_training), la table keywors contient un idkeywords et un seul mot clé et la table training représente des formations et la table keywords_has_training est une table associative qui associé à chaque formations de mots clés.
Mon problème c'est que lors de la recherche mon moteur m'affiche les même résultats plusieurs fois...
Pourquoi? de se qui me semble c'est que à chaque fois ma requete retourne les meme informations mais avec un mot clé différent.
est ce qu'il y a une autre manière de représenter les mots clés (par exemple un ensemble séparer par des points virgules ...etc)
merci d'avance pour votre aide

[CinePhil]

est ce qu'il y a une autre manière de représenter les mots clés (par exemple un ensemble séparer par des points virgules ...etc)

Surtout pas !
Ton modèle de données est bon.

Mon problème c'est que lors de la recherche mon moteur m'affiche les même résultats plusieurs fois...

Il manque peut-être un DISTINCT dans ta requête ?

Comme tu ne la montres pas, difficile de la deviner !

[a.elidrissi]

Merci pour ta réponse,
j'ai déjà essayé de mettre distinct mes le résultat et le même à chaque fois !!
voilà ma requête :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
SELECT DISTINCT `training`.*, `kht`.*, `k`.* 
FROM `training`  
INNER JOIN `keywords_has_training` AS `kht` ON training.idtraining = kht.training_id  
INNER JOIN `keywords` AS `k` ON k.idkeywords = kht.keywords_id WHERE (public= 1 ) 
ORDER BY `recommendation` DESC

cette requête est générer automatiquement parce que je travail avec zend framework

voilà la requête de base en objet :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
$training_table = new Application_Model_DbTable_Training();
		$select = $training_table->select(Zend_Db_Table::SELECT_WITH_FROM_PART);
		$select->setIntegrityCheck(false)
				->distinct('t.idtraining')
				->join(array('kht'=>'keywords_has_training'), 'training.idtraining = kht.training_id')
				->join(array('k'=>'keywords'), 'k.idkeywords = kht.keywords_id')
		 		->where("public= ? ",1)
		 		->order("recommendation DESC");

merci

[CinePhil]

DISTINCT opère sur toutes les colonnes du SELECT.

Comme tu t'es lancé dans la guerre des étoiles, tu as récupéré plein de débris en multiples exemplaires !

C'est comme si tu n'avais pas fait de DISTINCT puisque toutes les lignes sont différentes.

Quant à Zend_Framework, tu peux très bien rédiger tes requêtes en SQL pur et les lui faire exécuter. Pas besoin de passer par cette syntaxe inutilement compliquée qui masque les vrais requêtes générées, pas toujours de manière optimisées.

[a.elidrissi]

normalement on a le droit de mettre un seul distinct dans une close select sinon y 'aura des erreurs de syntaxe !

j'ai essayé d'exécuter cette requête

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
SELECT DISTINCT(t.idtraining),DISTINCT(t.label), DISTINCT(t.description)
FROM `training` AS t  INNER JOIN `keywords_has_training` AS `kht` ON t.idtraining = kht.training_id  
INNER JOIN `keywords` AS `k` ON k.idkeywords = kht.keywords_id WHERE (public= 1 ) 
ORDER BY `recommendation` DESC

mais j'ai cette erreur:

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
#1064 - You have an error in your SQL syntax; 
check the manual that corresponds to your MySQL server version for the right syntax to use 
near 'DISTINCT(t.label), DISTINCT(t.description) FROM `training` AS t
INNER JOIN `key' at line 1

je sais pas si y a un moyen de faire des distincts sur toutes les colonnes depuis zend?

[CinePhil]

Encore une fois, DISTINCT opère sur toutes les colonnes de la ligne donc, effectivement, il ne peut y avoir qu'un seul DISTINCT dans un SELECT (sauf dans plusieurs COUNT(DISTINCT...) mais c'est une autre utilisation).

Si tu veux faire un DISTINCT sur seulement certaines colonnes et pas sur toutes celles que tu veux récupérer, il faut faire une sous-requête et spécifier les conditions qui feront choisir les données à récupérer.

Et encore une fois, écrit ta requête en SQL natif, teste là puis fais là exécuter directement pas Zend_Db. C'est beaucoup plus simple que leur syntaxe d'ORM à la con !

[Maljuna Kris]

Saluton,
Je viens mettre mon grain de sel car je subodore (peut-être à tort) que, s'agissant d'une base MySQL, l'ami a.elidrissi devrait aller jeter un coup d'œil à la fonction GROUP_CONCAT, à utiliser dans le cadre d'une requête avec une clause GROUP BY.

[CinePhil]

J'ai répondu un peu vite tout à l'heure sans regarder la requête avec plusieurs DISTINCTs mais elle peut plus simplement s'écrire ainsi :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
SELECT DISTINCT t.idtraining, t.label, t.description
FROM training AS t  
INNER JOIN keywords_has_training AS kht ON t.idtraining = kht.training_id  
	INNER JOIN keywords AS k ON k.idkeywords = kht.keywords_id 
WHERE public = 1
ORDER BY recommendation DESC

Au passage, prends l'habitude d'indenter ton code et de toujours mettre les alias à toutes les colonnes quand tu alias les tables. Ici, in ne sait pas d'où viennent les colonnes "recommandation" et "public". Supprime aussi ces saloperies d'apostrophes inversées inutiles.

[a.elidrissi]

Merci pour vos réponses

même si que je met des distinct cela ne me donne pas le résultat attendus, je pense que c'est au niveau de mon zend search lucene où je dois modifier quelque chose pour avoir les résultats sans redondance.
ma requête m'affiche :

idtraining | label | descreption |recommendation | keywords
1 EVALUATION DES RESOURCES evaluation test 9 resource
1 EVALUATION DES RESOURCES evaluation test 9 projet
1 EVALUATION DES RESOURCES evaluation test 9 resources
1 EVALUATION DES RESOURCES evaluation test 9 informatique
1 EVALUATION DES RESOURCES evaluation test 9 test
1 EVALUATION DES RESOURCES evaluation test 9 évaluation
0 GESTION DES PROJETS projet informatique 8 évaluation
0 GESTION DES PROJETS projet informatique 8 projet
0 GESTION DES PROJETS projet informatique 8 gestion
0 GESTION DES PROJETS projet informatique 8 informatique
2 EVALUATION DE BUDGET budget 7 évaluation
2 EVALUATION DE BUDGET budget 7 budget
3 GESTION DE MATERIEL materiel test 6 materiel

ces résultats je les intègre directement dans mon index de cette façon :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
				 $doc = new Zend_Search_Lucene_Document();
				 $doc->addField(Zend_Search_Lucene_Field::Keyword('keywords', $res["keywords"]));
				 $doc->addField(Zend_Search_Lucene_Field::Keyword('label', $res["label"]));
				 $doc->addField(Zend_Search_Lucene_Field::UnIndexed('idtraining', $res["idtraining"]));
 
				 $doc->addField(Zend_Search_Lucene_Field::Text('description', $res["description"]));
				 $doc->addField(Zend_Search_Lucene_Field::Text('recommendation', $res["recommendation"]));
				 $index->addDocument($doc);

mon moteur de recherche cherche dans tout les champs d'index et à chaque fois quel trouve le mot clé recherché il affiche le résultat, par exemple lorsque je cherche le mot test qui se trouve dans les trois champs description et keywords il va m'afficher 2 fois le même résultat ...!!!

Pour le group concat le résultat de la requete rassemble touts mes mots clés dans le champs keywords !! cela rend les choses plus compliqués ... normalement ce qui sera pratique c'est de rassembler touts les mots clés associé à une formation par exemple.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
7
8
9
10
SELECT t.idtraining , t.label , t.description , t.recommendation , GROUP_CONCAT( k.keywords )  AS keywords
FROM training
INNER JOIN trainingnAS t
INNER JOIN keywords_has_training AS kht ON training.idtraining = kht.training_id
INNER JOIN keywords AS k ON k.idkeywords = kht.keywords_id
WHERE (
t.public =1
)
GROUP BY t.idtraining
ORDER BY t.recommendation DESC

[5h4rk]

Bonsoir,
Je vais juste dire une chose très importante.

N'utilise surtout pas Zend_Search_Lucene, car tu vas à ta perte, intégre plutôt SolR comme moteur de recherche, tu pourras indexer simplement des requêtes SQL.

[a.elidrissi]

Merci pour vos réponses j'ai résolu le problème la clause GROUP CONCAT était très utile pour moi