Discussion :

[yule]

Bonjour,
Je souhaite supprimer quelques pronoms de mes textes, initialement je pensais supprimer tout ce qui avait moins de trois caractères, mais pour des termes comme vin, etc, loi... ça va les bloquer,
alors que je ne le souhaite pas.

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
<?php
$textepastrie ="Le bilan climatique des fruits et légumes transportés par avion ou issus de serres chauffées est fortement négatif, le vin etc...";
?>

Comment supprimer de mon $textepastrie ceci (le, des, et, par, ou, de, est, le) pour arriver au résultat ci-dessous...

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
<?php
$texttrie = "bilan climatique fruits légumes transportés avion issus serres chauffées fortement négatif, vin etc...";
?>

Faut-il faire pour chaque pronom

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
4
5
6
<?php
$texttrie = str_replace("le","",$textepastrie);
$texttrie = str_replace("des","",$textepastrie);
//etc....
// str_replace est-il plus approprié que preg_replace ??
?>

Ou il y a plus simple ?

Merci d'avance
Yule

[grunk]

str_replace peut prendre un tableau en entrée :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

str_replace(array(' le ',' de ',' les ',' des '),' ',$string);

Et oui str_replace est beaucoup plus performant que preg_replace.

Tant que les remplacements sont simples (ne nécessitent pas de regex) il faut donc le privilégier.

[Willy_k]

Le problème ici avec str_replace est que par exemple mode deviendra mo, son "de" aura sauté aussi, donc à moins d'être sûr de pas avoir ce genre de mot, preg_replace est à utiliser

[grunk]

C'est pour ça qu'il faut rechercher les pronoms en les entourant d'espaces .

Après la solution n'est pas parfaite , puisque par exemple les pronoms de début de phrases pourraient être omis.

Ceci étant dit si le but est de faire un moteur de recherche (ca y ressemble) , il n'est pas nécessaire de se séparer des pronoms et autres mot sans valeur

[Willy_k]

Je n'avais pas vu les espaces dans la première version de ton code, peut être une édition ?
Avec str_replace (ou avec str_ireplace pour les histoires de casse) et avec la phrase donnée, le Le ne "sautera" pas comme tu l'as souligné dans ton message .. Sinon oui utiliser str_replace tant que possible mais me demande encore si c'est approprié dans son cas...

[CosmoKnacki]

Le problème avec ce genre de tâches, c'est que ta liste de "mots non-clef" risque de grossir assez vite. Ce qui veut dire que si tu utilises preg_replace qui certes ne parcourra ta chaîne qu'une seule fois, tu vas aboutir à une pattern géante contenant un monstre du genre \b(?:des|de|les|le|la|... 250 mots plus tard ...|mais|quand)\b qui sera pas très efficace étant donné le nombre d'alternatives à tester; et si tu utilises str_replace (même en lui passant un tableau) ta chaîne sera parcourue intégralement pour chaque mot (soit plus de 250 fois dans mon exemple).

Une autre voie possible est de confronter chaque mot du texte avec la liste. Deux manières de faire:

• soit tu découpes ta chaîne en tableau avec preg_split puis tu utilises array_diff ou array_udiff pour exclure les mots de la liste.
• soit tu utilises preg_replace_callback en important la liste dans la fonction de rappel avec use ($list).

Je ne peux pas être plus précis pour le moment dans la mesure où je ne sais pas si tu souhaites conserver ou non la ponctuation et la casse. Quel est le but final de tout ça?

[yule]

Merci à vous tous !

Effectivement, c'est pour un moteur de recherche...

Si dans ma recherche en full text il ne trouve rien, je switch ma recherche en like et les pronoms faussent pas mal de choses...

je vais opter certainement pour une exclusion des termes de moins de 3 lettres avant de switcher en like...

Bonne soirée

Yule

[grunk]

Si ta recherche fulltext ne donne rien , il y'a peut de chance qu'un like donne des résultats pertinants. Sans compter que niveau performance ça peut être pas terrible.

En principe dans mysql tu peux lui spécifier stopwords à utiliser :
https://dev.mysql.com/doc/refman/5.5...ne-tuning.html

En 5.7 tu peux passer par une table spécifique : https://dev.mysql.com/doc/refman/5.7...stopwords.html