Discussion :

[RidaKilan]

>> Bonjour merci

J’ai une question concernant la recherche sur Internet :
Bon en gros : je cherche toutes les pages html d’un site web puis dans chaque page html une expression bien définie, si l’expr et trouver je sauvegarde cette expression dans un fichier text. AVEC PERL

-pour l’expression je peut le faire, mais la recherche de toute les page html sur le web je ne sait pas comment faire.
-(j’ai bricoler déjà un petit scripte en « bash »et je fait ça pour une seul page seulement et après l’avoir télécharger, je veut évité le téléchargement de la page)

Je vais être plus claire comme si je cherche en locale (pc) tout les fichier avec l’extension html (root: find / -name *.html) puis pour chaque ligne trouver (fichier) je cherche une expression,
MAIS JE VEUX FAIR CA POUR UN SITE WEB ET AVEC « PERL »

Merci pour toute réponse vous m'aidé beaucoup.

[Jedai]

Euh, ton message est très... coloré ! Peut-être un peu trop même (le gris est pratiquement illisible chez moi par exemple), tiens-t'en au noir sauf circonstances exceptionnelle (ou sur la Taverne).

Sinon ce que tu demandes est plus ou moins possible, comprends bien que le protocole HTTP ne permet pas de faire des listings de répertoires (et cela ne dépend pas du langage de programmation), il ne sera donc pas possible d'employer la même méthode que si tu étais sur le serveur (sauf si tu as accès au serveur FTP du site, mais ce n'est pas ta question).
Par contre ce qu'il est possible de faire, c'est de faire un "spider", autrement dit un script qui va suivre les liens à partir d'une page source, et dans ton cas se limiter aux liens qui mène sur le même site. Il faudra tout de même lui fournir une page de départ (la page d'accueil du site par exemple), mais ensuite il se débrouillera tout seul.
Tu trouveras des spiders tout fait sur le CPAN, par exemple WWW::CheckSite::Spider, plutôt facile à modifier pour quelqu'un qui sait ce qu'il fait (autrement dit qui a déjà fait de la POO en Perl, tu peux regarder notre FAQ pour quelques exemples simples).

--
Jedaï