Discussion :

[elhadiDZ]

Bonjour

Je suis en train de faire un Crawler web qui prends tous les infos nécessaires d'un site et les rajoute à la base de données, en même temps il extrait tous les liens dans le site et il les rajoute a une table « file d’attente » !

Ce que je veux faire c’est de récupérer les liens dans la table « file d’attente » un par un et pour chaque lien j’appelle une méthode crawl en même temps pour un maximum ( par exemple ) de 10, Threads !

Des idées avec QThread ?

Ce que je veux appeler plusieurs fois en même temps :

Code :

Sélectionner tout - Visualiser dans une fenêtre à part

1
2
3
 
Crawler c;
c.crawl_page(url);

Merci d’avance, have a good day

[Gojir4]

Bonjour,

Je n'ai jamais réalisé ce genre de choses, je ne pourrai donc malheureusement pas te fournir un code tout prêt ou un exemple. Par contre il me semble que QSemaphore et QThreadPool devrait t'aider pour ton problème.

Voir aussi Semaphores Example