Discussion :

[JamesP]

Bonjour,

Je souhaite effectuer un programme de traitement en bash.
Je souhaiterais faire un système de boucle qui serait capable de gèrer le nombre de processus fils lancés.

Concrètement, je boucle sur ma liste d'actions à faire, et tant que la liste n'est pas vide je continue, et si un processus fils se termine (avec code de retour), je lance l'action suivante.

Je pensait utiliser des fork et waitpid (trucs du genre) mais je n'y arrive pas !

Je précise que je tiens vraiment à le faire en BASH (ou autre langage shell) et pas en compilé ou semi-compilé.

Est-ce possible ? Merci à vous !

[Sve@r]

Je pensait utiliser des fork et waitpid (trucs du genre) mais je n'y arrive pas !...
Je précise que je tiens vraiment à le faire en BASH (ou autre langage shell) et pas en compilé ou semi-compilé.

Les primitives fork() et wait() sont des primitives C. Donc si tu veux les utiliser, faudra faire du compilé.

Sinon en bash tu peux lancer ta commande en arrière plan (commande &)

Concrètement, je boucle sur ma liste d'actions à faire, et tant que la liste n'est pas vide je continue, et si un processus fils se termine (avec code de retour), je lance l'action suivante.

Si tes processus sont indépendants, pourquoi attendre qu'ils se terminent ???

[matafan]

Tu fais une boucle avec un wait. Le wait bloque jusqu'a ce qu'un fils termine. Après le wait tu regarde combien de fils tournent encore, et tu remplaces les process manquants.

Evidemment c'est approximatif car des processes peuvent mourir entre le moment où tu les comptes et le moment où tu les lances. Mais ça marche en gros.

[JamesP]

Ok je peux faire ça ...

Mais mon but est de faire une gestion de tache ...

Exemple :
Tous les soirs, à 01h00 j'envoie et recoit 20Mo de données sur 20 serveurs.
Plutot que tout se fasse en même temps, je souhaiterais que mon prog gère lui même la charge et controle qu'il y en ai 3 MAX en même temps ! Et aussi bein gèrer le code de retour de chaque fils pour savoir si il c'est fini bien ou non.

C'est une version simplifiée, mon but est de faire un serveur de backup perso.

Je n'ai pas réussi à trouver d'ordonanceur tout fait, genre on lui balance des tâches à faire (commandes) et il gère les fils tout seul ... Donc je veux m'en faire un mini très simple !

[lavazavio]

Tu as regardé du coté de backupPC à tout hasard ?

[JamesP]

Oui j'ai une solution backuppc qui tourne, mais je n'arrive pas à l'utiliser UNIQUEMENT comme ordonnanceur avec des commandes personnalisées.

Mon but est d'avoir différents "types" de backup, par exemple :
- fichier : simple rsync
- base : dump puis rsync puis import
- ........

Une série d'actions différent selon les types d'actions quoi.
Et dans ce but, il ne me manque QUE le système de gestion des processus ...

[matafan]

En fait une solution simple (à tester) pourrrait être d'installer un handler pour SIGCHLD (trap handler SIGCHLD), et dans ton handler tu lances un nouveau processus. Bon faut aussi prévoir un truc pour quand tu veux t'arrêter.

[JamesP]

Avec un peu de retard le projet est reporté, merci en tous cas je vais tester ça dès que je le reprends en main ^^