régulation de lancement de processus simultanés

Recherche :

Mot : Pseudo : Filtrer
Bas de page
Auteur	Sujet : régulation de lancement de processus simultanés

grosbin

OR die;

Bonjour à tous je cherche à lancer une vingtaine de processus php "simultanés" en background via un script bash. Chacun alimentés en paramètre avec une url pour "simuler" un crawler

J'aimerais à chaque lancement incrémenter une variable globale et à chaque fin d'exécution du script décrementer cette variable dans le but de ne jamais lancer plus de 20 processus simultanés ..
Pour l'instant j'y parviens au moyen de mysql, mais je ne parviens qu'à créer 5 à 10 processus par seconde, pas plus ..

Auriez-vous des idées afin de pouvoir lancer plus de processus par seconde, et avoir quelquechose de plus rapide que mysql pour réguler le nombre de processus en cours ?
Merci pour vos lumières :jap:

Message édité par grosbin le 27-04-2017 à 17:57:22

---------------
Photos Panoramiques Montagnes Haute Savoie

Publicité

phraide

mysql ? o_O

---------------
I'm too old for this shit.

phraide

script pour generer des lignes random :

Code :

fred@karpate:/tmp$ cat genurls.sh
#!/bin/bash
base="http://www.blabla.com/x="
while true;
do
suf=$(hexdump -n 2 -e '"%04X\n"' /dev/urandom)
echo ${base}${suf}
done
exit 0

ton traitement php (j'ai pas php... c'est donc du bash) :

Code :

fred@karpate:/tmp$ cat truc.php
#!/bin/bash
sleep $(( RANDOM%3 ))
exit 0

launcher "parallele" de 5 process truc.php :

Code :

fred@karpate:/tmp$ ./genurls.sh |xargs -n 1 -P 5 -t ./truc.php
./truc.php http://www.blabla.com/x=0B18
./truc.php http://www.blabla.com/x=B479
./truc.php http://www.blabla.com/x=F318
./truc.php http://www.blabla.com/x=4795
./truc.php http://www.blabla.com/x=7E3C
./truc.php http://www.blabla.com/x=04C8
./truc.php http://www.blabla.com/x=B139
...
ctrl-c

---------------
I'm too old for this shit.

FORUM HardWare.fr

Programmation

Shell/Batch

régulation de lancement de processus simultanés

Sujets relatifs
Ordonnancement processus avec wait()	Ordonnancement processus wait()
[BATCH MS-DOS] Code retour ERRORLEVEL différent suivant mode lancement	Lancement fonctions dont le nom est en variable dans une classe....
Lecteur Youtube invisible à lancement automatique	Lancement au démarrage
Lancement d'un script shell + fermeture de session	probleme de lancement du script
avoir 2 processus java distincts pour 2 programmes ?	Cacher un processus
Plus de sujets relatifs à : régulation de lancement de processus simultanés

Page générée en 0.051 secondes