[Resolu] Améliorer les performances

Recherche :

Mot : Pseudo : Filtrer
Bas de page
Auteur	Sujet : [Resolu] Améliorer les performances

td-rat

www.corkteam.com

Bonjour,

J ai un probleme de temps de traitement sur un programme en SHELL. Je travail chez uu FAI et pour la supervision temps reel on passe des interrogation sur des equipements réseau. Avec le dev de l'internet le nombre d'equipement à bcp augmenter.

Voici mon code.

Code :

for Bas in $ListeBAS
do
$BIN""zjeton $Bas
RetCode=$?
if [ $RetCode == 0 ]
then
$BIN""zjetonalloc $Bas get
expect -f $FichierExpBas $MachineHPOV $UserHPOV $Bas $UserBAS $PassBAS >$DON"Telnet_"$Bas".out.new"
RetCode=$?
$BIN""zjetonalloc $Bas free
fi
LineFile=`cat $DON"Telnet_"$Bas".out.new" | wc -l`
print `date +"%d/%m/%Y_%H:%M:%S "`$Bas" "$RetCode" "$LineFile
echo "tuyau\t"$Bas"\t"$MachineHPOV"\t"`date +"%d/%m/%Y_%H:%M:%S "`"\t"$RetCode"\t"$LineFile>> $FichierLog
if [ $RetCode != "0" ]
then
RedoBas=$Bas" "$RedoBas
DateFichier=`date +"%d%m%Y_%H%M%S"`
cp $DON"Telnet_"$Bas".out.new" $DON"Telnet_"$Bas".out."$DateFichier
else
cat $DON"Telnet_"$Bas".out.new" | tr -sd "\r" "" > $DON"Telnet_"$Bas".out"
fi
sleep 5
done

Le principe c est que j execute un script sur des equipements mais je les fait un par un. J aimerai les faire en parallele. Chaque script expect prend environ 15 % de ressource processur, serait il possible d en faire fonctionner 4 par 4 ?
Est ce possible ? Comment aborder la chose ?

Merci

Message édité par td-rat le 18-08-2005 à 14:44:36

Publicité

Deadlock

Feck off, cup !

Tu peux le faire "à la bourrin" en comptant le nombre de processes expect actuellement actifs au début de ta boucle for/done. S'il est inférieur à 4, tu continues la boucle, sinon tu attends X secondes et tu check à nouveau.
Qque chose du genre:

[...]
for Bas in $ListeBAS
do
while true
do
MaxProc=4
SleepTimer=10
NbProc=`ps -ef | grep expect | grep -v grep | wc -l`
[ $NbProc -lt $MaxProc ] && break || sleep $SleepTimer
done
$BIN""zjeton $Bas
RetCode=$?
[...]

Par contre il faudra dans ton script lancer expect en background (& ).

---------------
Institutions européennes: Ensemble d'outils dont le but est de transformer une grande quantité d'argent en merde. Cette merde est utilisée pour créer de nouveaux fonctionnaires. L'argent restant payant des externes pour faire leur travail.

td-rat

www.corkteam.com

Ouai c est realisable, et de meme avant de quitter mon programme principale il faut que tout les process fils soit terminé car les traitement qui arrivent par la suite en peuvent pas commencer avant que tout les expect soient terminer.

Pour faire cette gestion de processus ? je fais tout avec
ps -ef | grep PID >> proc.txt et j analyse ?

td-rat

www.corkteam.com

Si j utilise "ps -l" ca va aussi ?

matafan

"wait" sans argument attend que tous les sous-process aient termine. Si tu peux utiliser ca, c'est mieux que l'attente active proposee par Deadlock. Une autre approche serait d'utiliser la commande "jobs" pour conter le nombre de processes en background, et d'en lancer un nouveau des que tu en a moins de 4.

Deadlock

Feck off, cup !

D'où le "à la bourrin" dans mon post

td-rat

www.corkteam.com

matafan a écrit :

Merci pour ton aide.

As tu des exemples par hasard?

matafan

En fait en y repensant j'ai une meilleure solution. Cree une fonction, appelons-la "doit", qui fait la tache que tu veux lancer en paralele. Cree une fonction "sigchld" qui compte le d'instances de la fonction doit (jobs | grep doit | wc -l), et qui lance un nouveau doit (doit & ) si ce nombre est plus petit que 4 (donc if [ `jobs | grep doit | wc -l` -lt 4 ]). Ensuite enregistre "sigchld" en temps que signal handler pour le signal SIGCHLD (trap doit SIGCHLD). Puis lance 4 fois doit en background (doit &; doit &; doit &; doit & ). Le tour est joue, tu aura en permanence 4 instances de ta fonction doit. Tu peux evidemment passer un argument a doit (le nom de la machine a laquelle elle doit se connecter par exemple) de sorte qu'elle fasse quelque chose de different a chaque fois. Quand tu as lancer le dernier doit, desenregistre sigchld.

matafan

Bon j'ai fais un petit essaie et c'est bizarre, je ne recois jamais de SIGCHLD... Donc finalement je propose une solution de ce type, ou "doit" est la fonction que tu veux lancer en paralele :

#!/bin/sh

arg=0

function doit {
sec=$(( RANDOM * 10 / 32768 + 10 ))
echo "-> doit $1: sleep $sec"
sleep $sec
echo "<- doit $1: sleep $sec"
}

function respawn {
while [ `jobs -r | grep doit | wc -l` -lt $1 ]
do
(( arg += 1 ))
doit $arg &
done
}

while :;
do
respawn 4
sleep 1
done

Ici la fonction respawn se charge de relancer le nombre de doit qu'il faut pour arriver a 4.

td-rat

www.corkteam.com

Ok merci, c est ce que j avais fait

FORUM HardWare.fr

Programmation

Shell/Batch

[Resolu] Améliorer les performances

Sujets relatifs
[Résolu] Récupérer valeur oui/non	[resolu] JtextField invisible oui mais il veut pas s'afficher !!!
[Résolu] Ecriture correcte de requête	[MySQL] Selection d'un enregistrement aléatoire [Résolu]
[RESOLU] : Bad interpreter	[formulaire] dynamique [résolu, merci bl@p] + imput personnalisé
STL - multimap - ou le mystère de l'iterator perdu (non résolu)	[JavaScript] Concaténer des chaines pour faire un nom de var. [Résolu]
[php] [RESOLU] probleme de tableau	[php] [RESOLU] lancer un fichier excel avec un header
Plus de sujets relatifs à : [Resolu] Améliorer les performances

Page générée en 0.039 secondes