Reprise du message précédent :

 
Un cluster c'est avoir un même système qui regroupe les ressources de plusieurs machines physiques, un load balancing classique c'est avoir plusieurs systèmes sur autant de serveurs qui délivrent la même chose ( en gros des clones )

 
Ca permet tout de même à moindre cout de répartir à peu près la charge entre les serveurs, mais sans "intelligence". Un load balancer de qualité c'est pas donné, si un serveur a une charge double d'un autre à un moment T mais que ça ne surcharge pas quand même, ça tient la route. Par contre pour la disponibilité c'est moins bien et la répartition est moins bonne également oui.

Et pour les sessions PHP y a pas un souci ?
 
A moins de déporter le répertoire de stockage des sessions sur un serveur commun.

En effet, certains membres n'arrivent pas à rester connectés !
Donc, il suffit de mettre les sessions sur un serveur commun et c'est bon ?

Oui et il faut que tes serveurs web puisse accéder à cet espace de stockage (accessoirement faut changer le php.ini pour prendre en compte ceci )

montage en NFS d'une partition commune, c'est aussi pour ça qu'il est intéressant si le site a un certain volume d'avoir un filer commun pour le stockage

ok, merci pour les infos
 
Sinon, juste à titre personnel, qu'est-ce que vous pensez de LVS ?

Ok, merci pour l'info sur les sessions qui doivent être en commun.
 
Vous pouvez m'expliquer dans le détail comment procéder ?
 
Je tatonne un peu en linux.

Je viens de trouver un truc très sympa pour résoudre mon problème de session PHP, suite au round robin.
 
En faisant des recherches je suis tombé sur le site de PEN, un load balancer a l'instalation plus que facile !
 
PEN garde un internaute sur le meme serveur lorsqu'il revient en se basant sur l'IP, de ce fait les sessions ne sont pas perdus. Il vérifie également si le serveur est toujours dispo sinon il le retire du load balancing.
 
Je me suis lancé l'installation suivante sur un serveur de test :
 
cd /usr/local/bin
wget ftp://siag.nu/pub/pen/pen-0.15.0.tar.gz
tar xvfz pen-0.15.0.tar.gz
cd pen-0.15.0
./configure
make
make install
 
Et cela fonctionne très bien ! (en lançant la commande de démarrage pen loadbalanceradress:80 server1:80 server2:80 ...)

Nouveau problème : notre serveur de bdd commun sature.
 
Pour info, on a déjà séparé les tables concernant les membres sur 3 serveurs : on se connecte au bon serveur en fonction de la clé primaire (si < 1 000 000 => serveur 1, si > 1 000 000 => serveur 2, si > 2 000 000 => serveur 3). Ca fonctionne très bien.
Seulement, il reste les tables communes sur un seul et même serveur qui commence à bien saturer (tables du forum, des jeux communs, etc...).  
2 solutions s'offrent à nous : prendre un serveur plus gros ou réaliser un cluster MySQL.
 
Auriez-vous déjà testé le cluster MySQL ?
Sauriez-vous nous expliquer comment le mettre en place ?
 
Merci d'avance pour votre aide

le cluster mysql est toujours en beta, prend toi un bixeon scsi et tu seras surement tranquil pour une paire de temps... tes requetes sont optimisé ?

 
Un Bi Xeon sur un unique disque SATA c'est un peu déséquilibré comme config, surtout pour une base de données

+1
 
Pour saturer un bi Xeon, il faut déjà avoir un système disque dur qui suit vachement bien derrière
(ou alors n'avoir que des requetes de porc)
 
Perso, je crois que votre politique de multiplier les machines est une fuite en avant..
 
Il faudrait a mon sens penser a essayer de voir d'ou vient le ralentissement (code mysql pourri - manque de ram - système disque qui suit pas - autre)
 

Je viens de regarder, ovh propose deux sortes de Bi-Xeon :  
    * intel xeon 2x3.2 Ghz
    * 2x73 Go disque dur SCSI 10.000 RPM RAID1
    * 2 Go  SDRAM DDR
    * 1 Gps Carte ethernet  
    * Bande passante : 2x50 Mps ( 2x100 Mps après un an )
    * Trafic illimité
 
ou
 
    * intel xeon 2x3.2 Ghz
    * 2x73 Go disque dur SCSI 10.000 RPM RAID1
    * 4 Go  SDRAM DDR
    * 1 Gps Carte ethernet  
    * Bande passante : 2x50 Mps ( 2x100 Mps après un an )
    * Trafic illimité
 
Vous pensez que 2 Go de RAM suffit ou il vaut mieux tabler sur 4 Go ?

OVH propose que des xeon pour leur dedie c'est vraiment nul
 

Non, ils ont aussi des bi-Xeon !
 
A moins que tu veuilles parler d'opteron ?

oui d'opteron biensur, le controlur memoire fait toute la difference
 
le xeon est minable pour une bdd
 
quand tu vois le prix de lhebergement c'est vraiment dmg de pas pouvoir choisir le meilleur matos en fonction de ces besoins ...

Pour des machines de ce type je trouve dommage de louer quand  même...
 
Quant à dire que le Xeon est "minable", faut pas éxagérer non plus...
 
P.S. : "quand tu vois le prix de l'hébergement" <- c'est à dire ?

Tu penses qu'il serait préférable d'acheter les serveurs ?
Le problème, c'est que nous n'avons pas vraiment les compétences techniques pour les entretenir correctement
En plus, avoir une aussi grande bande passante à domicile, c'est chaud, non ? (80 mbps)

Tu l'héberges pas à domicile ton serveur, mais dans un datacenter

J'avoue que je ne vois pas ce que c'est.
C'est une société qui héberge tes propres serveurs, c'est ça ?
Mais ça coûte cher ce genre de services ?

http://www.ovh.com/fr/produits/1u.xml par exemple.
 
Vous avez environ 60000 joueurs à ce que j'ai vu dans les stats du site. C'est bien ça ? Combien sont actifs (faut enlevé les comptes qui ne sont plus utilisés) ?
 
Et vous avez combien de serveurs en tout ? 2 pour le web et 3 pour MySQL ?

On a 10 serveurs en tout :
- 1 pour la bdd commune
- 3 pour la bdd correspondant aux joueurs
- et le reste en round robin pour le web. (en attendant le cluster hardware de OVH)
 
Sinon, on a 140 000 joueurs inscrits.
Pour la fréquentation, on tourne autour de 500/600 connectés simultanés en moyenne dans la journée avec des pointes à un peu plus de 1000.
 
EDIT: pour le data center, effectivement, à long terme, c'est peut etre plus interessant.

Votre jeu il est complexe ?
 
Vous avez des grosses requetes ?
 
Car l'architecture me semble disproportionnée.

 
A ce niveau là, il devient intéressant d'envisager de prendre une demi baie chez OVH ( si tu veux rester là ) et de mettre ton propre switch et tes propres serveurs.

Ratibus> oui, le jeu est plutôt complexe et il y beaucoup de requêtes à exécuter.
 
Sly angel> Ok, je vais en parler à mon patron
 
EDIT: voici les graphs du serveur qui sature : http://ns20251.ovh.net/mrtg/

si le graphe est fiable : 90 % de mémoire physique libre et moins de 50% de cpu utilisé en moyenne...
 
heu, le dma est activé sur vos disques durs ?
 
edit : sinon c clair que si vous en êtes a 10 machines, la colocation devient intéressante.
Par contre 10 machines pour un jeu en ligne comme ça, ça me semble vraiment disproportionné.
Vous avez pas envie d'engager un programmeur php/mysql pour optimiser le code plutot que de louer des serveurs en plus ?

+1 sur l'optimisation du code

C'est un truc de fou quand même ce que tu annonces...
 
A t'entendre, le serveur du forum HFR ne te suffirait pas...(je pense même que leur installation est moins importante) Je ne sais pas vraiment le nombre de connectés aux heures de pointes mais ça doit avoisinné les 2000 connectés (peut être + encore) .
 
Je pense que des optimisations de tout cela doit être effectué...
 
Moi par exemple, je joue a un jeu : Ogame.fr...(jeu de stratégies en temps réel en php) Chaque serveur a en moyenne 10 000 inscrits. je ne connais le nombre de connectés aux heures de pointes mais ça doit largement dépassé les chiffres que tuannonces chez toi.
 
Es-ce que tu as des scripts qui tournent constemment ? Je parle en faîtes de scripts qui permettent de dresser le classement des joueurs.  
As tu mis un systèmes de cache ?
 
Vu que tu as les moyens de te payer des gros serveurs... Vire PhpBB qui bouffe toute tes ressources... et pourquoi pas prendre le même forum que celui de HFR http://www.mesdiscussions.net/
Tu économiseras pas mal déjà...
 
En tout cas, si ça continue dans quelques temps, tu auras la plus grosse installation Web de France... en 6 mois tu as 2X ton installation.
 
OVH doit être content

 
C'est parce que les serveurs et le code du serveur pour le forum HFR sont super optimisés ( )
 
Bon blagues à part ( enfin non c'est pas une blague ), c'est vrai que ça parait imposant, après faut aussi voir les fonctionnalités et l'étendue des paramètres pris en compte par le jeu.
 
En fait effectivement ce qui me surprend, c'est de bricoler ça chez OVH alors que si le site a assez de succès pour nécessiter tout ça, il serait surement plus intéressant de passer sur des solutions infogérées chez des hébergeurs plus spécialisés.  
 
Sinon pour ce qui est de la plus grosse installation web en France, non faut pas éxagérer, Clubic est pas non plus très doué pour l'économie de serveurs pour ses sites et après pour des grosses boîtes ( chaînes de TV par exemple ) c'est même pas comparable
 
Après ça dépend aussi le but du site, Clubic comme HFR comme d'autres sites du genre vivent de leur activité et donc consacrent un "vrai" budget pour l'hébergement. C'est peut être pas la même chose là.
 
Dans tous les cas à partir d'une certaine taille, c'est difficile de se passer d'un vrai admin ( chez soi ou en infogérance ) pour gérer un tel parc de serveurs
 
Payer un audit sur des serveurs pour voir ce qui ne va pas et les solutions possibles n'est peut être pas une mauvaise idée dans un premier temps...
 
+1 pour le forum MesDiscussions.net sinon bien sûr ( mais je suis parti pris )
 
P.S. : Le forum HFR c'est environ 2000 connectés simultannés en journée, 33 Go de bases de données, le tout tournant sur 2 serveurs ( 1 web + 1 SQL ) Bi proce + 3 Go de RAM + RAID SCSI sous système Linux optimisé.

dans le style "fuite en avant" tweakers.net, c'est un rack complet de serveurs 2U...

si il a le budget de payer 10 serveur ovh c'est qu'il pourrait "vivre" de son site je pense ...

 
 
C'etait de l'humour à propos de la plus grosse installation Web de France.  
 
Enfin bon, j'imagine pas le taff   . Entre les logs apache, mysql, linux... à analyser sur chacun des serveurs, le forum à gérer, les mises à joour à effectuer sur les serveurs et le jeux en lui même... T'en a environ pour 6-7 h par jour...
 
Es-tu sur de passer autant de temps dessus ?

T'as des choses automatisées à partir d'une certaine taille avec des rapports d'erreurs derrière. C'est obligatoire à partir d'un moment, c'est là d'ailleurs que se fait la différence de qualité entre 2 admins pour un parc de machines
 
J'ai pas compris tout par contre, tu parles de chval ou de moi ? ( notamment sur la dernière question, je situe mal son contexte )

Pour info, Je ne trouve pas que 10 serveurs soit excessif pour ce style de site : Prizee.com utilise une cinquantaine de serveurs.

 
Possible, mais bon pour les forums il y a aussi des grosses variations :
 
http://www.big-boards.com/servers.php
 
Ca dépend de la fréquentation aussi bien sûr...

met ca sur un ratio visiteur unique entre prizee et ton site et tu verras que 10 serveurs c'est enorme pour toi.

C'est à peu près le meme ratio

21H10 aujourd hui dimanche 9474 personne sur prizee tu en as donc en ce moment meme presque 1900 ?

Ca me fait rire...
 
Parce que dans le sujet initial ont parle d'un site qui fait 300 conectés simultannés... et qui nécessite 10 serveurs...
Si on tenait cette logique, le forum HFR avec ses 2100 (on va faire simple) connectés simultanés nécessiterai (en conservant ce ratio) 70 serveurs    
 
Donc il est clair que si on se réfère a ces chiffres, on voit très bien qu'il manque des optimisations
 

 
Je parlais de chval   .
 
[HS]
Lorsqu'on consulte cette page http://www.big-boards.com/servers.php on voit clairement les bons et les mauvais forum...
Il faut 80 serveurs pour le PhpBB (le 1er au top) et seulement 2 pour HFR... 5 pour Vbulletin les mauvaises langues diront qu'il n'y a pas le même nombre de posts et membres... et ben moi je dit il n'y a pas photo...  
Les admins du forum phpBB pourrait diviser par 10 le nombre de serveurs en changeant simplement de script de forum   . je ne dit pas que MesDiscussion.Net est le meilleur de tous les forums mais rien qu'en passant à VBulletin, il ferait des économies...  
 
Enfin bon ce n'est qu'un avis et je doute que les admins de gaia online le voit .  
 
PS : Il y'en a qui ont des sous à jeter par la fenêtre    
[/HS]
 
EDIT : Les clusters sont dispos sur OVH mais un max de 10. par contre, je trouve bien l'idée de pouvoir intégré des Filer.

Le ratio de prizee.com est de 250 par serveur, c'est une chose sûre (nous connaissons les créateurs).
Nous avons pris en compte environ le même ratio. Nous n'avons pas 10 serveurs web, mais 5 serveurs MySQL pour 6 serveurs Web (soit une capacité de 1500 visiteurs).
Au début du topic, le traffic était de 300 connectés simultanés à cause d'une saturation du seul serveur Web. Suite aux améliorations, la fréquentation est passée directement à plus de 1000 connectés simultanés en pointe. Seulement, nous prévoyons un peu plus, car le site était de nouveau saturé, ce coup-ci, par le serveur MySQL commun, que nous venons de passer en Xeon+SCSI Raid1.
 
Autre chose : la programmation d'un forum est complètement différente d'un tel site. Un forum n'a aucun script en cron par exemple, alors que nous en avons 6/7 (ventes aux enchères, mise à jour de comptes, etc...).
 
Sinon, nous avons fait la demande de cluster chez ovh il y a deux semaines et nous devrions l'avoir cette semaine.