Bonjour,

Un ami m'a parlé d'un projet qu'il avait en tete, un supercalculateur. Vous avez tous entendu parlez du projet qui consistait à cumuler la puissance de nos ordinateurs afin d'accélérer le cracking et de faire faire de la recherche dans les mathématiques ( factorisation des grands nombres premiers ). Il m'avait dit qu'il avait trouvé des supercalculateurs qui tournaient au tour de de 10 k à 30 k€.
Les liens :
- http://www.carri.com/html/solutions_calcul.php
- http://www.carri.com/html/tesla_cuda.php
- http://www.carri.com/html/hpc/clusters_hpc.php

Je lui ai dit que je rechercherais des supercalculateur mais homemade et j'en ai trouvé plusieurs :
- http://helmer.sfe.se/, plusieurs ordinateurs connectés à un seul
- http://www.generation-gpu.fr/actua [...] c15724.htm , plusieurs cartes graphiques
- http://www.nokytech.net/forum/wate [...] 23371.html , plusieurs CPU

Ils sont aussi puissant que ceux donnés au départ mais moins cher il me semble.

Donc j'ai pensé à en faire un à ma sauce et j'ai trouvé quelques bases de départs mais pas définitifs. Budget tournant aux alentours de 10k-15k€.

- carte mère : SuperMicro H8QG6-F
- processeur : 4X AMD Opteron 6168
- mémoire : 32X Kingston ValueRAM 2 Go DDR3-SDRAM PC3-10600 ECC Registered C
- alimentation : 2X Antec Quattro 1000-EC
- Disque dur : 2X Western Digital Caviar Black 2 To 7200 RPM 64 Mo Serial ATA
- SSD : 2X Crucial RealSSD C300 - SSD 256 Go 2.5" Serial ATA 6Gb/s
- Carte graphique : 2X ASUS EAH5970/G/2DIS/2GD5 - 2 Go Dual DVI/Mini DisplayPort - PCI Express (ATI Radeon HD 5970) ou 2X ASUS ENGTX480/2DI/1536MD5 - 1536 Mo Dual DVI/HDMI - PCI Express (NVIDIA GeForce avec CUDA GTX 480) ou 2X PNY Tesla C1060 Quadro - 4 Go - PCI Express
- Boitier je ne sais pas mais un grand
- Refroidissement : Watercooling

Qu'en pensez-vous ?

Merci d'avance

Je me pose une nouvelle question :
Qu'est-ce qui est le plus performant 4 opteron + 2 GPU ou 1 i7 + 7 GPU ?

Bonjour
 
je suis tomber sur cette carte Asus 1156, chipset 3450
 
1 CPU 1156 ,  3 ou 4 Tesla 1060, mem ECC  ....
 
http://www.ldlc.com/fiche/PB00099947.html
 
peux tu faire une config avec ce materiel ?

D'accord avec toi mais je prendrais plutot la Asus P6T7 WS SuperComputer qui a 7 port PCI-E. En gros il se pose la question suivante : plusieurs CPU ou GPU ?

Je suis partisan du 2 CPU et 4 GPU.
EVGA Classified SR-2 (Super Record 2) avec des Intel Xeon 5500 ou 5600 + 4 way SLI

Histoire d'halluciner

Tu dois avoir raison, un mixe des deux doit etre pas mal.

Pour les GPU, 4 GTX480 ou des Tesla ?

EDIT : Merci pour le lien, je regarde ca

Faut voir avec des mathématiciens qui pratique Cuda.
C'est peut être pas le bon forum , ici.    
 Chercher sur des forums universitaires.

Hum honnêtement, GTX480 je pense mais bon cherros...
Sinon, tu as vu le NVIDIA® Tesla™ S1070 ?

Ok ls63bd
 
Ouai c'est vrai que c'est chere les GTX480.
 
Non j'avais pas vu. C'est quoi en gros ? un supercalculateur ?

http://www.top500.org/
 
Petits modèles pour la maison
 
http://www.supermicro.com/GPU/
 

 

Enorme ^^

belles machines
 

C'est pas du P55 + I750 en tout cas

 
Avant d'être un problème de machine, il faut que ton pote sache quelle archi il veut exploiter.
 
L'archi la plus difficile à exploiter est aussi la plus puissante : une troupe de cypress.
Vient ensuite une machine à base de Nvidia, ou il pourra exploiter CUDA, qui est bien plus avancé que Open CL utilisé chez AMD.
Enfin, si il préfère coder sur du x86, alors une paire d'opteron 12 cores serait encore à un prix acceptable il me semble.
 
Dans le cas des GPUs, le problème est très simple : une machine avec un core i7 et plein de ports PCI-E, et tu mets autant de HD5970 / GTX400 que tu ne le peut.
 
Dans le type de calcul dont du parles (cracking, nombres entiers...) inutile de blinder de CPUs si tu as déjà des gros cypress qui tournent. Le travail de gestion des diverses unités de calcul devrait être tellement faible qu'une pauvre sempron 140 s'en accommoderait aisément. Bien entendu, on va pas prendre une merde pareille, mais inutile à mon avis d'investir dans du multi socket si tu as déjà 6 cypress qui tournent derrière.

http://www.tyan.com/product_SKU_sp [...] =600000180

 
Ouai c'est vrai.
 

 
Oui ^^ Mais pas le meme prix aussi ^^
 

 
Je lui demanderais ce qu'il veut faire exactement Pour l'instant, il m'a dit qu'il utiliserai Pyrit qui avantage clairement Cuda http://code.google.com/p/pyrit/
 
Aurais-tu un lien pour Cypress ? car je ne trouve pas
 

 
Merci

 
Alors cypress est ne nom de la puce conçue par AMD pour prendre place dans les HD5800 et HD5900. Donc, quand je parle de troupe de cypress, cela fait référence à des cartes HD5970 (2*cypress), HD5870 ou HD5850, qui ont des performance différentes, mais des features identiques (dans ton cas).
 
Je ne lit pas que Pyrit favorise CUDA dans ce graphe ! Clairement pas même : une HD4850 sous Open CL qui vient fight une GTX295 sous CUDA. Et la HD5870 qui se rapprocherait presque de 4*GT200b !
 
Le cout énergétique et pécunier me semble largement à l'avantage des cypress dans ce cas. Malheureusement, n'ayant aucune connaissance en GPU computing (et j'aimerais beaucoup en acquérir...), je ne sais pas à quel point ce graphe représente la réalité.
 
Il est vrai que la GTX400 de Nvidia, ici non incluses, pourraient bien mettre tout le monde d'accord car elles sont bien plus conçues pour le GPU computing que toutes les autres... au prix d'un rapport Gflops/watt et par Euro inférieur aux HD5000.
 
Bref tu poses un problème compliqué dans lequel je n'ai pas les compétences pour t'aider. Tout au plus je peut aider avec ce que je sais...

Ah ok ^^ Tu m'aurais dit HD5XXX, j'aurais compris mais la Cypress ca me disait rien ^^
 
Oui c'est vrai pour Cuda, j'ai mal lu le graphique, j'étais pas réveillé ce matin ^^ Je vais voir sur les forums qui parlent directement de Pyrit
 
Ah mince.  
 
Donc maintenant j'hésite entre :
- EVGA Classified SR-2 (Super Record 2) avec des Intel Xeon 5500 ou 5600 + 7 GPU 1 slot
- Asus P6T7 WS SuperComputer avec un i7 + 7 GPU 1 slot
 
Est-ce qu'une GTX480 avec un waterblock peut faire 1 slot ?

 
Humm........ c'est du beta cette carte mère il me semble.
Si c'est pour choisir du Bi Cpu autant prendre dans les gammes Pro.
 

Est-ce qu'une GTX480 avec un waterblock peut faire 1 slot ?
 
je doute

 
Comment ca Beta ? Elle est vraiment sorti.
 

 
Pareil je ne pense pas.

 
Si toute la puissance de calcul est déportée vers les cartes graphiques, alors le proceseur n'aura qu'un rôle d'ordonnanceur sans influence sur les perfs de la machine, surtout pour les applis que tu décris. Aucune raison de prendre des CPUs hauts de gamme, un "simple" 6 cores AMD ou core i7 suffira. (Je dis "simple" parce que dans le cas qui nous interresse, une grosse solution serait directement multi-socket.

Ok donc vaut mieux prendre la Asus

Alors apres un p'tit temps de réflexion et des p'tites discussions avec l'ami. J'ai trouvé ca pour la config :
 
Boitier--> je ne sais pas mais je pense qu'un Moutain Mods doit etre pas mal
 
Alimentation--> Silverstone - Alimentation modulaire - Strider 1500W
 
Carte mere --> Asus P6T7 WS Supercomputer
Processeur--> Intel Xeon E5504 - Quad Core (80w)
Ram-->G.Skill RH Series RipJaws 6 Go (kit 3x 2 Go) DDR3-SDRAM PC3-16000
 
Disque dur systeme : Intel® X25-M 80 Go "PostVille" ou Seagate Cheetah 15K.6 SAS - 146,8 Go
 
HDD--> Samsung Spinpoint F3 Ecogreen S-ATA - 2000 Go - 32 Mo x4
Carte Controleur -->Adaptec 2420SA (4 ports SATA II RAID internes)
Carte graphique--> 3xATI 5970
 
Watercooling --> je ne sais pas s'il en faut un ou pas, personnellement je dirais oui mais l'ami n'y trouve rien d'exceptionnel
 
Qu'est-ce qui peut etre changer ?

 
je me demande si c'est bien sérieux tout ça    
 
Un Xeon n'est pas utile sauf pour des fonctions particulières liées au reseau ou au multi cpu, un 920 ou 930 seront plus performant.
 
la carte controleur disque va servir a quoi ?
 
Cheetah SAS fonctionne bien sur P6T7 tout comme la G.Skill NQ 6 Go PC3-12800.
 
Samsung c'est pas fiable a éviter dans une config un temps soit peu orienté usage intensif.
Water cooling c'est du pareil au meme trop de maintenance/risques.
je crois savoir qu'il n'y a que les Chinois qui ont retenus du Ati en GPGpu de haut niveau    

prends le intel postville 80 go !
 
un réel interet d'un tri CF de 5970??

Si c'est bien sérieux.
Le Xeon car la config devra tourner 24/24 et je pense qu'il est plus fait pour faire ca que le 930 qui est grand public.
La carte controleur va servir pour faire un raid 5 avec les disques durs de données.
Je sais que ca fonctionne mais n'y a-t-il rien de mieux pour a peu pres le meme prix ?
Pourquoi c'est pas fiable ? J'ai eu un F1 640go, F2 1000go et F3 500go ben ils ont tourné quasiment 24/24 et ils marchent toujours impec.
Le watercooling, trop de risques ? T'en a un au moins ? car j'en ai un et jamais eu de problème avec. La maintenant, oui il faut vidanger tout les 6 mois c'est vrai que c'est chiant.

Je pense le prendre ! car j'ai un 40go et il est parfait, mais c'est mon ami qui est plus vieux que moi et à l'époque c'était les 15k tr/min qui était les plus puissants.
Oui il y a un réel intérêt, sous pyrit une hd5970 fait 75000 pmk/s donc 3 ca va faire 225.000 pmk/s . Et au départ j'étais pari pour en mettre 7, mais mon ami va faire petit à petit ^^

Pour les HDD :  
 
Western Digital RE4 GP 2TB 64MB SATA II (5400rpm) (WD2002FYPS)
 
La version RE4 est plus faite pour les serveurs, utilisation H24 ... certes plus chère mais la fiabilité sera la. Il a vraiment besoin de 6To de données ?
 

 
Exact, mais sur des HD4870X2. Les HD5970 sont plus performante pour une enveloppe thermique équivalente, mais surtout sont programmables en Open CL ou  direct compute.
 
C'est ton poste qui sait quels problèmes il devra faire tourner, les HD5970 peuvent être un excellent choix... Comme un très mauvais choix.
 
Si tu ne met pas de WC (je ne pense pas que ce soit nécessaire), prévois au moins un boitier avec un énorme ventilo sur le coté. De préférence avec toutes les entrées filtrées.

damienmou
 
les Cpu Intel Non Xeon ont les meme caractéristiques concernant leur durée de vie estimé, c'est environ 20 ans a 100% de charge 365/365 jours.
Pour les Samsung je t'invite a regarder sur le forum leurs topic et de faire une petite recherche sur internet a leur sujet.
 
Pour le Water non bien sur que j'en ai pas , j'ai tentance a m'appliquer mes recommandations. un Water cooling n'est pas fiable pour une station de travail ou il faut que ce soit un système réalisé en prenant compte du veillissement des matériaux etc...... c'est compliqué sans réel suivi de maintenance programmé.
 
Pourquoi tu ne te base pas sur le principe des solutions Pro en terme de boitier/dissipation ?
Regarde l'exemple du SuperMicro en lien plus haut.
 

 
Ah oui en effet c'est plus cher. Avec Pyrit utilise une base de données de mot de passe et il y en aura entre 500 million et 1 milliard ou plus.
 

 
Oui il peut y avoir des problemes surtout avec les pilotes car AMD sous linux ca pose parfois des problemes.
Oui ne t'inquiete pas, je pense prendre un mountain mod ou un boitier du style donc il y aura des emplacements pour ventilos
 

 
Ah je savais pas pour les non Xeon donc quelle est leur différence ?
Ok pour les Samsung.
 
Ok pour le watercooling.
Je vais regarder l'exemple de SuperMicro

 
 
 
je l'ai ecrit plus haut

 
Ouai j'avais lu Il n'y a pas d'autres différences ? Ah si y en a une, je m'en souviens il consomme moins le Xeon mais bon comparé à la consommation des 3 HD5970 c'est rien ^^

 
compare des cpu identiques.
 
http://processorfinder.intel.com/d [...] Spec=SLBEW
 
http://processorfinder.intel.com/d [...] Spec=SLBEJ
 
Le TDP n'est pas la conso mais une indication pour la dissipation du cpu.
 
 

je confirme pour la fiabilité aléatoire des hdds samsung. Au pire prends l'équivalent chez WD, quoiqu'il arrive ils tiendront plus le coup que les samsung.

 
Ok Donc y a quasiment pas de différence donc je choisis un i7 surement le 930 car le 920 n'est plus commercialisé.
 
 
 
Ah ok ! Je vais voir de ce pas chez WD

J'espère que cette machine tournera dans une salle climatisée. Parce que 3*5970 en charge 24/7, ça va chauffer extrêmement fort. Une solution qui monte à 100°C au bout d'une ou deux heures laisse planer quelque doute sur sa fiabilité dans le temps.

 
aucuns soucis si il a un vrai boitier Serveur    
 
Avec plus 600 CFM aux fesses (et plus de 60db   ) ça va pas chauffer    
par contre la piece dediée c'est obligatoire    
 
   
 
 

Je ne pense pas dans une salle climatisée car elle sera chez un particulier et faut pas que ca fasse trop de bruit donc boitier Serveur avec ses 60db je pense que je vais oublier.

Si ca chauffe tant que ca, le watercooling sera obligatoire

 
En chiffres et en images : http://www.hardware.fr/articles/77 [...] -5970.html
 
Personnellement, en voyant ça, je me demande comment le constructeurs osent commercialiser ce genre de trucs. C'est vraiment du matos poussé dans ses derniers retranchements pour décrocher la victoire dans la course aux benches.