Reprise du message précédent :
Actuellement, c'est mon HomeServer qui me sert de NAS (3 * 3 To, RAID5 sous mdadm). J'aimerais bien séparer ça, et en profiter pour passer sous ZFS.
Ce NAS a un usage @Home, avec en cible ~10To sans dédup / compression.
J'me débrouille sur les Linux, mais je ne connais rien aux Solaris ou BSD. J'envisageais de partir sur un NAS4Free (et je compte bien tester ça en VM).  
 
Quelques questions pour les experts du topic.
 
Hardware : comment vous faites pour avoir de la mémoire ECC sans vendre un rein ? Côté Intel, je trouve rien d'officiellement supporté sans taper dans du Xeon (200€ de CM + 200€ de proco, ça pique).
 
Disques : ça fait plusieurs fois que je lis des recommandations sur le nombre de disques. Autant il me serait pas venu à l'idée de mettre 10+ disques dans un RAIDZ, mais je comprends mal cette idée de nombre pair ou impair ...  
Y'a de la doc là dessus quelque part ?  
Google ne me remonte que des contraintes de taille mini (3 pour le RAIDZ, forcément), de taille max "raisonnable", et des conseils de perf (4 pour le RAIDZ serait moins perf sur des gros disques des blocs de 4K).
J'envisageais 4 ou 5 WD RED 3To dans un RAIDZ. Une autre piste serait de partir sur 3 disques dans un RAIDZ et de prévoir d'en rajouter un autre RAIDZ de 3 disques plus tard.

ECC pas cher? => Proliant N40L.

Sinon  tu as l'occas j'ai acheté la base de mon serveur sur smpfr un i3 une cm supermicro et 16go de ram ecc pour un peu plus de 200 euros il y a un an

Pour L'ECC je crois que les i3, pentium et celeron 1155 sont compatible avec les chipset serveur et L'ECC, ce qui réduit pas mal la note

Ah, c'est pas bête ça. Largement moins cher que du custom à base de Xeon. Je vais creuser

Chuis pas fan de l'occaz.

Effectivement, ark les référence comme supportant l'ECC. J'avais supposé à tord que toutes les features serveurs étaient désactivées sur les processeurs grand public. Pour une fois qu'Intel ne segmente pas TOUTES les fonctionnalités
Ça doit permettre de réduire d'une centaine d'€ ça. Par contre les CM avec chipset serveur courent pas les rues.

Façon de voir, car i3 c'est ECC Ok, mais plus le VT-d par exemple.

Hum, j'ai regardé de plus près le Proliant N40L (et son petit frère N54L), le proco va probablement être trop juste pour un RAIDZ.  
 
Pour un usage @Home, avec en cible ~10To sans dédup / compression, il faut prévoir quoi comme CPU pour saturer du gigabit ?
 
@odon4 : effectivement, mais mon but est de monter un NAS "pur", j'ai déjà mon serveur existant pour le reste. Donc VT-x / VT-d, rien à faire sur le NAS.

Pour le proliant demande un retour sur le topic, il sont nombreux en raidz de souvenirs.

Perso, je m'interroge encore sur l'utilité réelle d'avoir de l'ECC sur un nas personnel. Quels sont les risques que des données importantes soient corrompues ? Si vraiment un bitflip se produit, j'imagine que dans la plupart des cas c'est le système qui sera affecté donc au pire un crash système. Et si j'ai des données importantes corrompues, dans le meilleur cas, je peux les récupérer depuis un backup, dans le pire des cas, je perdrais une photo perso tous les 3 ans...
 
Je me dis également que pour que ce soit vraiment efficace, il faudrait tous les clients du NAS soient également équipés de RAM ECC.
 
A moins qu'il y ait d'autres risques...

si ta ram se met a deconner tu peux avoir un paquet de fichiers corrompus avant de t'en rendre compte. avec de la ram ecc pas de probleme

C'est surtout dans le cas de l'utilisation de ZFS: RAM défectueuse => Détection de faux positifs dans les défauts => Resilvering avec une RAM en défaut => corruption de tout l'array.

Je suis en RaidZ1 de cinq disques durs 3To sur mon N40L et ca tourne à 90Mo/s sans problème.

 
Ou, si on l'exprime autrement, si on veut utiliser une techno avant tout destinée aux entreprises, il faut la faire tourner sur du matos avant tout destiné aux entreprises    
 
D'aucuns feraient remarquer que le RAIDZ est probablement overkill pour une utilisation perso, ces configs a base de core "i5 + 4gb de ram ecc" pour un "simple" serveur de fichier tendraient a leur donner raison...
M'enfin moi je m'aventurerai pas sur ce terrain hein, apres on va relancer des debats sans fin... ^^

Tu veux qu'on cause virtualisation et V-Pro?

Ah mais j'assume mon overkill moi
 
Mais au moins je sais pourquoi je l'ai fait (principalement un usage lab) et je reconnais que c'est totalement hors-scope d'un serveur "maison" ^^ (et du coup je n'explique pas qu'il faut absooolument du vt-d de la ram ecc et un cpu de ouf pour servir trois fichiers )
 
par contre je continue de faire la promo de crashplan, pas cher efficace, et une vraie sauvegarde offsite en complément de votre raid quel qu'il soit

 
Bah évidemment pour un serveur perso l'ECC c'est overkill, mais ça l'est parce que ZFS c'est overkill    
Après il y en a qui mette des tunes dans une super voiture, d'autre une CG de compet ... bah d'autres ont 10To en raidz pour leur photo de famille.

Mais c'est le cas dans tous les systèmes raid software, non ? En cas de reconstruction du raid avec de la RAM défectueuse, l'array reconstruit sera corrompu. Donc il faudrait de l'ECC sur n'importe quel raid software pour garantir l'intégrité des données.

J'imagine également que dans le cas d'une barrette réellement défectueuse, les erreurs systèmes devrait apparaitre avant la corruption des données.

C'est vrai que vu comme ça...

Plus sérieusement et contrairement à bisso, je n'en fais pas un usage lab mais un NAS sur lequel sont sauvegardés et synchronisés les machines et documents d'une vingtaine de personnes (particuliers) qui n'ont pas forcement les connaissances pour le faire eux même (en tous cas la partie backup). Donc le but est d'avoir une solution fiable, flexible et plus ou moins performante :
- Fiable : Je veux pouvoir ouvrir un backup dans 1 an et récupérer des données sans que tout soit corrompu donc je dois pouvoir faire confiance au système pour garder mes données intactes.
- Flexible : Ne pas être rapidement limité en nombre de disques, pouvoir ajouter ou remplacer facilement un disque ou une grappe de disques.
- Performante : J'aimerai éviter que la reconstruction d'un Raid prenne 2 semaines et pouvoir obtenir des débits lecture/écriture qui s'approche de la limite de mon réseau gigabit.

Et évidement sans dépenser 10k pour avoir mon propre datacenter. J'ai commencé par du raid hardware que j'ai rapidement abandonné pour éviter le cas d'un contrôleur défectueux qui ne se trouverait plus sur le marché. En ce moment, j'ai un raid sous snapraid mais son seul avantage par rapport à ZFS est de pouvoir ajouter des disques dans un RAID après sa construction et d'avoir des disques de tailles différentes. D'après ce que j'ai lu, ZFS devrait offrir un meilleur traitement des données et de meilleures performances.

Vu qu'il n'est pas recommandé d'utiliser ZFS sans ECC alors j'en resterai probablement à Snapraid.

Merci

Tu fais payer ces 20 personnes pour tout ça ?

Non, ce sont des amis et la famille. Vu que j'ai un NAS pour mes documents (et la connexion internet qui va bien), j'en fais également profiter les autres. Après j'ai évidement limité les données qui sauvegardées (50 Mo max par fichier). Pas envie de me retrouver avec les divx de tout le monde dans mes backups.

Oui j'imagine bien, je faisais la même chose pour mes parents à une époque.
 
Mais du coup, tu as dimensionné ton installation par rapport à ça ?
Ou leur quantité de données est négligeable à côté des tiennes ?
 
Mes parents j'ai toujours une copie en fait (quantité négligeable) que je fais manuellement de temps en temps (ils ne brassent que des photos de vacances donc bon.
Et mes potes sont soit geek donc ils/elles se débrouillent, soit j'ai lâché l'affaire tellement ils/elles n'y comprennent rien  

Je n'avais pas vraiment fait de dimensionnement et j'ai actuellement 3To, dont presque 1To pour les documents externes et leurs backups. C'est principalement l'arrivée de plusieurs appareils photo reflex dans le cercle de ces 20 personnes qui a considérablement augmenté la taille des données.
 
Vu qu'il me reste moins de 20% d'espace disque disponible et je vais donc mettre mon NAS à jour avec max 800€, je réfléchis à la solution la plus intelligente, d'où cette interrogation sur ZFS/ECC.
 
J'ai une majorité d'utilisateurs qui font partie de la catégorie "n'y comprend rien ou pas grand chose" donc les outils de synchronisation automatique et transparents sont obligatoires. Idéalement, j'aimerai partir sur une solution cloud perso mais je n'ai pas encore trouvé la solution parfaite. J'vais essayer seafile dès que j'aurai un peu de temps, owncloud ne m'ayant finalement pas convaincu.

tu as ajaxplorer aussi dont j'ai entendu parlé mais n'ai pas testé

Owncloud non c'est vraiment pas ça .. Ajaxexplorer c'est pas mal pour y poser des trucs, mais il ne me semble pas qu'il y ai d'outils de synchro auto ?
Il manque une implémentation native/simple de rsync
 
Tu utilises quoi actuellement pour faire la synchro Delivereath ?

Syncback du côté client et un ftp du côté serveur. Mais ça impose quelques limitations.  
 
Je ne cherche pas une usine à gaz comme owncloud, uniquement synchro de fichiers qui fonctionne (les conflits qui sortent de nul part sur owncloud...   ). Avec chiffrement côté client, mot de passe géré par le client lui-même (une des grosse limitation que j'ai actuellement vu que c'est basé sur du ftp) et idéalement du versioning (avec une limite sur la date des versions et sur la taille des fichiers).

Si tu trouve n'hesite pas a partager ca m'interesse aussi

Syncback ouais j'avais quelques soucis aussi.  
Dans ce genre de soft, Cobian est pas mal.

 
Owncloud j'ai deja dit ce que j'en pense... meme concolusions que toi
 
Ajaxplorer est très très bien effectivement, mais plutot comme une interface d'upload/download pour les toi et/ou des utilisateurs tiers (j'adore particulierement la possibilité de generer un lien a usage unique), en revanche aucune fonctionnalité de synchro
 
Seafile j'avais testé vite fait, pas trouvé comment utiliser un dossier existant comme repository => hop poubelle... (ca ressemble bcp a owncloud en fait, un pue plus mature mais c'est juste pas du tout ce que je cherche...)
 
Tu as eventuellement le client Sync de bit torrent qui commence a arriver, mais je n'ai pas testé serieusement.
Mais au meme titre que syncback ou cobian, je trouve la mise en oeuvre un peu trop technique pour le mettre en place chez mes parents par exemple... sur mes pc a la maison je controle ca me gene pas, mais sorti de ce cadre c'est plus compliqué...
 
Pour des utilisateurs "non-techniques" j'aurais tendance a privilegier une solution toute packagée:
- crashplan ou equivalent avec l'abo qui va bien pour chacun, ou bien un abo que toi tu prends et tu distribues des codes de partage (c'est prévu dans leur logiciel). On installe, ca backup, on n'en parle plus...
- passage sur mac et achat d'une time capsule ou equivalent (genre un disque dur usb sur la freebox, ou un petit syno 2 baies). Ca reste la solution la plus simple a mettre en place et la plus conviviale que j'ai vu jusqu'ici, vraiment super bien packagé... J'aimerai bien trouver l'equivalent sous windows (genre avec shadowCopy?)

Le système de sauvegarde Windows qui pointe vers un lecteur réseaux ?

Bah justement le systeme est un peu flou je trouve.
Deja shadowCopy est planqué au fin fond d'un menu de propriété de fichier, alors baser ma sauvegarde la dessus ne m'emballe pas plus que ca, surement à tort...
Et coté restauration je ne sais pas trop comment ca se passe...
Mais si qqun a un bon tuto sur la mise en place de shadow copy pour la sauvegarde sur NAS des pc de la maison, je suis preneur

Je parlais pas de shadow copy mais du système de sauvegarde du centre de sécurité (dispo depuis Vista je croit)

c'est ce que je fait sur mon pc du bureau (seven pro 64)
ça marche bien mais ça rame car il fragmente en zip de X Mo puis les envoie sur le réseau. dès que tu veux sauvegarder tes divx de vacances ou de gros fichiers pas compressible ça prends des heures et des heures

Plop,
J'ai un serveur Esxi avec une carte raid perc 6/i sas que j'ai dédié à une VM par contre je suis obligé de monter un raid hard pour qu'il voit les disques durs.
Le problème est que je préfère faire un raid soft.
Vous connaissez des cartes raid par cher ou je n'ai pas besoin de monter des array? comme ça je peux faire un raid soft.
J'ai besoin d'une carte pour la dédier à une vm via passthrough.
Merci d'avance.

la ibm m1015 citée plus haut fonctionne très bien en passthrough

 
La perc 5i est flashable avec un firmware de HBA LSI megaraid, ca la transforme en un simple controleur sas, vois si ce n'est pas aussi le cas de la 6i
http://www.overclock.net/t/359025/ [...] benchmarks
 
EDIT: http://www.virtuallyimpossible.co. [...] raid-card/ ca a l'air d'etre ca
 
Sinon a la maison pour la meme config j'ai une LSI (la perc 5i ne fonctionnait pas en passthrough)

Merci, je vais jeter un oeil sur le flashage et sur la m1015.

Bisso, j'ai lu ton post très intéressant concernant ton "build virtualisation". J'aimerai faire quelque chose d'équivalent mais je ne suis pas sur d'avoir cerné tous les problèmes de ESXi.
 
Au niveau hardware, je vise actuellement un Xeon e3-1220 v3. La carte mère n'est pas encore définie mais visiblement il n'existe pas une grande quantité de carte mère "serveur" en socket 1150.
 
Ma première VM serait mon NAS avec une m1015 (éventuellement flashée) avec 8 disques que j'aimerai passer avec VMDirectPath. A priori, il est possible de le faire sur la m1015. Mais qu'en est-il de la carte mère (probablement dans cette liste http://www.toppreise.ch/index.php? [...] =ecc&o=pa) et du CPU ?
 
Je suis également intéressé par les fonctionnalités vPro (notamment l'AMT) mais je n'en vois pas mention ici http://ark.intel.com/products/65734/. Par contre les cartes mères mentionnent l'IPMI. Est-ce qu'il s'agit de quelque chose d'équivalent mais géré par la carte mère ?

Le passthrough ca devrait le faire sans pb avec ta carte en effet
Pour le vtd il faut juste que ton cpu et la carte le supportent, avec un xeon je suppose que c'est une formalité, la cm que tu as en lien le supporte en tous cas
 
Pour le vpro, idem, elle le supporte (c'est tout en bas, 2e ligne du dernier bloc)
 
Tu peux aussi aller chez super micro sinon qui font de tres belles cartes pour dunserveur perso, avec un equivalent de vpro en un peu plus avancé

Quelle carte contrôleur est-ce que tu utilises dans ton système ? J'ai lu que les performances de la m1015 avec ESXi sont franchement mauvaises (20 MB/s) à cause de problème de cache.

 
Avec 2 vdev en raidz (4x4 et 4x2) sur une m1015 flashée IT, c'est pas francement la carte qui limite, c'est le réseau.

 
Pour ma part Intel SASUC8i qui est une LSI rebadgée
http://www.materiel.net/carte-cont [...] 60546.html

Bah LSI fournit IBM, Dell, Intel, HP et SuperMicro donc normal quoi