Bonsoir à tous
 
J'ai déjà installé plusieurs fois Linux et joué avec du LVM RAID etc. Mais cette fois, je dois installer Linux sur un serveur avec 10 HD de 4T (40 Tera) + 2 HD 300G ultra rapide.
 
Ma question est comment organiser (de la meilleur manière) une telle quantité de disque et espace ?
 
Le serveur est prévu pour faire tourner apache et postgres sql. (La DB devrait accroître rapidement mais j'ai aucune autre info sur ce point...)
 
Inutile de vous préciser que la panne et interruptions de service sont grandement déconseillés...
 
J'ai pensé à ceci :
 
/boot  512M  ext2
 
/ ; /home ; /opt ; /var sur les HD de 300 G LVM  ext4 RAID1
 
 
/data/db   LVM  4 * 4T  RAID5 etx4 + 1HD Hotspare
 
/backup  LVM  3 * 3T  RAID5  ext4 + 1 HD Hotspare
 
1 HD non utilisé pour avoir une réserve en cas de pépin.
 
 
Merci pour vos avis et conseils.

pour PG tu devrais faire 2 partitions, une pour le datadir et une pour les wals. selon ton volume de transactions calcule la place qu'il te faut pour ne pas que ton waldir soit plein. Si tu veux plus de dispo c'est 2 machines avec réplication. (et idealement une #3 pour y envoyer les wals et que la #2 les prenne pour sa replication; tu pourras aussi y coller tes backups)
 
un /backup en local ça ne vaut rien : si ta machine prend feu tu l'as dans l'os. les backups ça DOIT etre distant : (cf mon point au dessus)
 
maximise le ratio perfs/dispo avec un RAID 10 (tu auras donc 20T utiles) : tu le fais avec md et tu colles une couche LVM au dessus pour la souplesse.  
 
j'invoque les gourous du stockage, poke el barby

Pour cette volumétrie en DAS ZFS on linux en backend. LVM commence à être juste.

Merci pour vos réponses.
 
Je vais potasser sur PG pour la config sur 2 partitions. (J'avoue ne pas trop maitriser cette DB)...
 
Pour le backup, quand j'ai demandé la possibilité d'un backup sur tape, on m'a gentiment dit ...  va te faire f... avec tes 40T  :-)
 
Comme il y a 2 serveurs identiques, je conte bien faire le backup du serveur A sur le serveur B (Les 2 serveurs ne sont pas physiquement dans le même endroit)
Pour cela, je compte sur un rsync de la partition.
 
Je vais potasser aussi pour un RAID10...
 
Je me pose aussi la question du raid hardware ou software... Mais j'ai aucune expérience avec le Hardware (serveur Celvin de Fujitsu)  
 
Pour le ZFS, j’hésite, car j'ai aucune expérience avec ce FS, et la moindre merde, je peux compter que sur bibi...  
 
Bav

 
Sur une DB c'est un bon moyen d'avoir un truc moisi. PG a un systeme de replication intégré et de très bonnes docs

@black_lord
 
Mon intension est de créer via un script un export de la db dans un fichier sql sur cette partition /backup. Puis via rsync synchroniser ce fichier (l'exporter) vers le 2eme serveur.  
 
J'ai déjà testé cette méthode avec mysqldump et cela marche bien. J'imagine que c'est possible avec PG.
 

 
Alors là, c'est facile de te répondre : Celvin sont une série de NAS préconfigurés. 8 baies max. Et je connais très bien le firmware embarqué dessus (qui en passant est merdique pour le la DB, c'est principalement pour du filer).    
Si t'es en 10 baies, c'est soit du primergy (en l'occurrence du RX2530), soit un SP eternus sans baies DAS et avec juste 10 disques d'installés.

 
pourquoi faire un truc comme dans les années 90 ? Tu ajoutes plein d'étapes où ça peut mal se passer alors qu'une solution largement testée existe.
 
ton dump en sql : ça va poser des locks, les données exportées en SQL c'est énorme, utilise du binaire, le transfert est un risque de plus. il faut aussi monitorer ta partition de backup, le jour où elle ne suffit plus pour le dump, tu l'as dans l'os
 
Après tu fais comme tu veux, mais tu auras été prévenu  
 

 
ho ben alors tout va bien  

@black_lord
 
Encore merci pour tes réponses, mais qu'elle est la solution largement testée existante a laquelle tu fais référence dans ton post ?
 
Je ne suis vraiment pas réfractaire, mais comme indiqué, mes connaissances en PG sont limitées...
 
Je pense suivre ton conseil et créer une 2eme partition pour les wals.
 
As-tu une doc et/ou tuto qui pourront m'aider pour ce backup ?
 
@MystereieuseX
C'est un RX2540 : Si je te comprends --> Firmware merdique --> donc il est préférable d'utiliser du RAID software...  
 
Je vois aussi dans sa doc, Linux pour ce serveur c'est : SUSE ou Red Hat ou Oracle Linux...   Rien sur Debian !?!? Ca commence super bien...
 
Bav

 
Non, tu n'as pas compris : ça ne peut pas être du Celvin, parce qu'un Celvin est un nas tout intégré de chez fujitsu. Et qui en plus (le Celvin) à un firmware tout intégré, basé sur du linux (donc pas possibilité de changer d'OS), que je connais très bien ...

MysterieuseX : Effectivement, il y a 2 serveur PY RX2540 M4 12 baies avec 40T (+ 1 NAS CELVIN 8 *6T)  

Du coup, faut savoir quel sera l'adaptateur dedans (demande à ton représentant se qu'il va te livrer), de mémoire y'a que la broadcom, ça doit être la 540i qui a du cache et une option batterie (qu'il faudra que tu ais) qui sera OK pour du raid hard. Sinon en LVM/DM : pas de raid, les disques en jbod sur le contrôleur (et perf moisies vue la volumétrie).

Y a pas beaucoup de constructeurs qui supportent officiellement Debian.
Ca ne veut pas dire que ça ne fonctionnera pas.

La réplication c'est bien, mais c'est pas du backup.
C'est comme le RAID1, c'est bien pour la haute dispo, mais ça n'est pas un backup.

 
ce que je disais plus haut c'est d'avoir replication ET backup. et les backups c'est offsite ou rien

sinon pour appuyer ce qui est deja dit :
pour la repli : utilise les mécanismes natifs de PG.
pour le backup : la target doit être autre qu'un de tes 2 serveurs de DB.
pour la conf disque : écoute mystX