Forum |  HardWare.fr | News | Articles | PC | S'identifier | S'inscrire | Shop Recherche
2825 connectés 

 


 Mot :   Pseudo :  
 
 Page :   1  2  3  4  5  6  7  8  9  10  11  12  13
Auteur Sujet :

[Topic ZFS] ZFS on Linux et BSD - débats/questions

n°1392445
sligor
Posté le 19-07-2016 à 14:49:31  profilanswer
 

Reprise du message précédent :
j'ai la même chose
 
et pas de version non plus sur les zvol


---------------
qwerty-fr
mood
Publicité
Posté le 19-07-2016 à 14:49:31  profilanswer
 

n°1392446
qwrty
BFG!
Posté le 19-07-2016 à 14:51:32  profilanswer
 

Ok, donc tout est "normal".
 
Merci :jap:


---------------
[VDS] Embouts de watercooling 10/16 | ~Feed-Back
n°1392447
fdaniel
Have you got a 27B/6 ?
Posté le 19-07-2016 à 14:53:50  profilanswer
 

La commande "zpool version" me sort bien le même numéro de version que "zfs version" si je lui indique le pool à examiner (sinon ça ne remonte en effet rien). Une explication en anglais ici : https://github.com/zfsonlinux/zfs/issues/1670
 
L'affichage de la version 5 daterait de la mise à disposition en open source de ZFS, il faut passer par la liste des features (donc le zpool upgrade -v) pour déterminer exactement à quel niveau on est.


---------------
Topic des restos / Topic des boutiques gastronomiques
n°1392481
qwrty
BFG!
Posté le 20-07-2016 à 21:36:22  profilanswer
 

:hello:  
 
encore moi :o  
 
Je continue mes expérience avec ZFS pour voir si ça va devenir mon système de stockage ou pas...
 
Sauf que quand il y a de grosses actions sur le pool, genre extraction d'archive + telechargement, beh je me retrouve avec des erreur....
 
Alors que mes disques sont bon et la ram ecc
 
Je pense que qqch m'échappe  :??:  :??:  
 
Genre là le status du pool:
 

Citation :

# zpool status
  pool: volume1
 state: ONLINE
status: One or more devices has experienced an unrecoverable error.  An
        attempt was made to correct the error.  Applications are unaffected.
action: Determine if the device needs to be replaced, and clear the errors
        using 'zpool clear' or replace the device with 'zpool replace'.
   see: http://zfsonlinux.org/msg/ZFS-8000-9P
  scan: resilvered 55,3G in 0h9m with 0 errors on Tue Jul 19 17:12:21 2016
config:
 
        NAME        STATE     READ WRITE CKSUM
        volume1     ONLINE       0     0     0
          raidz1-0  ONLINE       0     0     0
            sda     ONLINE       0     0     0
            sdb     ONLINE       0     0     0
            sdc     ONLINE       0     0    35
 
errors: No known data errors


 
La première fois il était carrément en dégradé le pool :/
 
Mes disques sont clean au niveau de leurs valeurs SMART.
 
Je vais peu etre retourner sur mdadm  :whistle:


Message édité par qwrty le 20-07-2016 à 21:39:26

---------------
[VDS] Embouts de watercooling 10/16 | ~Feed-Back
n°1392482
Xum
Posté le 20-07-2016 à 22:21:34  profilanswer
 

Quand tu dis que tes disques sont clean niveau SMART t'as fait un long selftest pour le confirmer? Ou un short selftest ou encore juste un smartctl -a ?

n°1392483
sligor
Posté le 20-07-2016 à 22:26:19  profilanswer
 

tu peux copier coller la sortie de smartctl -a /dev/sdc ?


---------------
qwerty-fr
n°1392485
qwrty
BFG!
Posté le 20-07-2016 à 23:06:00  profilanswer
 

J'ai fais des longtest (~12h) avant de les mettre en définitive dans le serveur.
 
Voilà pour mon sdc:
 
 

Spoiler :

smartctl -a /dev/sdc
smartctl 6.4 2014-10-07 r4002 [x86_64-linux-4.6.3] (local build)
Copyright (C) 2002-14, Bruce Allen, Christian Franke, www.smartmontools.org
 
=== START OF INFORMATION SECTION ===
Device Model:     WDC WD60EFRX-68L0BN1
Serial Number:    WD-WX11DC580T7Z
LU WWN Device Id: 5 0014ee 262a05bd2
Firmware Version: 82.00A82
User Capacity:    6 001 175 126 016 bytes [6,00 TB]
Sector Sizes:     512 bytes logical, 4096 bytes physical
Rotation Rate:    5700 rpm
Device is:        Not in smartctl database [for details use: -P showall]
ATA Version is:   ACS-2, ACS-3 T13/2161-D revision 3b
SATA Version is:  SATA 3.1, 6.0 Gb/s (current: 3.0 Gb/s)
Local Time is:    Wed Jul 20 23:05:25 2016 CEST
SMART support is: Available - device has SMART capability.
SMART support is: Enabled
 
=== START OF READ SMART DATA SECTION ===
SMART overall-health self-assessment test result: PASSED
 
General SMART Values:
Offline data collection status:  (0x00) Offline data collection activity
                                        was never started.
                                        Auto Offline Data Collection: Disabled.
Self-test execution status:      (   0) The previous self-test routine completed
                                        without error or no self-test has ever
                                        been run.
Total time to complete Offline
data collection:                ( 5024) seconds.
Offline data collection
capabilities:                    (0x7b) SMART execute Offline immediate.
                                        Auto Offline data collection on/off support.
                                        Suspend Offline collection upon new
                                        command.
                                        Offline surface scan supported.
                                        Self-test supported.
                                        Conveyance Self-test supported.
                                        Selective Self-test supported.
SMART capabilities:            (0x0003) Saves SMART data before entering
                                        power-saving mode.
                                        Supports SMART auto save timer.
Error logging capability:        (0x01) Error logging supported.
                                        General Purpose Logging supported.
Short self-test routine
recommended polling time:        (   2) minutes.
Extended self-test routine
recommended polling time:        ( 703) minutes.
Conveyance self-test routine
recommended polling time:        (   5) minutes.
SCT capabilities:              (0x303d) SCT Status supported.
                                        SCT Error Recovery Control supported.
                                        SCT Feature Control supported.
                                        SCT Data Table supported.
 
SMART Attributes Data Structure revision number: 16
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x002f   135   060   051    Pre-fail  Always       -       2539
  3 Spin_Up_Time            0x0027   100   253   021    Pre-fail  Always       -       0
  4 Start_Stop_Count        0x0032   100   100   000    Old_age   Always       -       2
  5 Reallocated_Sector_Ct   0x0033   197   197   140    Pre-fail  Always       -       115
  7 Seek_Error_Rate         0x002e   199   199   000    Old_age   Always       -       43
  9 Power_On_Hours          0x0032   100   100   000    Old_age   Always       -       65
 10 Spin_Retry_Count        0x0032   100   253   000    Old_age   Always       -       0
 11 Calibration_Retry_Count 0x0032   100   253   000    Old_age   Always       -       0
 12 Power_Cycle_Count       0x0032   100   100   000    Old_age   Always       -       2
192 Power-Off_Retract_Count 0x0032   200   200   000    Old_age   Always       -       0
193 Load_Cycle_Count        0x0032   200   200   000    Old_age   Always       -       2
194 Temperature_Celsius     0x0022   114   110   000    Old_age   Always       -       38
196 Reallocated_Event_Count 0x0032   166   166   000    Old_age   Always       -       34
197 Current_Pending_Sector  0x0032   200   200   000    Old_age   Always       -       0
198 Offline_Uncorrectable   0x0030   100   253   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count    0x0032   200   200   000    Old_age   Always       -       0
200 Multi_Zone_Error_Rate   0x0008   200   200   000    Old_age   Offline      -       0
 
SMART Error Log Version: 1
No Errors Logged
 
SMART Self-test log structure revision number 1
Num  Test_Description    Status                  Remaining  LifeTime(hours)  LBA_of_first_error
# 1  Extended offline    Completed without error       00%        12         -
 
SMART Selective self-test log data structure revision number 1
 SPAN  MIN_LBA  MAX_LBA  CURRENT_TEST_STATUS
    1        0        0  Not_testing
    2        0        0  Not_testing
    3        0        0  Not_testing
    4        0        0  Not_testing
    5        0        0  Not_testing
Selective self-test flags (0x0):
  After scanning selected spans, do NOT read-scan remainder of disk.
If Selective self-test is pending on power-up, resume after 0 minute delay.


 
edit: beh en fait il y a des secteurs réalloués sur le disque... que je n'avais pas il y a encore 2 jours... :heink:  
 
Ils sont quasi neuf, a peine 65h...
 
Je suis bon pour un SAV en fait  :(
 
edit2: les deux autres sont bon toujours a priori:
 

Spoiler :

ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x002f   200   200   051    Pre-fail  Always       -       0
  3 Spin_Up_Time            0x0027   213   201   021    Pre-fail  Always       -       8333
  4 Start_Stop_Count        0x0032   100   100   000    Old_age   Always       -       24
  5 Reallocated_Sector_Ct   0x0033   200   200   140    Pre-fail  Always       -       0
  7 Seek_Error_Rate         0x002e   100   253   000    Old_age   Always       -       0
  9 Power_On_Hours          0x0032   099   099   000    Old_age   Always       -       989
 10 Spin_Retry_Count        0x0032   100   253   000    Old_age   Always       -       0
 11 Calibration_Retry_Count 0x0032   100   253   000    Old_age   Always       -       0
 12 Power_Cycle_Count       0x0032   100   100   000    Old_age   Always       -       24
192 Power-Off_Retract_Count 0x0032   200   200   000    Old_age   Always       -       7
193 Load_Cycle_Count        0x0032   200   200   000    Old_age   Always       -       113
194 Temperature_Celsius     0x0022   112   109   000    Old_age   Always       -       40
196 Reallocated_Event_Count 0x0032   200   200   000    Old_age   Always       -       0
197 Current_Pending_Sector  0x0032   200   200   000    Old_age   Always       -       0
198 Offline_Uncorrectable   0x0030   100   253   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count    0x0032   200   200   000    Old_age   Always       -       0
200 Multi_Zone_Error_Rate   0x0008   200   200   000    Old_age   Offline      -       0


 

Spoiler :

SMART Attributes Data Structure revision number: 16
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x002f   200   200   051    Pre-fail  Always       -       0
  3 Spin_Up_Time            0x0027   100   253   021    Pre-fail  Always       -       0
  4 Start_Stop_Count        0x0032   100   100   000    Old_age   Always       -       2
  5 Reallocated_Sector_Ct   0x0033   200   200   140    Pre-fail  Always       -       0
  7 Seek_Error_Rate         0x002e   100   253   000    Old_age   Always       -       0
  9 Power_On_Hours          0x0032   100   100   000    Old_age   Always       -       65
 10 Spin_Retry_Count        0x0032   100   253   000    Old_age   Always       -       0
 11 Calibration_Retry_Count 0x0032   100   253   000    Old_age   Always       -       0
 12 Power_Cycle_Count       0x0032   100   100   000    Old_age   Always       -       2
192 Power-Off_Retract_Count 0x0032   200   200   000    Old_age   Always       -       0
193 Load_Cycle_Count        0x0032   200   200   000    Old_age   Always       -       2
194 Temperature_Celsius     0x0022   113   110   000    Old_age   Always       -       39
196 Reallocated_Event_Count 0x0032   200   200   000    Old_age   Always       -       0
197 Current_Pending_Sector  0x0032   200   200   000    Old_age   Always       -       0
198 Offline_Uncorrectable   0x0030   100   253   000    Old_age   Offline      -       0
199 UDMA_CRC_Error_Count    0x0032   200   200   000    Old_age   Always       -       0
200 Multi_Zone_Error_Rate   0x0008   200   200   000    Old_age   Offline      -       0


Message édité par qwrty le 20-07-2016 à 23:15:47

---------------
[VDS] Embouts de watercooling 10/16 | ~Feed-Back
n°1392486
sligor
Posté le 20-07-2016 à 23:10:37  profilanswer
 

5 Reallocated_Sector_Ct   0x0033   197   197   140    Pre-fail  Always       -       115  
196 Reallocated_Event_Count 0x0032   166   166   000    Old_age   Always       -       34


il ne va pas si bien que ça ton disque


---------------
qwerty-fr
n°1392487
qwrty
BFG!
Posté le 20-07-2016 à 23:12:58  profilanswer
 

Au final oui il est a changer... pourtant quand j'ai fais le longtest, RAS et les compteurs etaient comme le petit dernier que j'ai mis juste au dessus...
 
65h, de fonctionnement...
Sympa les disques chez WD :sweat:
 
Il se passe comment le SAV WD ? Ils envoient d'abord un disque dur et on renvoi le défectueux après ?


Message édité par qwrty le 20-07-2016 à 23:19:22

---------------
[VDS] Embouts de watercooling 10/16 | ~Feed-Back
n°1392488
sligor
Posté le 20-07-2016 à 23:26:29  profilanswer
 

après ce ne veut pas dire qu'il va mourir, juste qu'il a eu des erreurs et que ZFS a fait sont job sur les secteur défectueux.  
Si tu veux le garder fait un "zpool clear <pool> <device>" lance un scrub et fait régulièrement des scrub et regarde comment ça évolue.


Message édité par sligor le 20-07-2016 à 23:27:57

---------------
qwerty-fr
mood
Publicité
Posté le 20-07-2016 à 23:26:29  profilanswer
 

n°1392489
qwrty
BFG!
Posté le 20-07-2016 à 23:45:06  profilanswer
 

Je prefere pas prendre de risque, le disque est neuf, direct SAV... je cherche même pas a comprendre, je préfère le faire mnt avec aucune données sur les disques que plus tard quand les disque seront remplis ^^


---------------
[VDS] Embouts de watercooling 10/16 | ~Feed-Back
n°1392490
Xum
Posté le 20-07-2016 à 23:47:19  profilanswer
 

Oui ça peut se stabiliser...après s'il est sous garantie autant pas s'embeter et demande un remplacement.
 
Je te conseille de plannifier des short test SMART  pour tous tes disques du zpool au moins 1 par semaine (pour les 2min que ça prend...) et un long test 1 à 2 fois par mois. Ça permet de bien monitorer ses disques sur la durée, de reagir des qu'il y a des signes de dégradation et pas s'en rendre compte trop tard ;)

n°1392491
Xum
Posté le 20-07-2016 à 23:52:40  profilanswer
 

Le SAV WD tu fais une demande RMA sur leur site, t'envoies ton disque, en general sur erreur SMART ils confirment assez vite le probleme et tu reçois un nouveau disque.
 
J'avais eu le cas pour un WD RED ça a pris 10j  (en comptant le we, entre le moment où j'ai envoyé le mien et reçu l'autre

n°1392493
qwrty
BFG!
Posté le 21-07-2016 à 09:09:08  profilanswer
 

Merci Xum pour tes messages :jap:  
 
j'ai fais la demande de RMA hier soir, il y meme une option RMA avec l'envois d'abord effectué par WD, mais il gèle le montant du disque sur la carte bleue au cas où le client ne renvois pas le disque défectueux.
 
J'ai fais une demande classique par forcément pressé en fait, au point où j'en suis :lol:
 
Par contre moins gentil que le SAV Toshiba, ils envoie une étiquette UPS prépayé pour l'envoie du disque défectueux eux  :o


Message édité par qwrty le 21-07-2016 à 09:11:08

---------------
[VDS] Embouts de watercooling 10/16 | ~Feed-Back
n°1392612
sligor
Posté le 26-07-2016 à 10:19:30  profilanswer
 

je me suis fait avoir avec la compression je voulais copier un dossier sur un disque externe USBen ext4. je fait 'du -sh' sur le dossier : 1.6TB, ça va je suis tranquille. sauf que en fait ça faisait 3.9TB :D
 
( il faut faire 'du -sh --apparent-size', et encore.... ça ne prend pas en compte la place perdue sur ext4 avec les metadata et les blocs non pleins, quand on a beaucoup de petits fichiers ça peut faire une grosse différence)

Message cité 1 fois
Message édité par sligor le 26-07-2016 à 10:19:49

---------------
qwerty-fr
n°1392613
el_barbone
too old for this shit ...
Posté le 26-07-2016 à 10:47:28  profilanswer
 

sligor a écrit :

je me suis fait avoir avec la compression je voulais copier un dossier sur un disque externe USBen ext4. je fait 'du -sh' sur le dossier : 1.6TB, ça va je suis tranquille. sauf que en fait ça faisait 3.9TB :D


[:hahaguy]


---------------
En théorie, la théorie et la pratique sont identiques, en pratique, non.
n°1392614
sligor
Posté le 26-07-2016 à 11:39:53  profilanswer
 

j'ai pas l'habitude des fs à compression transparente  [:cerveau totoz]  
 
mais du coup ZFS on Linux c'est utilisable sur un disque dur externe branché en USB ou c'est prendre de très gros risques ? :??:

Message cité 3 fois
Message édité par sligor le 26-07-2016 à 11:40:05

---------------
qwerty-fr
n°1392615
el_barbone
too old for this shit ...
Posté le 26-07-2016 à 11:40:36  profilanswer
 

sligor a écrit :

j'ai pas l'habitude des fs à compression transparente  [:cerveau totoz]

 

mais du coup ZFS on Linux c'est utilisable sur un disque dur externe branché en USB ou c'est prendre de très gros risques ? :??:


je le ferai pas ...

n°1392616
Mysterieus​eX
Chieuse
Posté le 26-07-2016 à 12:49:56  profilanswer
 

sligor a écrit :

j'ai pas l'habitude des fs à compression transparente  [:cerveau totoz]  
 
mais du coup ZFS on Linux c'est utilisable sur un disque dur externe branché en USB ou c'est prendre de très gros risques ? :??:


 
 :heink:

n°1392618
fdaniel
Have you got a 27B/6 ?
Posté le 26-07-2016 à 13:33:13  profilanswer
 

sligor a écrit :

mais du coup ZFS on Linux c'est utilisable sur un disque dur externe branché en USB ou c'est prendre de très gros risques ? :??:


Je sauvegarde une partie de mes données sur un disque externe (snapshot puis send/receive). En utilisation ponctuelle ou légère c'est AMHA pas plus risqué que n'importe quel autre FS.


---------------
Topic des restos / Topic des boutiques gastronomiques
n°1392620
sligor
Posté le 26-07-2016 à 13:48:06  profilanswer
 


il pourrait y avoir des bugs au niveau du power management/synchronisation des buffer etc....  :??:


---------------
qwerty-fr
n°1392633
LOL POLARI​SE
cadre en trading
Posté le 26-07-2016 à 21:14:12  profilanswer
 

sligor a écrit :


il pourrait y avoir des bugs au niveau du power management/synchronisation des buffer etc....  :??:


 
Bof, a priori ça se joue à des niveaux différents.


---------------
Le monsieur arrive.
n°1392638
Mysterieus​eX
Chieuse
Posté le 27-07-2016 à 01:18:45  profilanswer
 

Différence de disponibilité des versions du FS sur les différents OS auxquels tu attachera le DD usb. Le scrub automatique. ZFS qui n'est pas vraiment hotplug.

n°1395144
fdaniel
Have you got a 27B/6 ?
Posté le 22-09-2016 à 12:07:09  profilanswer
 

J'ai un souci bizarre dont je ne me rends compte qu'aujourd'hui : j'avais créé un pool de 2x2 miroirs sur des disques de 4 To (les ata* listés ci-dessous, le pool est en cours de resilvering mais ça n'est pas censé changer grand chose au problème) :
 

# zpool status
  pool: pool-data
 state: ONLINE
status: One or more devices is currently being resilvered.  The pool will
        continue to function, possibly in a degraded state.
action: Wait for the resilver to complete.
  scan: resilver in progress since Thu Sep 22 11:43:11 2016
    94,3G scanned out of 2,50T at 121M/s, 5h48m to go
    47,1G resilvered, 3,68% done
config:
        NAME                                                  STATE     READ WRITE CKSUM
        pool-data                                             ONLINE       0     0     0
          mirror-0                                            ONLINE       0     0     0
            ata-ST3000DM001-9YN166_S1F06PFV                   ONLINE       0     0     0
            ata-ST3000DM001-9YN166_S1F09FSG                   ONLINE       0     0     0
          mirror-1                                            ONLINE       0     0     0
            ata-ST3000DM001-9YN166_S1F09DEF                   ONLINE       0     0     0
            ata-ST3000DM001-9YN166_S1F09CV3                   ONLINE       0     0     0  (re
silvering)
        logs
          mirror-2                                            ONLINE       0     0     0
            ata-INTEL_SSDSC2KW120H6_CVLT614005JQ120GGN-part3  ONLINE       0     0     0
            ata-INTEL_SSDSC2KW120H6_CVLT614101Z6120GGN-part3  ONLINE       0     0     0
        cache
          ata-INTEL_SSDSC2KW120H6_CVLT614005JQ120GGN-part4    ONLINE       0     0     0
          ata-INTEL_SSDSC2KW120H6_CVLT614101Z6120GGN-part4    ONLINE       0     0     0
errors: No known data errors


 
Logiquement la taille du pool approche donc les 6 To (agrégation de 2 miroirs de 3 To chacun) :

# zpool list pool-data
NAME        SIZE  ALLOC   FREE  EXPANDSZ   FRAG    CAP  DEDUP  HEALTH  ALTROOT
pool-data  5,44T  2,50T  2,93T         -    26%    46%  1.00x  ONLINE  -


 
Mais la taille du FS créé dessus est limitée à la moitié de ça :

# # zfs list -r pool-data
NAME                     USED  AVAIL  REFER  MOUNTPOINT
pool-data               2,50T  2,76T   108K  /data
pool-data/backup        5,90G  24,1G  5,90G  /data/backup
pool-data/cloud          223M  19,8G   196M  /data/cloud
pool-data/ftp           1,73T   274G    96K  /data/ftp
pool-data/ftp/movies    1020G   180G  1020G  /data/ftp/movies
pool-data/ftp/music      639G   161G   639G  /data/ftp/music
pool-data/ftp/software   108G  41,9G   108G  /data/ftp/software
pool-data/ftp/uploads   6,32G  43,7G  6,32G  /data/ftp/uploads
pool-data/sharing        784G  16,3G   549G  /data/sharing


Je précise qu'il n'y a évidemment pas de quota sur la racine pool-data. Une idée de ce qui limite la taille à la moitié du volume des disques ? Iostat semble pourtant montrer que les 4 bossent uniformément.


---------------
Topic des restos / Topic des boutiques gastronomiques
n°1395145
sligor
Posté le 22-09-2016 à 12:17:05  profilanswer
 

AVAIL c'est pas ce qui est libre ?

n°1395146
fdaniel
Have you got a 27B/6 ?
Posté le 22-09-2016 à 13:01:26  profilanswer
 

Non, c'est bien le total, un df m'indique la même valeur.
 

# df -h /data
pool-data                  2,8T  128K  2,8T   1% /data


En vérifiant un peu plus la distribution des données semble égale entre les 2 miroirs, du coup je ne comprends toujours pas ce qui limite l'espace dispo :
 

# zpool list -v
NAME   SIZE  ALLOC   FREE  EXPANDSZ   FRAG    CAP  DEDUP  HEALTH  ALTROOT
pool-data  5,44T  2,51T  2,93T         -    26%    46%  1.00x  ONLINE  -
  mirror  2,72T  1,25T  1,47T         -    26%    46%
    ata-ST3000DM001-9YN166_S1F06PFV      -      -      -         -      -      -
    ata-ST3000DM001-9YN166_S1F09FSG      -      -      -         -      -      -
  mirror  2,72T  1,25T  1,47T         -    26%    46%
    ata-ST3000DM001-9YN166_S1F09DEF      -      -      -         -      -      -
    ata-ST3000DM001-9YN166_S1F09CV3      -      -      -         -      -      -
log      -      -      -         -      -      -
  mirror  29,8G   388K  29,7G         -     0%     0%
    ata-INTEL_SSDSC2KW120H6_CVLT614005JQ120GGN-part3      -      -      -         -      -    
   -
    ata-INTEL_SSDSC2KW120H6_CVLT614101Z6120GGN-part3      -      -      -         -      -    
   -
cache      -      -      -         -      -      -
  ata-INTEL_SSDSC2KW120H6_CVLT614005JQ120GGN-part4  46,4G  1,59G  44,8G         -     0%      
3%
  ata-INTEL_SSDSC2KW120H6_CVLT614101Z6120GGN-part4  46,4G  1,66G  44,7G         -     0%      
3%


 
EDIT => ayant vu ici et là des mentions d'anciens bugs liés aux snapshots j'ai viré tous ceux qui avaient été générés, mais je ne récupère logiquement que la taille qu'ils occupaient :
 

# zfs list pool-data
NAME        USED  AVAIL  REFER  MOUNTPOINT
pool-data  2,27T  2,99T   108K  /data


Message édité par fdaniel le 22-09-2016 à 15:35:36

---------------
Topic des restos / Topic des boutiques gastronomiques
n°1395152
fdaniel
Have you got a 27B/6 ?
Posté le 22-09-2016 à 16:14:15  profilanswer
 

Bon, en fait je crois avoir compris de quoi il retourne, la confusion était plutôt de mon côté, les valeurs FREE du zfs et AVAIL du zpool correspondent finalement à peu près à la même chose, modulo les méta-données et cie non-comptabilisées par zpool mais prises en compte par zfs :
 

# zfs list
NAME                     USED  AVAIL  REFER  MOUNTPOINT
pool-data               2,27T  2,99T   108K  /data
pool-data/backup        5,90G  2,99T  5,90G  /data/backup
pool-data/cloud          198M  2,99T   198M  /data/cloud
pool-data/ftp           1,73T  2,99T    96K  /data/ftp
pool-data/ftp/movies    1020G  2,99T  1020G  /data/ftp/movies
pool-data/ftp/music      639G  2,99T   639G  /data/ftp/music
pool-data/ftp/software   108G  2,99T   108G  /data/ftp/software
pool-data/ftp/uploads   6,32G  2,99T  6,32G  /data/ftp/uploads
pool-data/sharing        549G  2,99T   549G  /data/sharing
# zpool list
NAME        SIZE  ALLOC   FREE  EXPANDSZ   FRAG    CAP  DEDUP  HEALTH  ALTROOT
pool-data  5,44T  2,27T  3,16T         -    25%    41%  1.00x  ONLINE  -


Mes problèmes venaient en fait de la gestion des quotas, j'en avais positionné sur tous les FS mais combinés aux snapshots je me retrouvais avec une taille visible par df qui diminuait, et surtout une commande zfs quota qui refusait de l'augmenter parce qu'elle ne voyait pas assez d'espace disponible (il y a peut-être un bug à ce niveau-là, je ne sais pas). Bref j'ai supprimé tous les quotas pour vérifier que l'espace dispo était bien visible par df et zfs list, je les ai recréés et je garderai ça dans un coin de ma tête.


---------------
Topic des restos / Topic des boutiques gastronomiques
n°1395647
qwrty
BFG!
Posté le 03-10-2016 à 10:22:09  profilanswer
 

Dites, petite question, si je veux upgrader mon kernel, il faut que je recompile spl / zfs ?
 
Ça ne craint pas pour les données ? car je supose que le pool sera dans les choux ?
Technique particulière pour ce genre de manip ?
 
:jap:


---------------
[VDS] Embouts de watercooling 10/16 | ~Feed-Back
n°1395654
fdaniel
Have you got a 27B/6 ?
Posté le 03-10-2016 à 10:51:29  profilanswer
 

Tu es sur quelle distrib ? Si tu as installé le tout via les dépôts Debian / Ubuntu à chaque mise à jour du noyau les modules sont automatiquement recompilés. Quand j'étais en Ubuntu 14.04 je n'ai jamais eu de souci particulier, au pire il faut faire un zpool upgrade après reboot pour prendre en compte les nouvelles fonctionnalités mais c'est rare, et le pool est toujours dispo quoiqu'il arrive. En 16.04 c'est intégré à la distrib, du coup on s'épargne le temps de recompilation à chaque mise à jour.


---------------
Topic des restos / Topic des boutiques gastronomiques
n°1395655
sligor
Posté le 03-10-2016 à 10:53:45  profilanswer
 

fdaniel a écrit :

Si tu as installé le tout via les dépôts Debian / Ubuntu à chaque mise à jour du noyau les modules sont automatiquement recompilés.


à condition d'installer les linux-headers-xxxx correspondants au kernel installé, d'ailleurs ça prend bien 5 minutes à recompiler, ne pas s'inquiéter si ça semble bloqué


Message édité par sligor le 03-10-2016 à 10:54:32
n°1395658
qwrty
BFG!
Posté le 03-10-2016 à 11:07:07  profilanswer
 

Merci pour vos, retour.
 
Je tournes sous Debian.
Donc rien de vraiment particulier à faire.
Au pire je recompile à la mano ZFS et SPL si après upgrade du kernel il ne les recompile pas automatiquement.
 
C’était surtout pour le pool que j'avais peur.
 
4.8 me voilà  :o


---------------
[VDS] Embouts de watercooling 10/16 | ~Feed-Back
n°1395680
phraide
Posté le 03-10-2016 à 20:45:32  profilanswer
 

pour info zfs est arrivé dans les backport jessie il y a peu.
ma migration zfsonlinux.org vers backports a été un peu barbare :
zpool export
dpkg --purge zfs* et 2-3 deps
apt-get install -j jessie-backport zfsjesaisplusquoi
zpool import et rulezzz


---------------
I'm too old for this shit.
n°1396216
shalkys3
made in rimard
Posté le 17-10-2016 à 15:24:21  profilanswer
 

Ou en est on en 2016 avec le RAID soft ?  
 
J'ai une carte adaptec 256Mo+Batterie qui roxx pas mal dans mes cartons et je viens de commander un microproliant g8 (8gb ECC).  
J'hésite à l'installer pour faire un NAS homemade.  
Je veux faire du raid1 uniquement (2X2tb + 2x1tb)  
 
J'ai lu à droite à gauche que le ZFS (Freenas) serait plus fiable qu'une carte dédiée pour peu qu'on lui donne suffisamment de ram.  
 
A l'époque le raid soft (ext4) sur Syno ou autre Nas m'avait fait fuir (coupure de courant = perte de grappe voir de données).  
D'après ce que j'ai lu c'est impossible avec ZFS.  
 
 
Ma machine sera dédié au NAS (rien d'autre).  
Pensez vous que je dois installer l'adaptec ou le Raid soft sera plus adapté ?  
Quels avantages / inconvénients dans les deux cas ?  
 
 
Merci !

n°1396220
sligor
Posté le 17-10-2016 à 15:56:28  profilanswer
 

heu... en RAID1 tu n'auras aucun problème même avec mdadm+ext4 en cas de coupure de courant. En raid5/6 le problème du write hole peut se poser, mais le risque de mettre en vrac le système reste très faible.
 
Sinon les write cache avec batterie c'est pour accélérer les écriture synchrones (base de donnée SQL par exemple), sinon l'interêt est faible si les écritures ne sont pas synchrones. Si tu fais des écritures massive vers base de donnée SQL alors avec ZFS il faut les rajouter un log device (ZIL ou SLOG) rapide avec un endurance en écriture correcte, un petit SSD pro par exemple. Ca va remplacer de façon software la cache avec batterie en utilisant le SSD à la place.

Message cité 1 fois
Message édité par sligor le 17-10-2016 à 16:06:25
n°1396223
shalkys3
made in rimard
Posté le 17-10-2016 à 16:23:55  profilanswer
 

Citation :

RAID1 tu n'auras aucun problème même avec mdadm+ext4 en cas de coupure de courant


 
Avant j'étais au backup dans une SS2I et c'était pas rare :D  
D'après toi aucun intérêt de passer sur du hard donc ?

n°1396260
LOL POLARI​SE
cadre en trading
Posté le 18-10-2016 à 11:08:36  profilanswer
 

sligor a écrit :

heu... en RAID1 tu n'auras aucun problème même avec mdadm+ext4 en cas de coupure de courant. En raid5/6 le problème du write hole peut se poser, mais le risque de mettre en vrac le système reste très faible.
 
Sinon les write cache avec batterie c'est pour accélérer les écriture synchrones (base de donnée SQL par exemple), sinon l'interêt est faible si les écritures ne sont pas synchrones. Si tu fais des écritures massive vers base de donnée SQL alors avec ZFS il faut les rajouter un log device (ZIL ou SLOG) rapide avec un endurance en écriture correcte, un petit SSD pro par exemple. Ca va remplacer de façon software la cache avec batterie en utilisant le SSD à la place.


 
Par contre le log device doit être mis en raid1.


---------------
Le monsieur arrive.
n°1396261
sligor
Posté le 18-10-2016 à 11:15:08  profilanswer
 

LOL POLARISE a écrit :


 
Par contre le log device doit être mis en raid1.


en effet :jap:

n°1399191
tsplayer20​01
Posté le 29-12-2016 à 17:49:41  profilanswer
 

Bonjour :)

 

J'ai un prob de pool corrompu qui provoque un freeze au montage; si quelqu'un à une idée détail et historique complet ici :
http://forum.hardware.fr/hfr/OSAlt [...] m#t1399135

 

merci d'avance :jap:

 


Edit : Problème résolu de manière semie inconnue...
 
J'avais laissé le ZDB tourner dans un "screen" sur la durée, après 2J il a brutalement accéléré (p-e après le bloc en Gzip9?) et fini en 2J de plus... Une fois fini, j'avais oublié. J'ai eu une coupure de courant, et au reboot le ZFS à monté automatiquement... Je suis pas entièrement sur; mais p-e que la commande ZDB à aidé ???
 
C'est en train de scrub; mais à première vue tout mes fichiers sont là.

 


Message cité 1 fois
Message édité par tsplayer2001 le 31-12-2016 à 22:35:23

---------------
achats et vieux materiel à vendre
n°1399263
Mysterieus​eX
Chieuse
Posté le 01-01-2017 à 13:59:59  profilanswer
 

tsplayer2001 a écrit :

Bonjour :)
 
J'ai un prob de pool corrompu qui provoque un freeze au montage; si quelqu'un à une idée détail et historique complet ici :
http://forum.hardware.fr/hfr/OSAlt [...] m#t1399135
 
merci d'avance :jap:
 
 
Edit : Problème résolu de manière semie inconnue...
 
J'avais laissé le ZDB tourner dans un "screen" sur la durée, après 2J il a brutalement accéléré (p-e après le bloc en Gzip9?) et fini en 2J de plus... Une fois fini, j'avais oublié. J'ai eu une coupure de courant, et au reboot le ZFS à monté automatiquement... Je suis pas entièrement sur; mais p-e que la commande ZDB à aidé ???
 
C'est en train de scrub; mais à première vue tout mes fichiers sont là.
 


 
ZDB peut résoudre des problèmes de checksum/consistance, ça peut donc résoudre certains problèmes oui.


Message édité par MysterieuseX le 01-01-2017 à 14:00:22
n°1399331
qwrty
BFG!
Posté le 03-01-2017 à 15:24:03  profilanswer
 

phraide a écrit :

pour info zfs est arrivé dans les backport jessie il y a peu.
ma migration zfsonlinux.org vers backports a été un peu barbare :
zpool export
dpkg --purge zfs* et 2-3 deps
apt-get install -j jessie-backport zfsjesaisplusquoi
zpool import et rulezzz


 
J'ai enfin fait ma migration de kernel vers le 4.8.15 et passage du repo zfsonlinux.org avec la version 0.6.5.7 vers les backports en version 0.6.5.8
Je n'ai pas vraiment eu le temps de le faire plus tôt...
 
Sinon la migration à plutôt était sale comme phraide mais fonctionnelle :o
la purge de certain paquet ne s'est pas aussi bien passé que phraide, j'ai du en supprimer de force, or certains avaient des dépendances avec grub, grub2 toussa toussa, pas bon signe, certainement à cause de mon ancienne installe de ZFS que j'ai du faire pour possiblement avoir le choix de boot sur un partition ZFS, donc grub et tous mes programmes d'amorçages avaient été modifié en ce sens.
Rien de rassurant, mais c'est bon je m'en suis sortis tant bien que mal  :ange:  
 
Ah si j'ai eu aussi un soucis avec le daemon zed qui ne se lancait pas aussi. Apparemment lié à un problème paquet propre à debian.
En effet suite install des 0.6.5.8 je n'avais pas le daemon zed dans /sbin/ mais il c’était foutu dans /usr/sbin/...
 
bref c’était un petit retour informel.
 
D'ailleurs je me demandais, lors de l'installation des headers du nouveau kernel celui ci est censé recompilé spl et zfs et me copier les header dans /usr/source/ ce qu'il fait bien, sauf que DKMS lui va chercher les headers dans /lib/module/ or lors de l'installation des headers je n'ai pas encore le lien symbolique "build" qui renvoi dans /usr/sources/.
 
Donc j'ai creer le lien symbolique avant d'installer les headers et là tout ce passe bien.
 
Y-a t'il un moyen d'éviter de faire le LS à la mano et donc que l'installation des nouveaux headers recompile correctement spl et zfs avec DKMS ?

Message cité 1 fois
Message édité par qwrty le 03-01-2017 à 15:29:10

---------------
[VDS] Embouts de watercooling 10/16 | ~Feed-Back
n°1399334
Fork Bomb
Obsédé textuel
Posté le 03-01-2017 à 18:17:30  profilanswer
 

qwrty a écrit :


 
J'ai enfin fait ma migration de kernel vers le 4.8.15 et passage du repo zfsonlinux.org avec la version 0.6.5.7 vers les backports en version 0.6.5.8
Je n'ai pas vraiment eu le temps de le faire plus tôt...
 
Sinon la migration à plutôt était sale comme phraide mais fonctionnelle :o
la purge de certain paquet ne s'est pas aussi bien passé que phraide, j'ai du en supprimer de force, or certains avaient des dépendances avec grub, grub2 toussa toussa, pas bon signe, certainement à cause de mon ancienne installe de ZFS que j'ai du faire pour possiblement avoir le choix de boot sur un partition ZFS, donc grub et tous mes programmes d'amorçages avaient été modifié en ce sens.
Rien de rassurant, mais c'est bon je m'en suis sortis tant bien que mal  :ange:  
 
Ah si j'ai eu aussi un soucis avec le daemon zed qui ne se lancait pas aussi. Apparemment lié à un problème paquet propre à debian.
En effet suite install des 0.6.5.8 je n'avais pas le daemon zed dans /sbin/ mais il c’était foutu dans /usr/sbin/...
 
bref c’était un petit retour informel.
 
D'ailleurs je me demandais, lors de l'installation des headers du nouveau kernel celui ci est censé recompilé spl et zfs et me copier les header dans /usr/source/ ce qu'il fait bien, sauf que DKMS lui va chercher les headers dans /lib/module/ or lors de l'installation des headers je n'ai pas encore le lien symbolique "build" qui renvoi dans /usr/sources/.
 
Donc j'ai creer le lien symbolique avant d'installer les headers et là tout ce passe bien.
 
Y-a t'il un moyen d'éviter de faire le LS à la mano et donc que l'installation des nouveaux headers recompile correctement spl et zfs avec DKMS ?


Dit comme ça, on dirait un bug.
Faut ptet remonter et/ou voir si ça a déjà été rapporté.


---------------
Décentralisons Internet-Bépo-Troll Bingo - "Pour adoucir le mélange, pressez trois quartiers d’orange !"
mood
Publicité
Posté le   profilanswer
 

 Page :   1  2  3  4  5  6  7  8  9  10  11  12  13

Aller à :
Ajouter une réponse
 

Sujets relatifs
[Résolu] Changement de carte mère : Linux en grève[RESOLU] Quel linux choisir avec ma mini config ?
Linux commande pour savoir les services qui sont installés ?Problème avec apache sur linux debian/ install GLPI
filezilla server sous linux[Gnu/Linux] Ouverture d'un xterm dans mon application graphique.
Installation serveur Darwin sous LinuxRecherche Mini pc tournant avec distrib linux
Routage et VLAN sous Linux - Virtualisation[Débutant] Linux et OS Alternatifs
Plus de sujets relatifs à : [Topic ZFS] ZFS on Linux et BSD - débats/questions


Copyright © 1997-2022 Hardware.fr SARL (Signaler un contenu illicite / Données personnelles) / Groupe LDLC / Shop HFR