-==<XTBA>==-

biour@Leviathan:/media/HPSAS$ sudo dd if=/dev/zero of=temp.test bs=1024 count=10000000
10000000+0 enregistrements lus
10000000+0 enregistrements écrits
10240000000 octets (10 GB) copiés, 70,7752 s, 145 MB/s

_________________
Forever Qlimax Addict!



Hardcore Will Never DIe.

un petit script perl si votre serveur peut envoyer les mails via smtp

zpool_status.pl

#!/usr/bin/perl

my $command_output = `/sbin/zpool status -x`;
if ($command_output eq "all pools are healthy\n") {

        print "all pools are healthy\n";
        exit;

}
else
{
     print "zpool not healthy\n";
     system('/sbin/zpool status | mail -s "ZFS problem" xxxxx@xxxx.xxxxxm');
}

un petit chmod +x sur le fichier et une ligne crontab genre

*/15 * * * * /root/scripts/zpool_status.pl 

et paf tt les 15mins ca check les zpool si un merde ca envoi le mail
/!\ tant que ca merde tt les 15min ca flood mail

un scrub ne compte pas comme altération des zpool de mémoire
d'ailleurs pour ma part c'est un scrub sur chaque zpool une fois tt les 15jours

Le dimanche de 3h à 7h43 chez moi

_________________

Kévin, sor deux sec or !!

Moi tout les 2-3 mois quand j'y pense. Faudrait que j'automatise le truc

_________________

A tester : SmartOS
=> http://smartos.org/
... doc : http://wiki.smartos.org/display/DOC/Home

= hyperviseur qui fait ZFS + DTrace + Zones +KVM



Il est également dispos chez OVH : http://forum.ovh.com/showthread.php?t=81407

_________________

Kévin, sor deux sec or !!

Limiter ARC SIZE

=> http://seriouswebapps.com/limiting-zfs-arc-cache
==>> http://www.solarisinternals.com/wiki/in ... _ARC_Cache

For example, if an application needs 5 GBytes of memory on a system with 36-GBytes of memory, you could set the arc maximum to 30 GBytes, (0x780000000 or 32212254720 bytes). Set the zfs:zfs_arc_max parameter in the /etc/system file:

set zfs:zfs_arc_max = 0x780000000

or

set zfs:zfs_arc_max = 32212254720

So basically, M(1024^3). Where M is the memory size in GB. I have 12 GB of memory, and I want ARC to only use up to half of it.

Donc pour utiliser au max 6 Go, open a Terminal and type:

su
echo "set zfs:zfs_arc_max = 6442450944" >>/etc/system

Then reboot.

shutdown -y -i6 -g0

When you reboot, your system may go into maintenance mode, a message says something about the boot-archive" being down because we changed /etc/system. Login with a user that has staff/root privileges and check the file, then clear the maintenance mode on the boot-archive service.

less /etc/system
# q to quit
svcadm clear system/boot-archive

_________________

Kévin, sor deux sec or !!

Les SSD du moment pour le cache
=> http://www.storagereview.com/smart_stor ... ssd_review

_________________

Kévin, sor deux sec or !!

pratique de mettre un monitoring mail zfs

Received: from ZFSstorage 
[...]
Subject: ZFS problem
Date: Tue, 09 Apr 2013 21:15:01 +0200

  pool: storage
 state: ONLINE
  scan: scrub repaired 0 in 12h26m with 0 errors on Tue Apr  9 10:23:51 2013
config:

   NAME                        STATE     READ WRITE CKSUM
   storage                     ONLINE       0     0     0
     raidz1-0                  ONLINE       0     0     0
       scsi-350024e92062e76d8  ONLINE       0     0     0
       scsi-350024e92062e755a  ONLINE       0     0     0
       scsi-350024e92062e7341  ONLINE       0     0     0
       scsi-350024e92062e7531  ONLINE       0     0     0
     raidz1-1                  ONLINE       0     0     0
       scsi-350024e92062e74b4  ONLINE       0     0     0
       scsi-350024e92062e7569  ONLINE       0     0     0
       scsi-350024e92062e76b0  ONLINE       0     0     0
       scsi-350024e92062e766e  ONLINE       0     0     0

errors: No known data errors

  pool: storage2
 state: ONLINE
  scan: scrub repaired 0 in 5h16m with 0 errors on Tue Apr  9 15:43:07 2013
config:

   NAME                        STATE     READ WRITE CKSUM
   storage2                    ONLINE       0     0     0
     raidz1-0                  ONLINE       0     0     0
       scsi-350024e9003d30d0b  ONLINE       0     0     0
       scsi-350024e9003d30d15  ONLINE       0     0     0
       scsi-350024e9003d30caa  ONLINE       0     0     0
       scsi-350024e9003d30d0e  ONLINE       0     0     0
     raidz1-1                  ONLINE       0     0     0
       scsi-350024e920064e5ab  ONLINE       0     0     0
       scsi-350024e920064e5ad  ONLINE       0     0     0
       scsi-350024e920064e5ac  ONLINE       0     0     0
       scsi-350024e920064e5c1  ONLINE       0     0     0

errors: No known data errors

pool: storage3
 state: ONLINE
status: One or more devices has experienced an unrecoverable error.  An
   attempt was made to correct the error.  Applications are unaffected.
action: Determine if the device needs to be replaced, and clear the errors
   using 'zpool clear' or replace the device with 'zpool replace'.
   see: http://zfsonlinux.org/msg/ZFS-8000-9P
  scan: scrub repaired 44K in 4h44m with 0 errors on Tue Apr  9 21:11:34 2013
config:

   NAME                        STATE     READ WRITE CKSUM
   storage3                    ONLINE       0     0     0
     raidz1-0                  ONLINE       0     0     0
       scsi-350000f0008066966  ONLINE       0     0     0
       scsi-350000f0008066995  ONLINE       1     0     0
       scsi-350000f0000bcba29  ONLINE       0     0     0
       scsi-350000f0008066916  ONLINE       0     0     0

errors: No known data errors

sous réserver d'avoir un nullmailer ou autre système mail installé :
voila le script perl a mettre en crontab

#!/usr/bin/perl


my $command_output = `/sbin/zpool status -x`;
if ($command_output eq "all pools are healthy\n") {

        print "all pools are healthy\n";

        exit;

}

else

{

        print "zpool not healthy\n";

        #system('echo "Soucis sur un des zpool!" | mail -s "ZFS problem" adreesse.mail@mail');
        system('/sbin/zpool status | mail -s "ZFS problem"  adreesse.mail@mail');
}

et dans la crontab

*/15 * * * * /root/scripts/zpool_status.pl > /root/scripts/log.1

Poulpe, quels sont les avantages de ZFS par rapport a mdadm?

Pour toi c'est la securite des donnees d'apres ce que j'ai compris? je suis surpris car je le trouve incroyablement robuste mdadm vu tout ce que je lui ai fait subir en 5 ans et j'ai jamais rien perdu. Et pourtant j'en ai eu des merdes suite a des disques qui laches ou bien suite a des betises de ma part. par exemple une fois j'ai sorti 2 disques d'un raid 5 et je n'arrivais plus a assembler l'array. Bah en forcant la main suis arriver a rentrer un disque au forceps pour retrouver l'array en mode degradé puis j'ai rentré le 2 disques en mode normal et il a reconstruit

Sinon les contraintes sur le materiel pour faire du ZFS sont toujours valables? Notamment sur la RAM qui doit etre de l'ECC et surtout en grande quantité? Parce que mon server a que 4Go de RAM et c'est de la FB-DIMM (donc de l'ECC registered si je ne dis pas de betises). Alors a l'epoque elle etait tres dure a trouver et donc forcement tres chere, ce qui ne doit plus etre le cas maintenant. Cependant ca m'embete un peu de devoir acheter de la RAM obsolete et que je ne peux utiliser nulle part ailleurs. Et d'un autre cote cela me rend triste de virer le dual E5450 pour mettre un mono-cpu car le dual ca roxe quand meme. Quand je compare les 5450@3GHz par rapport a l'i7 3770k@4.5GHz ya pas photo. En monothread the i7 dechire mais sur du multithread comme le calcul partagé il se fait exploser par les 5450. 8 vrais CPU ca marche mieux que 4 + HT, meme si le dual tourne a une freq bien inferieure.

Bref je suis en train de me demander si ZFS apporte reellement quelque chose par rapport a mdadm. Car c'est le moment de changer de plateforme si cela vaut le cout etant donné que je suis en train de migrer les disques. Une fois la migration effectuée je ne pourrai plus passer a ZFS si cela apporte reellement un plus.

_________________

J'ai des barrettes de 1 Go et 2 Go FBdimm à te filer ... file moi ton adresse.

_________________

Kévin, sor deux sec or !!

Si le ZFS apporte quelque chose en tant que tel non
il permet de faire plus ... plus dans ce que ferait un vrai NAS/SAN baie de disque
avec déduplic volumes etc etc

changer de serveur ... moi je suis resté sur mes 2*L5520 ils sont juste parfait pour ca !
avec 32Go de ram et ESXi j'ai de quoi faire des machines virtuelles en plus jusqu'à la fin de ma vie

(ma machine de stockage est une VM d'esxi avec la carte SAS en passe direct pour que la VM y accède comme un vrai adapter physique )

T'as mis 32Go de FB-DIMM?

Tu ne te sers plus de l'adaptec toi non? Du coup tu as quoi comme carte et expanders?

Au final, etant donné mon utilisation tu penses que ZFS ne m'apporterait pas grand chose de plus que mdadm?

_________________

non j'ai de la DDR3 ecc
et non je ne me sert plus de mon adaptec qui traine dans le placard (faut que je trouve a la vendre mais ca me fait mal au coeur de la vendre)
pour les expander c'est du .... HP peut être bien de mémoire
et pour toi franchement comme tu gère mdadm et que tu as pas envie de t’embarrasser d'emmerdes ca va pas mal
tu voulais profiter de tes nouveaux disques pour changer au cas ou ?

Haa suis trop a la ramasse C'est pas des Hapertowns (54xx) que tu as mais des Nehalems (55xx)? Forcement tout s'explique pour la RAM

Je suis un adepte du dicton "quand ca marche, on ne touche pas" Jusqu'a present je suis content de mdadm qui rempli mes besoins. Mais bon ca ne veut pas dire qu'il ne faut pas regarder ailleurs ce qui se fait, surtout que ca fait 5 ans que je tourne avec cette solution donc depuis l'eau a coulée sous les ponts et peut etre qu'il y a d'autres solutions qui marchent mieux ou aussi bien et qui apportent d'autres avantages.
Avec mon changement de disques je me dis qu'effectivement si il faut changer il faut le faire maintenant car apres se sera beaucoup plus compliqué Donc oui j'en profite pour me renseigner sur ZFS savoir si ca vaut le coup que je migre aussi.

_________________

effectivement maintenant il est vrai que les freenas et cie on l'air de bien tourner maintenant
mais moi je reste dans le simple avec ma ligne de commande et pas plus ^^

Bon finalement je vais peut etre passer a ZFS, j'ai nické un de mes raids en bricolant

_________________

GG

Enfin suis arrive a le reconstruire mais la table de partitions a sautée. Vais essayer de voir ce soir si je peux encore faire quelque chose. Bon c'est pas la mort non plus c'etait que les films de vacances. Ca fera une excuse pour repartir en vac pour en refaire

_________________

regarde l'histoire de restaure superblock

Ouep

En fait j'avais sorti les disques et j'ai pas du les remettre dans le meme ordre (je vois que ca comme explication). Il ne me semblait pas que l'ordre avait une importance mais j'avais quand meme repéré (visuellement) la place des disques dans le Norco et faut croire que je me suis planté. Quand j'ai voulu le remettre en route j'avais 3 disques sur 8 qui me donnaient une erreur de superblock et un disque ou yavait meme plus la partoche linux raid (ca j'ai pas compris pour le coup car quand je l'ai arreté l'array etait clean ).

J'ai refait une partoche linux raid sur le disque qui n'en avait plus puis j'ai forcé le re-assemble. Il a reconstruit l'array notamment pour re-synchro le disque ou j'ai du refaire la partoche. D'ailleurs encore merci Poulpe pour le site avec les astuces pour accelerer le processus de reconstruction En 5h c'etait bouclé

Et la impossible de monter le volume, il ne reconnait meme pas le type de partoche...



Du coup la question tombe: Est ce qu'il peut arriver la meme chose sur un zpool? Si je sors physiquement les disques du boitier et que je les remets dans un ordre different, est ce que cela va le traumatiser?

_________________

non je pense puisqu'il m'est arrivé (il me semble) d'inverser des cables SAS (deux port sur la carte et chaque port va sur un expander)
et donc l'ordre logique des disques qui apparaissent

je pourrai te tester d'ici pas longtemps
je dois recevoir un petit Mircroproliant HP qui va me servir de NAS pour fournir un disque à Vmware
en gros mes VM seront sur un raid5 ZFS car la c'est sur un seul disque et c'est limite :s
pas envie de tout perdre mes VMs

normalement Mdadm utilise l'UUID pour les disques
donc OSEF du cable, enfin il me semble que c'est par defaut?

_________________
Forever Qlimax Addict!



Hardcore Will Never DIe.

non par défaut c'est pas l'uuid justement ...c'est /dev/sdx
^^

c'est la que ca a du merder

_________________