>>Peut-être, même si j'ai jamais eu de soucis, et qu'aujourd'hui avec ceph, le >>raid hard perd encore plus d'intérêt...
ceph également pour la prod (avec du nvme), pas de soucis. Le problème, c'est pour faire du raid local avec du nvme. c'est assez bien décrit dans le bug >>https://bugzilla.kernel.org/show_bug.cgi?id=99171 mais une simple vm , avec une partition de swap en o_direct, peux corrompre le raid soft " Take a virtual machine, give it a disk - put the image on a software raid and tell qemu to disable caching (iow. use O_DIRECT, because the guest already does caching anyway). Run linux in the VM, add part of the/a disk on the raid as swap, and cause the guest to start swapping a lot. What *seems* to be happening is this: kernel decides to swap out part of some memory. At the same time the process it belongs to exits and the kernel marks the pages as unused - the swap write is still in flight. The kernel now knows that this area is unused and thus there is no reason to ever re-read it from the swap device. Someone else needs memory, the kernel gives 'em the affected pages. The swap write is still in flight. The new process starts using the memory, at this point we really don't care what kind of garbage data ends up being written to the disk, simply because we won't ever need it. The swap writes finish. Now the raid is degraded. " J'ai 100% confiance en linux, sauf pour mdadm, trop de bugs. (encore recemment (kernel 4.19), bug de corruption avec blk-mq https://bugzilla.kernel.org/show_bug.cgi?id=201685) (Donc pour l'instant raid hard pour l'os, et replication ceph pour les datas) ----- Mail original ----- De: "Olivier Lange" <olang...@gmail.com> À: "aderumier" <aderum...@odiso.com> Cc: "Duchet Rémy" <r...@duchet.eu>, "stef" <s...@genesix.org>, "Richard Klein" <varicap....@gmail.com>, "Ludovic Scotti" <tonton...@gmail.com>, "frnog" <frnog@frnog.org> Envoyé: Dimanche 16 Juin 2019 10:26:20 Objet: Re: [FRnOG] [TECH] Serveur avec disques NVMe Peut-être, même si j'ai jamais eu de soucis, et qu'aujourd'hui avec ceph, le raid hard perd encore plus d'intérêt... Le dim. 16 juin 2019 à 09:40, Alexandre DERUMIER < [ mailto:aderum...@odiso.com | aderum...@odiso.com ] > a écrit : >>Et c'est l'une des raisons qui m'ont fait définitivement abandonner vmware >>depuis quelques temps... je ne sais pas pour vmware, mais pour proxmox par example, il ne recommande pas le raid soft pour une simple raison, il peux y avoir des corruption des données dans les vms qui utilisent O_DIRECT. [ https://bugzilla.kernel.org/show_bug.cgi?id=99171 | https://bugzilla.kernel.org/show_bug.cgi?id=99171 ] (via mdadm, idem avec du raid lvm) c'est pour cela que proxmox n'autorise que le raid soft via zfs pour l'instant. ----- Mail original ----- De: "Olivier Lange" < [ mailto:olang...@gmail.com | olang...@gmail.com ] > À: "Duchet Rémy" < [ mailto:r...@duchet.eu | r...@duchet.eu ] > Cc: "stef" < [ mailto:s...@genesix.org | s...@genesix.org ] >, "Richard Klein" < [ mailto:varicap....@gmail.com | varicap....@gmail.com ] >, "Ludovic Scotti" < [ mailto:tonton...@gmail.com | tonton...@gmail.com ] >, "frnog" < [ mailto:frnog@frnog.org | frnog@frnog.org ] > Envoyé: Samedi 15 Juin 2019 21:32:28 Objet: Re: [FRnOG] [TECH] Serveur avec disques NVMe Pour moi, en 2019, un raid hard, c'est juste un spof de plus sur un serveur. Aucun intérêt. Je préfère largement rajouter un disque supplémentaires pour le prix d'une carte raid. Et c'est l'une des raisons qui m'ont fait définitivement abandonner vmware depuis quelques temps... Olivier Le sam. 15 juin 2019 à 21:27, Duchet Rémy < [ mailto:r...@duchet.eu | r...@duchet.eu ] > a écrit : > Nagios ou équivalent + logiciel du fabricant (pour moi Dell, qui le > fournit gratuitement). > Fonctionne sur Linux et Windows, vmware. > Préviens même des updates firmware, des predictives failures etc.. > > Rémy > > > > -------- Message d'origine -------- > De : Stéphane Rivière < [ mailto:s...@genesix.org | s...@genesix.org ] > > Date : 15/06/2019 19:07 (GMT+01:00) > À : Duchet Rémy < [ mailto:r...@duchet.eu | r...@duchet.eu ] >, Richard Klein > < [ mailto:varicap....@gmail.com | varicap....@gmail.com ] >, > Ludovic Scotti < [ mailto:tonton...@gmail.com | tonton...@gmail.com ] > > Cc : [ mailto:frnog@frnog.org | frnog@frnog.org ] > Objet : Re: [FRnOG] [TECH] Serveur avec disques NVMe > > > Le choix raid soft ou hard est un choix d'économie avant tout selon moi. > > Sincèrement... non... En tout cas pour moi... > > J'ai eu des clients haut de gamme, au début, j'ai voulu les soigner, > leur mettre le meilleur, pas lésiner... La seule fois où j'ai perdu un > RAID... La honte... Bon, y'avait des sauvegardes... > > Depuis, je suis KISS pour ça... Et KISS pour tout en fait... Je ne > touche que des trucs qui se caressent à la ligne de commande et qui > restent simples (j'ai pas dit simplistes :). > > Pour moi le choix RAID hard/soft peut aussi découler d'une contrainte > soft, comme certains hyperviseurs ou systèmes aiment bien croire qu'ils > sont sur un seul disque... > > Marrant comme on a tous des expériences différentes... > > Les cycles de recharge monitorables : compatible avec quel OS ou > hyperviseur ? (par curiosité). > > -- > Stéphane Rivière > Ile d'Oléron - France > > > --------------------------- > Liste de diffusion du FRnOG > [ http://www.frnog.org/ | http://www.frnog.org/ ] > > --------------------------- > Liste de diffusion du FRnOG > [ http://www.frnog.org/ | http://www.frnog.org/ ] > --------------------------- Liste de diffusion du FRnOG [ http://www.frnog.org/ | http://www.frnog.org/ ] --------------------------- Liste de diffusion du FRnOG http://www.frnog.org/
