Re: software raid для бэкап-сервера?

2016-03-24 Пенетрантность Андрей Любимец
24.03.2016 15:07, Artem Chuprina пишет:
> Андрей Любимец -> debian-russian@lists.debian.org  @ Thu, 24 Mar 2016 
> 13:26:26 +0600:
> 
>  >>  >>  >>  >> Какой рейд лучше делать, по опыту? Пятый, который из четырех 
> винтов по
>  >>  >>  >>  >> полтерабайта сделает полтора?
>  >>  >>  >> 
>  >>  >>  >>  SBK> Места-то сколько надо?
>  >>  >>  >> 
>  >>  >>  >> Бэкап-сервер. Лучше больше.
>  >>  >> 
>  >>  >>  > Ну тогда все просто.  Больше чем raid5 вы не получите.
>  >>  >> 
>  >>  >> Это я и сам понимаю.  Меня интересует, нету ли грабель с надежностью. 
>  В
>  >>  >> смысле, в случае вылета винта.
>  >>  АЛ> я за raid10 -- погугли "Why RAID 5 Sucks"
>  >> 
>  >> Погуглил.  Ничего внятного не увидел.
>  >> 
>  >> Можно пояснить?
>  АЛ> Дело в том, что деградировавший RAID5 до завершения ресинка становится по
>  АЛ> надёжности аналогичен RAID0. Ресинк же больших дисков может идти 
> достаточно
>  АЛ> долго. Если риск потерять данные в этот период не смущает, то ради 
> бога...
>  АЛ> Здесь подробнее https://geektimes.ru/post/78311/
> 
> А RAID10 в этом смысле чем-то лучше? Или, если уж говорить о 50% потере
> пространства, делать RAID6?
Я больше доверяю RAID10, мне он представляется более простым чем RAID6,
соответственно менее подверженным ошибкам
(https://www.opennet.ru/opennews/art.shtml?num=40412 ). И производительность
его повыше будет.
> 
> Вообще, жалко полтерабайта, оно лишним не будет...  И это все-таки
> бэкап, вторая копия данных.  Хотя там предусмотрено хранение прошлого.
> 
Как я Вас понимаю! нужно просто принять риск и быть к нему готовым (хотя бы
психологически, но можно распечатать и положить в сервер инструкцию по замене
диска). При том ваш RAID5 вполне может спокойно многие лета безпроблемно
работать.

Да, проблема не техническая, но,видимо, из области психологии: доверие,
принятие и тп ;)



Re: software raid для бэкап-сервера?

2016-03-24 Пенетрантность Artem Chuprina
Oleksandr Gavenko -> debian-russian@lists.debian.org  @ Thu, 24 Mar 2016 
12:45:36 +0200:

 >> Надо сказать, что у меня в ноутбуке SSD довольно быстро вымер
 >> (симптоматика - бьются некоторые файлы на ровном месте), и я его
 >> отключил.
 >>
 OG> Производители заявляют что SSD надежнее HDD:

Я рад за них, но мне еще не попадался винчестер, который начал бы
глючить так быстро.  Хотя по SSD у меня статистики нет, есть один
экземпляр.  Но я на него (экземпляр) обиделся.

У меня было в свое время поползновение поиграться с SSD, но цена
остановила.

 >> Но anyway, тот SSD стоит настолько дороже винчестера, что для целей
 >> бэкап-сервера (небыстрая в норме работа, но места надо много), если уж
 >> покупать, то покупать не SSD, а винты в разы большей емкости.

 OG> Конешно. Я показал пример почему беcсмысленно избегать RAID 5 в свете SSD. 
Не
 OG> будете вы ждать дни пока восстановится RAID и скорость работы не 
деградирует.

 OG> По ценам на бытовые SSD / HDD разняться в 2-4 раза за GiB по ценникам
 OG> ближайшего магазина.

Мой point был в том, что RAID10 или RAID6 на HDD за те же деньги дадут
заметно больший объем, чем RAID5 на SSD.

 OG> Производители заявляют что enterprise хранилище на SSD уже дешевле чем на 
HDD:

 OG> 
http://itblog.sandisk.com/the-accelerating-economics-of-flash-and-the-retreat-of-hard-disk-drives/

Когда у тебя начинают более чем линейно расти расходы на питание и
охлаждение - верю.  Ну, или при оптовых ценах и/или распайке SSD прямо
на плату, без корпуса.  А до тех пор - подождем...



Re: software raid для бэкап-сервера?

2016-03-24 Пенетрантность Eugene Berdnikov
On Thu, Mar 24, 2016 at 12:45:36PM +0200, Oleksandr Gavenko wrote:
> Конешно. Я показал пример почему беcсмысленно избегать RAID 5 в свете SSD. Не
> будете вы ждать дни пока восстановится RAID и скорость работы не деградирует.

 Для бэкапного сервера ни время ребилда, ни скорость работы дисков обычно
 не являются критичными. И завершения бэкапа, если он делается по крону,
 обычно никто не ждёт. За исключением клинических случаев, когда бэкап
 делается с выключением боевого сервиса, но просто не нужно так делать.
-- 
 Eugene Berdnikov



Re: software raid для бэкап-сервера?

2016-03-24 Пенетрантность Oleksandr Gavenko
On 2016-03-24, Artem Chuprina wrote:

> Надо сказать, что у меня в ноутбуке SSD довольно быстро вымер
> (симптоматика - бьются некоторые файлы на ровном месте), и я его
> отключил.
>
Производители заявляют что SSD надежнее HDD:

http://www.seagate.com/gb/en/do-more/how-to-choose-between-hdd-storage-for-your-laptop-master-dm/

  Reliability

  Failure rates on SSD, HDD and SSHD technologies have very similar ratings.
  SSHD has benefits because it uses both the SSD and HDD portions more
  efficiently than if they were separate.

  Durability

  SSDs are viewed as more durable simply because of their solid state design.
  Without moving parts, they can withstand higher extremes of shock, drop and
  temperature.

Это конечно рекламные заявления, у меня устаревшая цифра в среднем 3 года
живучести.

Хотя об отношении надежность / цена смотрю на хостеров - SSD предложения не
дороже HDD при одинаковых заявлениях о непрерывности работы.


> Но anyway, тот SSD стоит настолько дороже винчестера, что для целей
> бэкап-сервера (небыстрая в норме работа, но места надо много), если уж
> покупать, то покупать не SSD, а винты в разы большей емкости.

Конешно. Я показал пример почему беcсмысленно избегать RAID 5 в свете SSD. Не
будете вы ждать дни пока восстановится RAID и скорость работы не деградирует.

По ценам на бытовые SSD / HDD разняться в 2-4 раза за GiB по ценникам
ближайшего магазина.

Производители заявляют что enterprise хранилище на SSD уже дешевле чем на HDD:

http://itblog.sandisk.com/the-accelerating-economics-of-flash-and-the-retreat-of-hard-disk-drives/


-- 
http://defun.work/



Re: software raid для бэкап-сервера?

2016-03-24 Пенетрантность Artem Chuprina
Oleksandr Gavenko -> debian-russian@lists.debian.org  @ Thu, 24 Mar 2016 
12:00:20 +0200:

 >>  АЛ> я за raid10 -- погугли "Why RAID 5 Sucks"
 >> 
 >> Погуглил.  Ничего внятного не увидел.

 >> Здесь подробнее https://geektimes.ru/post/78311/

 OG> От туда:

 >> Когда RAID-5 появился, в 1987 году, типичный жесткий диск был размером 
 >> 21MB, и
 >> имел скорость вращения 3600 RPM. Сегодня типичный диск SATA это 1TB, то есть
 >> прирост емкости составил 50 тысяч раз! Но скорость вращения при этом
 >> увеличилась всего вдвое.

 OG> Лукавит:

 OG> * возросла плотнось записи (можно не разготяться)
 OG> * появились ssd

 OG> Тут: http://www.storagereview.com/ssd_vs_hdd

 OG>  price/GiB  Write

 OG> SSD$0.10200-550 MB/s
 OG> HDD$0.0650–120 MB/s

 OG> В рекламном буклете: http://ocz.com/consumer/ssd-guide/ssd-vs-hdd как раз
 OG> хвастаются 550 MB/s - видно современный предел комерчекого предложения.

 OG> Итого в статье ругаются что восстановление занимает 1 день. SSD сейчас 
таких
 OG> же обьемов и быстрее в 5 раз. Итого 5 часов восстановления.

 OG> **Но главное** проблем с деградацией производительности в момент 
востановления
 OG> не будет - SSD держит 100'000 IO/s против проблемных 300 IO/s в HDD.

 OG> Интересно используют ли эту особенность RAID контроллеры или софтверные 
RAID?

Надо сказать, что у меня в ноутбуке SSD довольно быстро вымер
(симптоматика - бьются некоторые файлы на ровном месте), и я его
отключил.

Но anyway, тот SSD стоит настолько дороже винчестера, что для целей
бэкап-сервера (небыстрая в норме работа, но места надо много), если уж
покупать, то покупать не SSD, а винты в разы большей емкости.

А в моем случае есть то, что есть.



Re: software raid для бэкап-сервера?

2016-03-24 Пенетрантность Oleksandr Gavenko
On 2016-03-24, Андрей Любимец wrote:
> 23.03.2016 18:51, Artem Chuprina пишет:
>  АЛ> я за raid10 -- погугли "Why RAID 5 Sucks"
> 
> Погуглил.  Ничего внятного не увидел.

> Здесь подробнее https://geektimes.ru/post/78311/

От туда:

> Когда RAID-5 появился, в 1987 году, типичный жесткий диск был размером 21MB, и
> имел скорость вращения 3600 RPM. Сегодня типичный диск SATA это 1TB, то есть
> прирост емкости составил 50 тысяч раз! Но скорость вращения при этом
> увеличилась всего вдвое.

Лукавит:

* возросла плотнось записи (можно не разготяться)
* появились ssd

Тут: http://www.storagereview.com/ssd_vs_hdd

 price/GiB  Write

SSD$0.10200-550 MB/s
HDD$0.0650–120 MB/s

В рекламном буклете: http://ocz.com/consumer/ssd-guide/ssd-vs-hdd как раз
хвастаются 550 MB/s - видно современный предел комерчекого предложения.

Итого в статье ругаются что восстановление занимает 1 день. SSD сейчас таких
же обьемов и быстрее в 5 раз. Итого 5 часов восстановления.

**Но главное** проблем с деградацией производительности в момент востановления
не будет - SSD держит 100'000 IO/s против проблемных 300 IO/s в HDD.

Интересно используют ли эту особенность RAID контроллеры или софтверные RAID?

-- 
http://defun.work/



Re: software raid для бэкап-сервера?

2016-03-24 Пенетрантность Eugene Berdnikov
On Wed, Mar 23, 2016 at 10:51:26PM +0300, Artem Chuprina wrote:
> Eugene Berdnikov -> debian-russian@lists.debian.org  @ Wed, 23 Mar 2016 
> 20:37:44 +0300:
> 
>  >> >  Интересно, для чего может понадобиться снапшот свежего бэкапа?
>  >> 
>  >> Я понял так, что просто делается синхронизация rsync, а потом
>  >> получившееся состояние запоминается с помощью снапшота.
>  >> 
>  >> А вы что подумали?)
> 
>  EB>  Я подумал, что проще и эффективнее "cp -al", а затем на полученной копии
>  EB>  "rsync --delete". Это даёт инкрементальный бэкап (эквивалентный полному)
>  EB>  и не требует поддержки снапшотов.
> 
> Не требует.  Я дома так и делаю.  Но если снапшоты все равно в комплекте?

 Дают ли снапшоты какой-то полезный функционал для этой задачи? В ядре
 много чего в комплекте, чем в этой жизни не воспользоваться не суждено.
-- 
 Eugene Berdnikov



Re: software raid для бэкап-сервера?

2016-03-24 Пенетрантность Artem Chuprina
Андрей Любимец -> debian-russian@lists.debian.org  @ Thu, 24 Mar 2016 13:26:26 
+0600:

 >>  >>  >>  >> Какой рейд лучше делать, по опыту? Пятый, который из четырех 
 >> винтов по
 >>  >>  >>  >> полтерабайта сделает полтора?
 >>  >>  >> 
 >>  >>  >>  SBK> Места-то сколько надо?
 >>  >>  >> 
 >>  >>  >> Бэкап-сервер. Лучше больше.
 >>  >> 
 >>  >>  > Ну тогда все просто.  Больше чем raid5 вы не получите.
 >>  >> 
 >>  >> Это я и сам понимаю.  Меня интересует, нету ли грабель с надежностью.  В
 >>  >> смысле, в случае вылета винта.
 >>  АЛ> я за raid10 -- погугли "Why RAID 5 Sucks"
 >> 
 >> Погуглил.  Ничего внятного не увидел.
 >> 
 >> Можно пояснить?
 АЛ> Дело в том, что деградировавший RAID5 до завершения ресинка становится по
 АЛ> надёжности аналогичен RAID0. Ресинк же больших дисков может идти достаточно
 АЛ> долго. Если риск потерять данные в этот период не смущает, то ради бога...
 АЛ> Здесь подробнее https://geektimes.ru/post/78311/

А RAID10 в этом смысле чем-то лучше? Или, если уж говорить о 50% потере
пространства, делать RAID6?

Вообще, жалко полтерабайта, оно лишним не будет...  И это все-таки
бэкап, вторая копия данных.  Хотя там предусмотрено хранение прошлого.



Re: software raid для бэкап-сервера?

2016-03-24 Пенетрантность Андрей Любимец
23.03.2016 18:51, Artem Chuprina пишет:
> Андрей Любимец -> debian-russian@lists.debian.org  @ Wed, 23 Mar 2016 
> 17:49:52 +0600:
> 
>  >>  >>  >> Какой рейд лучше делать, по опыту? Пятый, который из четырех 
> винтов по
>  >>  >>  >> полтерабайта сделает полтора?
>  >>  >> 
>  >>  >>  SBK> Места-то сколько надо?
>  >>  >> 
>  >>  >> Бэкап-сервер. Лучше больше.
>  >> 
>  >>  > Ну тогда все просто.  Больше чем raid5 вы не получите.
>  >> 
>  >> Это я и сам понимаю.  Меня интересует, нету ли грабель с надежностью.  В
>  >> смысле, в случае вылета винта.
>  АЛ> я за raid10 -- погугли "Why RAID 5 Sucks"
> 
> Погуглил.  Ничего внятного не увидел.
> 
> Можно пояснить?
Дело в том, что деградировавший RAID5 до завершения ресинка становится по
надёжности аналогичен RAID0. Ресинк же больших дисков может идти достаточно
долго. Если риск потерять данные в этот период не смущает, то ради бога...
Здесь подробнее https://geektimes.ru/post/78311/
> 
> Ну, я понимаю, что RAID 5 не переживет вылет любых двух дисков, в то
> время как RAID 10 - только половину вариантов.  За это в случае четырех
> дисков RAID 10 по сравнению с RAID 5 теряет треть пространства. В моем
> случае вылет сразу или почти сразу двух представляется маловероятным, а
> полтерабайта лишними, пожалуй, не будут.
> 
> Еще?
> 
Сам ни разу не  терял данные на RAID5, но пару раз достаточно тривиальные
операции по замене диска (для RAID1 или RAID10) приводили к неприятным
потерям времени и нервов, типа случая описанного здесь --
https://www.opennet.ru/base/sys/raid5_sync.txt.html (автор конечно ССЗБ, но
честно пишет, что ему повезло)

В соседней ветке уже написали про потерю данных из-за выхода второго диска во
время восстановления массива.

Здесь (https://lists.altlinux.org/pipermail/sysadmins/2015-May/037194.html)
пишут :

>>Ну и для RAID5 хорошо известен эффект double fault, когда
>>следующий в очереди на вылетание диск под повышенной нагрузкой
>>при resync не успевает отдать все данные.
> 
> для массивов еще хорошо известен занятный эффект "не тот диск
> вынул при замене". я как-то раз по большой внимательности
> наступил на эти грабли, полчаса вытряхивал потом кирпичи из
> порток :)

Кстати, лайфхак: если нет корзины полезно наклеить на торец винчестера
серийник или WWN, что бы облегчить  идентификацию дисков
 ls -l /dev/disk/by-id/ | grep sda
 ata-ST1000NM0033-9ZM173_Z1W2GVEM -> ../../sda
 wwn-0x5000c500677aa9f2 -> ../../sda




Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Artem Chuprina
Eugene Berdnikov -> debian-russian@lists.debian.org  @ Wed, 23 Mar 2016 
20:37:44 +0300:

 >> >  Интересно, для чего может понадобиться снапшот свежего бэкапа?
 >> 
 >> Я понял так, что просто делается синхронизация rsync, а потом
 >> получившееся состояние запоминается с помощью снапшота.
 >> 
 >> А вы что подумали?)

 EB>  Я подумал, что проще и эффективнее "cp -al", а затем на полученной копии
 EB>  "rsync --delete". Это даёт инкрементальный бэкап (эквивалентный полному)
 EB>  и не требует поддержки снапшотов.

Не требует.  Я дома так и делаю.  Но если снапшоты все равно в комплекте?



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Eugene Berdnikov
On Wed, Mar 23, 2016 at 08:06:09PM +0300, Sergey B Kirpichev wrote:
> On Wed, Mar 23, 2016 at 07:52:40PM +0300, Eugene Berdnikov wrote:
> >  Интересно, для чего может понадобиться снапшот свежего бэкапа?
> 
> Я понял так, что просто делается синхронизация rsync, а потом
> получившееся состояние запоминается с помощью снапшота.
> 
> А вы что подумали?)

 Я подумал, что проще и эффективнее "cp -al", а затем на полученной копии
 "rsync --delete". Это даёт инкрементальный бэкап (эквивалентный полному)
 и не требует поддержки снапшотов.

 Можно и в обратном порядке, конечно, но тогда да, без снапшота тоска.
-- 
 Eugene Berdnikov



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Sergey B Kirpichev
On Wed, Mar 23, 2016 at 07:52:40PM +0300, Eugene Berdnikov wrote:
>  Интересно, для чего может понадобиться снапшот свежего бэкапа?

Я понял так, что просто делается синхронизация rsync, а потом
получившееся состояние запоминается с помощью снапшота.

А вы что подумали?)



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Eugene Berdnikov
On Wed, Mar 23, 2016 at 07:04:25PM +0300, Artem Chuprina wrote:
> Eugene Berdnikov -> debian-russian@lists.debian.org  @ Wed, 23 Mar 2016 
> 17:57:44 +0300:
> 
>  >> Механизм простой - рсинком сливаешь и делаешь снапшот
> 
>  EB>  Лучше наоборот, меньше вероятность неконсистентности.
> 
>  EB>  Вообще, с rsync'ом снапшот не особо-то нужен. К тому же на той стороне,
>  EB>  которую нужно бэкапить, может не быть снапшотов.
> 
> Речь про бэкап-сервер.  На нем делается снапшот того, что только что
> сбэкапили.

 Интересно, для чего может понадобиться снапшот свежего бэкапа?
-- 
 Eugene Berdnikov



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Artem Chuprina
Eugene Berdnikov -> debian-russian@lists.debian.org  @ Wed, 23 Mar 2016 
17:57:44 +0300:

 >> Механизм простой - рсинком сливаешь и делаешь снапшот

 EB>  Лучше наоборот, меньше вероятность неконсистентности.

 EB>  Вообще, с rsync'ом снапшот не особо-то нужен. К тому же на той стороне,
 EB>  которую нужно бэкапить, может не быть снапшотов.

Речь про бэкап-сервер.  На нем делается снапшот того, что только что
сбэкапили.  Если на том, что бэкапится, есть снапшоты, то там снапшот
делается до.  Но у меня как раз не будет.



Re: software raid для бэкап-серв ера?

2016-03-23 Пенетрантность sergio
On 23/03/16 15:51, Artem Chuprina wrote:

> Ну, я понимаю, что RAID 5 не переживет вылет любых двух дисков, в то
> время как RAID 10 - только половину вариантов.

Они оба не переживут при вылете двух дисков. 10 это не совсем 1+0.

Разница в том, что при вылете диска на RAID 5 I/O просядет заметно
больше чем на RAID 10. Ну и на восстановлении эта разница будет ещё
более заметной.


-- 
sergio



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Dmitry Kulagin





On Wed, Mar 23, 2016 at 05:04:58PM +0300, Dmitry Kulagin wrote:

Более 10-ти лет работаю по следующей схеме.
На каждом диске создается по 3 раздела - swap (1-4 GB), boot (500MB), sys.
Boot разделы собираются в raid1 и монтируются в /boot, первые 2 диска -
основные, остальные - spare.

  Загрузчик в mbr как ставится при такой схеме, на каждый диск отдельно?


Да




Аналогично для swap (при желании).

  Зачем своп на рейде делать? Данные там имеют ценность лишь при хибернейте,
  иначе рейд даёт лишь накладные расходы. Не лучше ли подключить несколько
  своповых разделов подряд, задав им приоритеты по вкусу?


При наличии хотсвап дисков при выходе диска из строя, не надо даже 
перезагружаться для замены диска.
Однако, если своп не в рейд - зависание системы обеспечено. Даже без хотсвап мы 
выигрываем во времени простоя системы,
но за счет скорости работы, конечно.



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Artem Chuprina
Eugene Berdnikov -> debian-russian@lists.debian.org  @ Wed, 23 Mar 2016 
17:49:54 +0300:

 >> Аналогично для swap (при желании).

 EB>  Зачем своп на рейде делать? Данные там имеют ценность лишь при хибернейте,
 EB>  иначе рейд даёт лишь накладные расходы. Не лучше ли подключить несколько
 EB>  своповых разделов подряд, задав им приоритеты по вкусу?

Чтобы при выходе из строя диска во время работы не пропали данные,
которые там были, видимо.  Тут, правда, встает резонный вопрос о
непротиворечивости данных, вычитанных из свопа перед сбоем диска, и о
том, сколько в результате получается дополнительной надежности от
зеркалированного свопа.  Читается-то не с обоих, несоответствие можно и
не заметить.



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Eugene Berdnikov
On Wed, Mar 23, 2016 at 04:00:49PM +0200, Vasiliy P. Melnik wrote:
> Механизм простой - рсинком сливаешь и делаешь снапшот

 Лучше наоборот, меньше вероятность неконсистентности.

 Вообще, с rsync'ом снапшот не особо-то нужен. К тому же на той стороне,
 которую нужно бэкапить, может не быть снапшотов.
-- 
 Eugene Berdnikov



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Eugene Berdnikov
On Wed, Mar 23, 2016 at 05:04:58PM +0300, Dmitry Kulagin wrote:
> Более 10-ти лет работаю по следующей схеме.
> На каждом диске создается по 3 раздела - swap (1-4 GB), boot (500MB), sys.
> Boot разделы собираются в raid1 и монтируются в /boot, первые 2 диска -
> основные, остальные - spare.

 Загрузчик в mbr как ставится при такой схеме, на каждый диск отдельно?

> Аналогично для swap (при желании).

 Зачем своп на рейде делать? Данные там имеют ценность лишь при хибернейте,
 иначе рейд даёт лишь накладные расходы. Не лучше ли подключить несколько
 своповых разделов подряд, задав им приоритеты по вкусу?
-- 
 Eugene Berdnikov



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Sergey B Kirpichev
On Wed, Mar 23, 2016 at 05:04:58PM +0300, Dmitry Kulagin wrote:
> В качестве современной альтернативы данной схемы можно предложить btrfs или
> zfs, в которых и фс,
> и рейд, и lvm в одном флаконе.

btrfs не умеет нормально raid5 в jessie.



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Artem Chuprina
Vasiliy P. Melnik -> debian-russian  @ Wed, 23 Mar 2016 16:00:49 +0200:

 > так модуль есть в кернел для зфса - у меня правда на оракл линукс стоит, но
 > не думаю что это принципиально.

А вот зря.  Оракл теперь владелец оригинала, у него этот модуль
гарантированно не сломается при апгрейде ядра.  А дебиан - отнюдь.  А
модуль, как я понимаю, ни разу не в апстриме.

Впрочем, судя по тому, что пишут на zfsonlinux, работа по внедрению в
дебиан уже идет, так что можно брать...

 > Правда больше на фре использую, но тут вопрос не принципиальный: там
 > модуль из коробки, здесь - из репозитария.  Жалею только, что систему
 > поставил на эти же винты - сложно что-то переделывать

Ну, у меня и вариантов-то нет, нету других винтов.

 > Механизм простой - рсинком сливаешь и делаешь снапшот

Угу, стоит попробовать...

 >>  VPM> А данные какие? я держу бекапы на зфс-е - у меня достаточно мало
 >> изменений,
 >>  VPM> ну и плюс снапшоты очень удобная вещь и спасает от удаления данных
 >>
 >> Данные разные, но в целом, вероятно, со сравнительно небольшими
 >> изменениями.  Исключений, типа дампа базы данных, немного.
 >>
 >> А можно поподробнее про модель?  ZFS применяется вместо рейда, со своим
 >> собственным?  Или ты применяешь без рейда?  zfs-fuse, т.е. система на
 >> чем-то еще?  Создание бэкапа при этом как - по принципу "сделали бэкап,
 >> затем сделали снапшот"?



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Sergey B Kirpichev
On Wed, Mar 23, 2016 at 04:00:49PM +0200, Vasiliy P. Melnik wrote:
>У меня просто обычный raid1 , но зфс много умеет разных рейдов. Есть
>компрессия на лету, что тоже хорошо

Есть data-checksums, что весьма полезно.  Не знаю сколько у ТС
предполагается храниться бекапу, но у меня данные на md raid
периодически протухают.

>З.Ы. пробовал btrfs - тормозное оно шибко, но тоже работает как надо 

А в каком месте тормозное, в смысле последующей работы со снапшотами?



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Dmitry Kulagin

Более 10-ти лет работаю по следующей схеме.
На каждом диске создается по 3 раздела - swap (1-4 GB), boot (500MB), sys.
Boot разделы собираются в raid1 и монтируются в /boot, первые 2 диска - 
основные, остальные - spare.

Аналогично для swap (при желании).
Sys разделы собираются в raid5, поверх создается lvm, в котором 
создаются /,/var,/home и т.д.
Проблем с загрузкой никаких, установщик как минимум 3 последних версий 
Debian позволяет создать

и загрузить такую систему.
Потеря системы за это время случилась всего один раз из-за бага в работе 
NCQ в дисках Samsung,
когда под высокой нагрузкой из рейда вылетел первый диск, а потом в 
процессе восстановления - второй.
В качестве современной альтернативы данной схемы можно предложить btrfs 
или zfs, в которых и фс,
и рейд, и lvm в одном флаконе. Последняя позволяет заметно ускорить 
работу при вынесении cache и log
на ssd диск, но сильно страдает от дефрагментации из-за COW, что, 
правда, не актуально для бэкап-

сервера. Установщик ее не поддерживает.
Jessie поддерживает btrfs, на одном разделе точно, но можно ли
выбирать рейд режимы и несколько разделов при установке мне неизвестно.

23.03.2016 13:06, Artem Chuprina пишет:

Люди местные, сами мы недобрые, поможите умным словом.

Никогда не работал раньше с софтверным рейдом. Ситуация.

Надо сделать на коленке бэкап-сервер. В смысле, чтобы стоял под столом,
его никто не трогал, а он работал. Упса, вообще говоря, нет. Ну, пока
нет, а будет ли - непонятно.

Четыре винта по 500 Gb. На самом деле 6, но рейд-контроллер давно сдох
от перегрева, и еще два воткнуть некуда. Винты вроде живы. Винты
одинаковые, т.е. в случае чего будет что воткнуть вместо сдохшего, и
даже два раза. Хочется иметь не четыре раздела с ручным
перетасовыванием, а один. Хочется некоторого запаса надежности, потому
хочется не тупо LVM, а софтверный рейд.

Грузиться буду с него же. ATA есть, но отдельного винта и даже флешки
нет.

Какой рейд лучше делать, по опыту? Пятый, который из четырех винтов по
полтерабайта сделает полтора? Какие тонкости с загрузкой?





Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Vasiliy P. Melnik
так модуль есть в кернел для зфса - у меня правда на оракл линукс стоит, но
не думаю что это принципиально. Правда больше на фре использую, но тут
вопрос не принципиальный: там модуль из коробки, здесь - из репозитария.
Жалею только, что систему поставил на эти же винты - сложно что-то
переделывать

У меня просто обычный raid1 , но зфс много умеет разных рейдов. Есть
компрессия на лету, что тоже хорошо

Механизм простой - рсинком сливаешь и делаешь снапшот

З.Ы. пробовал btrfs - тормозное оно шибко, но тоже работает как надо


23 марта 2016 г., 15:46 пользователь Artem Chuprina 
написал:

> Vasiliy P. Melnik -> debian-russian  @ Wed, 23 Mar 2016 15:00:04 +0200:
>
>  VPM> А данные какие? я держу бекапы на зфс-е - у меня достаточно мало
> изменений,
>  VPM> ну и плюс снапшоты очень удобная вещь и спасает от удаления данных
>
> Данные разные, но в целом, вероятно, со сравнительно небольшими
> изменениями.  Исключений, типа дампа базы данных, немного.
>
> А можно поподробнее про модель?  ZFS применяется вместо рейда, со своим
> собственным?  Или ты применяешь без рейда?  zfs-fuse, т.е. система на
> чем-то еще?  Создание бэкапа при этом как - по принципу "сделали бэкап,
> затем сделали снапшот"?
>
>


Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Stanislav Vlasov
23 марта 2016 г., 17:39 пользователь Artem Chuprina  написал:
>  >> Это я и сам понимаю.  Меня интересует, нету ли грабель с надежностью.  В
>  >> смысле, в случае вылета винта.

>  > В случае вылета винта вы получите данные без избыточности
>  > и при проблемах с любым оставшимся диском - потерю данных. // КО.

> Это я невнятно говорю или ты невнятно понимаешь?  Про очевидное я в
> курсе.  Вопрос в том, насколько гладко проходит замена винта.

При помощи mdadm и какой-то матери помечаем сбойный винт как сбойный,
если автоматически не пометился, выкидываем его из рейда, меняем (если
позволяет железо - в онлайне), добавляем в рейд новый.
Ждём синхронизации.
Проделывалось несколько раз, работает нормально, проблемы могут быть в
первом или втором пункте (пока заключались в том, что к тому времени,
когда происходит сбой - забываешь документацию).
Скорость синхронизации можно менять через /proc, при этом,
естественно, есть влияние на основную работу сервера.

>  >> И кто чем, кстати, мониторит состояние mdraid?
>
>  > mdadm пакет запускает стандартно mdadm --monitor, обычно этого
>  > достаточно, про проблемы он пишет на почту.  Плюс регулярно из кронтаба

У нас для этого nagios опрашивает состояние через nrpe. Не помню,какой
у него плугин, но что-то стандартное.

-- 
Stanislav


Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Artem Chuprina
Vasiliy P. Melnik -> debian-russian  @ Wed, 23 Mar 2016 15:00:04 +0200:

 VPM> А данные какие? я держу бекапы на зфс-е - у меня достаточно мало 
изменений,
 VPM> ну и плюс снапшоты очень удобная вещь и спасает от удаления данных

Данные разные, но в целом, вероятно, со сравнительно небольшими
изменениями.  Исключений, типа дампа базы данных, немного.

А можно поподробнее про модель?  ZFS применяется вместо рейда, со своим
собственным?  Или ты применяешь без рейда?  zfs-fuse, т.е. система на
чем-то еще?  Создание бэкапа при этом как - по принципу "сделали бэкап,
затем сделали снапшот"?



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Vasiliy P. Melnik
А данные какие? я держу бекапы на зфс-е - у меня достаточно мало изменений,
ну и плюс снапшоты очень удобная вещь и спасает от удаления данных

23 марта 2016 г., 14:51 пользователь Artem Chuprina 
написал:

> Андрей Любимец -> debian-russian@lists.debian.org  @ Wed, 23 Mar 2016
> 17:49:52 +0600:
>
>  >>  >>  >> Какой рейд лучше делать, по опыту? Пятый, который из четырех
> винтов по
>  >>  >>  >> полтерабайта сделает полтора?
>  >>  >>
>  >>  >>  SBK> Места-то сколько надо?
>  >>  >>
>  >>  >> Бэкап-сервер. Лучше больше.
>  >>
>  >>  > Ну тогда все просто.  Больше чем raid5 вы не получите.
>  >>
>  >> Это я и сам понимаю.  Меня интересует, нету ли грабель с надежностью.
> В
>  >> смысле, в случае вылета винта.
>  АЛ> я за raid10 -- погугли "Why RAID 5 Sucks"
>
> Погуглил.  Ничего внятного не увидел.
>
> Можно пояснить?
>
> Ну, я понимаю, что RAID 5 не переживет вылет любых двух дисков, в то
> время как RAID 10 - только половину вариантов.  За это в случае четырех
> дисков RAID 10 по сравнению с RAID 5 теряет треть пространства. В моем
> случае вылет сразу или почти сразу двух представляется маловероятным, а
> полтерабайта лишними, пожалуй, не будут.
>
> Еще?
>
>


Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Artem Chuprina
Андрей Любимец -> debian-russian@lists.debian.org  @ Wed, 23 Mar 2016 17:49:52 
+0600:

 >>  >>  >> Какой рейд лучше делать, по опыту? Пятый, который из четырех винтов 
 >> по
 >>  >>  >> полтерабайта сделает полтора?
 >>  >> 
 >>  >>  SBK> Места-то сколько надо?
 >>  >> 
 >>  >> Бэкап-сервер. Лучше больше.
 >> 
 >>  > Ну тогда все просто.  Больше чем raid5 вы не получите.
 >> 
 >> Это я и сам понимаю.  Меня интересует, нету ли грабель с надежностью.  В
 >> смысле, в случае вылета винта.
 АЛ> я за raid10 -- погугли "Why RAID 5 Sucks"

Погуглил.  Ничего внятного не увидел.

Можно пояснить?

Ну, я понимаю, что RAID 5 не переживет вылет любых двух дисков, в то
время как RAID 10 - только половину вариантов.  За это в случае четырех
дисков RAID 10 по сравнению с RAID 5 теряет треть пространства. В моем
случае вылет сразу или почти сразу двух представляется маловероятным, а
полтерабайта лишними, пожалуй, не будут.

Еще?



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Artem Chuprina
Sergey B Kirpichev -> debian-russian@lists.debian.org  @ Wed, 23 Mar 2016 
14:55:27 +0300:

 >> Это я и сам понимаю.  Меня интересует, нету ли грабель с надежностью.  В
 >> смысле, в случае вылета винта.

 > В случае вылета винта вы получите данные без избыточности
 > и при проблемах с любым оставшимся диском - потерю данных. // КО.

Это я невнятно говорю или ты невнятно понимаешь?  Про очевидное я в
курсе.  Вопрос в том, насколько гладко проходит замена винта.

 >> И кто чем, кстати, мониторит состояние mdraid?

 > mdadm пакет запускает стандартно mdadm --monitor, обычно этого
 > достаточно, про проблемы он пишет на почту.  Плюс регулярно из кронтаба
 > делается проверка райд.  B BTS кстати валяется мой патч, который делает
 > это чаще (ежедневно вроде) и инкрементально.

Вот это полезный ответ, спасибо.



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Sergey B Kirpichev
On Wed, Mar 23, 2016 at 02:24:44PM +0300, Artem Chuprina wrote:
> Это я и сам понимаю.  Меня интересует, нету ли грабель с надежностью.  В
> смысле, в случае вылета винта.

В случае вылета винта вы получите данные без избыточности
и при проблемах с любым оставшимся диском - потерю данных. // КО.

> И кто чем, кстати, мониторит состояние mdraid?

mdadm пакет запускает стандартно mdadm --monitor, обычно этого
достаточно, про проблемы он пишет на почту.  Плюс регулярно из кронтаба
делается проверка райд.  B BTS кстати валяется мой патч, который делает
это чаще (ежедневно вроде) и инкрементально.

>  > Если совсем лень - выделите отдельно разделы под /boot на
>  > дисках, с raid1 груб точно умеет грузиться сто лет.
> 
> Видимо, так и сделаю.

Да, оверхед в принципе небольшой.  Но должно уже работать и с raid5.



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Андрей Любимец
23.03.2016 17:24, Artem Chuprina пишет:
> Sergey B Kirpichev -> debian-russian@lists.debian.org  @ Wed, 23 Mar 2016 
> 14:07:58 +0300:
> 
>  >>  >> Какой рейд лучше делать, по опыту? Пятый, который из четырех винтов по
>  >>  >> полтерабайта сделает полтора?
>  >> 
>  >>  SBK> Места-то сколько надо?
>  >> 
>  >> Бэкап-сервер. Лучше больше.
> 
>  > Ну тогда все просто.  Больше чем raid5 вы не получите.
> 
> Это я и сам понимаю.  Меня интересует, нету ли грабель с надежностью.  В
> смысле, в случае вылета винта.
я за raid10 -- погугли "Why RAID 5 Sucks"

> 
> И кто чем, кстати, мониторит состояние mdraid?
mdadm же и мониторит и почту шлёт

> 
>  >>  >> Какие тонкости с загрузкой?
>  >> 
>  >>  SBK> В jessie вроде должно уметь грузиться и с raid5.
>  >> 
>  >> Installation manual про это молчит. Говорит про RAID1.
> 
>  > Ну возьмите, да попробуйте в эмуляторе.  Честно говоря, я так
>  > сразу и про raid1 не нашел, где это?
> 
> https://www.debian.org/releases/stable/amd64/ch06s03.html.ru#mdcfg, примечание
> 
>  > Если совсем лень - выделите отдельно разделы под /boot на
>  > дисках, с raid1 груб точно умеет грузиться сто лет.
> 
> Видимо, так и сделаю.
> 



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Artem Chuprina
Sergey B Kirpichev -> debian-russian@lists.debian.org  @ Wed, 23 Mar 2016 
14:07:58 +0300:

 >>  >> Какой рейд лучше делать, по опыту? Пятый, который из четырех винтов по
 >>  >> полтерабайта сделает полтора?
 >> 
 >>  SBK> Места-то сколько надо?
 >> 
 >> Бэкап-сервер. Лучше больше.

 > Ну тогда все просто.  Больше чем raid5 вы не получите.

Это я и сам понимаю.  Меня интересует, нету ли грабель с надежностью.  В
смысле, в случае вылета винта.

И кто чем, кстати, мониторит состояние mdraid?

 >>  >> Какие тонкости с загрузкой?
 >> 
 >>  SBK> В jessie вроде должно уметь грузиться и с raid5.
 >> 
 >> Installation manual про это молчит. Говорит про RAID1.

 > Ну возьмите, да попробуйте в эмуляторе.  Честно говоря, я так
 > сразу и про raid1 не нашел, где это?

https://www.debian.org/releases/stable/amd64/ch06s03.html.ru#mdcfg, примечание

 > Если совсем лень - выделите отдельно разделы под /boot на
 > дисках, с raid1 груб точно умеет грузиться сто лет.

Видимо, так и сделаю.



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Artem Chuprina
Stanislav Vlasov -> debian-russian  @ Wed, 23 Mar 2016 15:35:25 +0500:

 >>  >> Какой рейд лучше делать, по опыту? Пятый, который из четырех винтов по
 >>  >> полтерабайта сделает полтора?

 SV> Работал и такой вариант, но нам было медленно...

 >>  SBK> Места-то сколько надо?
 >>
 >> Бэкап-сервер. Лучше больше.

 SV> У нас под бекапы делается raid10, но тут еще требуется обеспечить NN
 SV> потоков на запись (NN от 20 до 40 где-то).

Мне скорость не важна, а вот объем у raid10, как и у raid1, сразу в пополам...



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Sergey B Kirpichev
On Wed, Mar 23, 2016 at 01:24:08PM +0300, Artem Chuprina wrote:
> Sergey B Kirpichev -> debian-russian@lists.debian.org  @ Wed, 23 Mar 2016 
> 13:14:52 +0300:
> 
>  >> Какой рейд лучше делать, по опыту? Пятый, который из четырех винтов по
>  >> полтерабайта сделает полтора?
> 
>  SBK> Места-то сколько надо?
> 
> Бэкап-сервер. Лучше больше.

Ну тогда все просто.  Больше чем raid5 вы не получите.

>  >> Какие тонкости с загрузкой?
> 
>  SBK> В jessie вроде должно уметь грузиться и с raid5.
> 
> Installation manual про это молчит. Говорит про RAID1.

Ну возьмите, да попробуйте в эмуляторе.  Честно говоря, я так
сразу и про raid1 не нашел, где это?

Если совсем лень - выделите отдельно разделы под /boot на
дисках, с raid1 груб точно умеет грузиться сто лет.



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Stanislav Vlasov
23 марта 2016 г., 15:24 пользователь Artem Chuprina  написал:

>  >> Какой рейд лучше делать, по опыту? Пятый, который из четырех винтов по
>  >> полтерабайта сделает полтора?

Работал и такой вариант, но нам было медленно...

>  SBK> Места-то сколько надо?
>
> Бэкап-сервер. Лучше больше.

У нас под бекапы делается raid10, но тут еще требуется обеспечить NN
потоков на запись (NN от 20 до 40 где-то).

>  >> Какие тонкости с загрузкой?
>
>  SBK> В jessie вроде должно уметь грузиться и с raid5.
>
> Installation manual про это молчит. Говорит про RAID1.

grub с raid10 грузится нормально, но из инсталлятора я туда его не
ставил - только руками после debootstrap.

-- 
Stanislav


Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Artem Chuprina
Sergey B Kirpichev -> debian-russian@lists.debian.org  @ Wed, 23 Mar 2016 
13:14:52 +0300:

 >> Какой рейд лучше делать, по опыту? Пятый, который из четырех винтов по
 >> полтерабайта сделает полтора?

 SBK> Места-то сколько надо?

Бэкап-сервер. Лучше больше.

 >> Какие тонкости с загрузкой?

 SBK> В jessie вроде должно уметь грузиться и с raid5.

Installation manual про это молчит. Говорит про RAID1.



Re: software raid для бэкап-сервера?

2016-03-23 Пенетрантность Sergey B Kirpichev
On Wed, Mar 23, 2016 at 01:06:54PM +0300, Artem Chuprina wrote:
> Какой рейд лучше делать, по опыту? Пятый, который из четырех винтов по
> полтерабайта сделает полтора?

Места-то сколько надо?

> Какие тонкости с загрузкой?

В jessie вроде должно уметь грузиться и с raid5.



Re: Software RAID

2006-12-15 Пенетрантность DamirX
On Friday 15 December 2006 10:05, Nizamov Shawkat wrote:
  Еще один вопрос по software RAID возник.
 
  Имеем два одинаковых SCSI диска, которые собираем в RAID1.
  Можно собрать в RAID1 физические диски (скажем /dev/sda и /dev/sdb), а
  потом разбить их на разделы. А можно сначала разбить оба диска на
  разделы по одинаковой схеме и потом собрать несколько RAID1 из /dev/sda1
  и /dev/sdb1, /dev/sda2 и /dev/sdb2 и т.д.
  Предполагается, что миррориться должны все разделы.
 
  Какой способ более правильный ?

 ИМХО - второй

я сам на сервере тоже пошел по второму пути.
сделал одинаковую разбивку на винтах. первые разделы собрал в райд1, вторые - 
под своп. на третих разделах тоже райд1, но поверху - lvm.

не думаю что эта схема разрезания винтов удобна. ибо, что обычно ожидают от 
райда? правильно. сгорел один винт - воткнул другой, загрузился и все!

а при такой схеме придется еще fdisk-ать, потом добавлять разделы в райд. (они 
при этом начнут синкаться). Хорошо если вас при этом не сильно будут клевать 
в голову...
-- 

DamirX


Re: Software RAID

2006-12-15 Пенетрантность Sergey Pahomov
DamirX пишет:
 On Friday 15 December 2006 10:05, Nizamov Shawkat wrote:
   
 Еще один вопрос по software RAID возник.

 Имеем два одинаковых SCSI диска, которые собираем в RAID1.
 Можно собрать в RAID1 физические диски (скажем /dev/sda и /dev/sdb), а
 потом разбить их на разделы. А можно сначала разбить оба диска на
 разделы по одинаковой схеме и потом собрать несколько RAID1 из /dev/sda1
 и /dev/sdb1, /dev/sda2 и /dev/sdb2 и т.д.
 Предполагается, что миррориться должны все разделы.

 Какой способ более правильный ?
   
 ИМХО - второй
 

 я сам на сервере тоже пошел по второму пути.
 сделал одинаковую разбивку на винтах. первые разделы собрал в райд1, вторые - 
 под своп. на третих разделах тоже райд1, но поверху - lvm.

 не думаю что эта схема разрезания винтов удобна. ибо, что обычно ожидают от 
 райда? правильно. сгорел один винт - воткнул другой, загрузился и все!

 а при такой схеме придется еще fdisk-ать, потом добавлять разделы в райд. 
 (они 
 при этом начнут синкаться). Хорошо если вас при этом не сильно будут клевать 
 в голову...
   
Ну теоретически, способ называется partitionable array,
и для него нужно создавать массив с параметром --auto=part и в загрузчик
добавлять
raid=partitionable.
А вот практически - может кто-то поделится опытом ?


-- 
To UNSUBSCRIBE, email to [EMAIL PROTECTED]
with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]



Re: Software RAID

2006-12-15 Пенетрантность Alexandr E. Bravo
Добрый день.
 Имеем два одинаковых SCSI диска, которые собираем в RAID1.
 Можно собрать в RAID1 физические диски (скажем /dev/sda и /dev/sdb), а
 потом разбить их на разделы. А можно сначала разбить оба диска на
 разделы по одинаковой схеме и потом собрать несколько RAID1 из /dev/sda1
 и /dev/sdb1, /dev/sda2 и /dev/sdb2 и т.д.
 Предполагается, что миррориться должны все разделы.

 Какой способ более правильный ?
   
 
 ИМХО - второй 
   
Я сам тоже пошел по второму пути. В принципе, все работает. Хотелось бы
просто уверенности в том, что этот путь правильный :)

С уважением,
Александр Браво


-- 
To UNSUBSCRIBE, email to [EMAIL PROTECTED]
with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]



Re: Software RAID

2006-12-15 Пенетрантность Max Dmitrichenko
В сообщении от 15 Декабрь 2006 14:21 Alexandr E. Bravo написал(a):
  Какой способ более правильный ?

  
  ИМХО - второй 

 Я сам тоже пошел по второму пути. В принципе, все работает. Хотелось бы
 просто уверенности в том, что этот путь правильный :)

Вам шашечки или ехать?

--
  Макс


-- 
To UNSUBSCRIBE, email to [EMAIL PROTECTED]
with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]



Re: Software RAID

2006-12-14 Пенетрантность Nizamov Shawkat
 Еще один вопрос по software RAID возник.
 
 Имеем два одинаковых SCSI диска, которые собираем в RAID1.
 Можно собрать в RAID1 физические диски (скажем /dev/sda и /dev/sdb), а
 потом разбить их на разделы. А можно сначала разбить оба диска на
 разделы по одинаковой схеме и потом собрать несколько RAID1 из /dev/sda1
 и /dev/sdb1, /dev/sda2 и /dev/sdb2 и т.д.
 Предполагается, что миррориться должны все разделы.
 
 Какой способ более правильный ?
 

ИМХО - второй 
а еще лучше оставить в конце 1-2% свободного места - на случай что
придется заменять винт а точно такого же не найдется - как правило винты
одной и той же весовой категории имеют все таки небольшие отличия в
размере. меньший на какой-то мегабайт винт уже не поставиться в рейд
основанный на зеркалировании дисков полностью.


-- 
To UNSUBSCRIBE, email to [EMAIL PROTECTED]
with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]



Re: Software RAID

2005-03-03 Пенетрантность Andrew Dolgov
On Tue, 1 Mar 2005 19:23:43 +0200, Oleg Gritsinevich [EMAIL PROTECTED] wrote:

 md  initrd, md0 - RAID1. - 
   
 /dev/md0,   mdadm.conf - 
,
  /
 /dev/md0 mdadm.conf  
 ( /dev/md0  mdadm.conf ).   
  /dev/md5  
?

 initrd
-.

-- 
Andrew.


Re: Software RAID

2005-03-03 Пенетрантность Michael Shigorin
On Wed, Mar 02, 2005 at 03:57:49PM +0200, Oleg Gritsinevich wrote:
  ?
  , /etc/raidtab (  mdadm)   , 
--   .
   initrd  raidtab,  mdadm.conf 
 .

, .

   ,
   ,,.
  /dev/md5  ?
?
   .

   .   ...

-- 
  WBR, Michael Shigorin [EMAIL PROTECTED]
  -- Linux.Kiev http://www.linux.kiev.ua/


-- 
To UNSUBSCRIBE, email to [EMAIL PROTECTED]
with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]



Re: Software RAID

2005-03-02 Пенетрантность Michael Shigorin
On Tue, Mar 01, 2005 at 07:23:43PM +0200, Oleg Gritsinevich wrote:
   ,  
.
 works for me initrd,  ?
?

, /etc/raidtab (  mdadm)   , 
  --   .

 ,
 ,,.

/dev/md5  ?

  ?

-- 
  WBR, Michael Shigorin [EMAIL PROTECTED]
  -- Linux.Kiev http://www.linux.kiev.ua/


-- 
To UNSUBSCRIBE, email to [EMAIL PROTECTED]
with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]



Re: Software RAID

2005-03-01 Пенетрантность Pavel Ammosov
On Mon, Feb 28, 2005 at 11:30:51PM +0300, Andrew Dolgov wrote:
 On Mon, 28 Feb 2005 21:29:08 +0200, Oleg Gritsinevich [EMAIL PROTECTED] 
 wrote:
   :  
   /etc/mdadm/mdadm.conf?  ,
   (?)/mdadm(?)  
 
 iirc, raid autodetect 

,.


-- 
To UNSUBSCRIBE, email to [EMAIL PROTECTED]
with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]



Re: Software RAID

2005-03-01 Пенетрантность Michael Shigorin
On Tue, Mar 01, 2005 at 02:52:23PM +0300, Pavel Ammosov wrote:
:  
/etc/mdadm/mdadm.conf?
, 
   (?)/mdadm(?)  
  iirc, raid autodetect 
 ,   
 .

   works for me initrd,  ?

-- 
  WBR, Michael Shigorin [EMAIL PROTECTED]
  -- Linux.Kiev http://www.linux.kiev.ua/


-- 
To UNSUBSCRIBE, email to [EMAIL PROTECTED]
with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]



Re: Software RAID

2005-03-01 Пенетрантность Oleg Gritsinevich
On Tue, Mar 01, 2005 at 05:50:04PM +0200, Michael Shigorin wrote:
[skip]
  ,   
  .
 
works for me initrd,  ?
   ?
 : 
boot=/dev/md0
root=/dev/md0
md  initrd, md0 - RAID1. -   
/dev/md0,   mdadm.conf -,
 //dev/md0 mdadm.conf  
( /dev/md0  mdadm.conf )./dev/md5  
   ?

-- 
With best regards, Oleg Gritsinevich


-- 
To UNSUBSCRIBE, email to [EMAIL PROTECTED]
with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]



Re: Software RAID

2005-02-28 Пенетрантность Andrew Dolgov
On Mon, 28 Feb 2005 21:29:08 +0200, Oleg Gritsinevich [EMAIL PROTECTED] wrote:

  :
   
  /etc/mdadm/mdadm.conf?   
,
  
 (?)/mdadm(?)  

iirc, raid autodetect 
 - 
,. , 
  
.


-- 
Andrew.


Re: Software RAID

2005-02-28 Пенетрантность Alexander A. Vlasov
 .

,   mdadm,   raidtools2?  
 ,  raidtools2  ...

On Mon, Feb 28, 2005 at 11:30:51PM +0300, Andrew Dolgov wrote:
 On Mon, 28 Feb 2005 21:29:08 +0200, Oleg Gritsinevich [EMAIL PROTECTED] 
 wrote:
 
  :  
  /etc/mdadm/mdadm.conf?  ,
  (?)/mdadm(?)  
 
 iirc, raid autodetect  - 
 ,. ,   
 .
 
 

-- 
WBR,
 Alexander A. Vlasov
 Debian GNU/Linux user
 JID:   [EMAIL PROTECTED]
 nic-hdl:   ZULU-UANIC


-- 
To UNSUBSCRIBE, email to [EMAIL PROTECTED]
with a subject of unsubscribe. Trouble? Contact [EMAIL PROTECTED]



Re: Software RAID

2005-02-28 Пенетрантность Eugene Konev

Hello Andrew.

 On Mon, 28 Feb 2005 23:30:51 +0300
 you wrote:

   :  
   /etc/mdadm/mdadm.conf? 
  ,  (?)/mdadm(?) 
  

 AD iirc, raid autodetect  - 
 AD ,. ,   
 AD .

 raid autodetect  ,   mdadm.conf ,
/etc/init.d/mdadm  mdrun,   autodetect  
. --  

-- 
.
  .


Re: Software RAID

2005-02-28 Пенетрантность Eugene Konev

Hello Alexander.

 On Tue, 1 Mar 2005 07:38:40 +0200
 you wrote:

 AAV ,   mdadm,   raidtools2?
 AAV,  raidtools2  ...

  raidtools2   
?

-- 
  .   ? 
.


Re: Software RAID-1

2004-11-19 Пенетрантность Dmitry Fedoseev
В Чтв, 18.11.2004, в 22:22, Alexander A. Vlasov пишет:
 On Thu, Nov 18, 2004 at 03:55:27PM +0300, Eduard Ivanov wrote:
  
  Вопрос к знатокам: сильно ли я проиграю в производительности на том
  что винты на одном шлейфе?
 
 А в сравнении с чем? если все равно повесить на два ты не имеешь права,
 то сравнивать не с чем и соответственно никому не проиграешь.

Проигрыш в надежности очевиден - при отказе контроллера/шлейфа пропадет
весь RAID. Возможно, по этой же причине в HOWTO не встречаются описания
RAID5 на IDE: нужны минимум 3 диска, т.е. на одном контроллере будет
master+slave и его отказ развалит весь RAID. Нужен ли такой RAID -
решайте сами.

Про скорость сказать точно не получится, так как сильно ли я приграю
субъективно. Самое худшее, что я видел - скорость HDD (master) падала на
7-10% при наличии CD-ROM (slave) даже при отсутствии обращений к
CD-ROM'у. Самое худшее, чего можно ждать теоретически - падаение
скорости на 50% (это выясняется простой арифметикой :). Данные
приемлемой достоверности можно получить только экспериментом над
конкретным оборудованием.
-- 
Dmitry Fedoseev [EMAIL PROTECTED]


Re: Software RAID-1

2004-11-19 Пенетрантность Dmitry Fedoseev
В Птн, 19.11.2004, в 15:29, Eduard Ivanov пишет:
 потому что это опломбированный сервак. Если производительность упадёт
 на 50-70% то я его отвезу к тому кто его собирал и руки оторву... если
 10-20% то просто забью.

Если оба диска на одном шлейфе читают/пишут одновлеменно, то полоса
пропускания делится поровну между ними, т.е. по сравнению с одним диском
скорость может снизиться вдвое, причем если узким местом является
контроллер или шлейф (реально все же механика диска). Откуда может
получиться 70% замедление - не понял.

За счет параллелизма двух дисков можно даже надеяться на выигрыш в
скорости. Рассуждать можно долго, нужно просто попробовать.

А вот опломбированный сервак - это дурной тон. Для установки еще одного
модуля памяти к продавцу повезете? Сервак работать должен с перерывами
на профилактику, а не в гости кататься.
-- 
Dmitry Fedoseev [EMAIL PROTECTED]


Re: Software RAID-1

2004-11-19 Пенетрантность Artem Chuprina
Dmitry Fedoseev - debian-russian@lists.debian.org  @ Fri, 19 Nov 2004 11:18:35 
+0500:

   Вопрос к знатокам: сильно ли я проиграю в производительности на том
   что винты на одном шлейфе?
  
  А в сравнении с чем? если все равно повесить на два ты не имеешь права,
  то сравнивать не с чем и соответственно никому не проиграешь.

 DF Проигрыш в надежности очевиден - при отказе контроллера/шлейфа пропадет
 DF весь RAID. Возможно, по этой же причине в HOWTO не встречаются описания
 DF RAID5 на IDE: нужны минимум 3 диска, т.е. на одном контроллере будет
 DF master+slave и его отказ развалит весь RAID. Нужен ли такой RAID -
 DF решайте сами.

Дохнут все же обычно винты, а не контроллеры или шлейфы.  Контроллеры
опять же обычно дохнут не поодиночке, а вместе с матерью.

-- 
Artem Chuprina
RFC2822: [EMAIL PROTECTED], FIDO: 2:5020/122.256, Jabber: [EMAIL PROTECTED]



Re: Software RAID-1

2004-11-19 Пенетрантность Alexander A. Vlasov
Добрый день.

On Fri, Nov 19, 2004 at 01:29:44PM +0300, Eduard Ivanov wrote:
 
 Вопрос к знатокам: сильно ли я проиграю в производительности на том
 что винты на одном шлейфе?
 
 AAV А в сравнении с чем? если все равно повесить на два ты не имеешь права,
 AAV то сравнивать не с чем и соответственно никому не проиграешь.
 
 Не понял .. что значит не имею права? один винт - один контроллер. Так

Медленно и печально цитирую исходное письмо.
 Есть тачка в которой стоит два IDE винта одинаковых ... правда на
 одном шлейфе... но тут я бессилен ... тачка - сервак одноюнитовый
 стоечный ... колупать не имею права... ну как есть ...

Если колупать не имею права, то что за вопрос -- не лучше ли их
разнести на разные шлейфы. Если права не имеешь, то не лучше.

 имхо должно быть быстрее чем два винта - один контроллер.
 Да и немного ранее кто-то писал что во всех доках настоятельно
 рекомендуют разносить винты рэйда-1 на разные шлейфы. Вопрос был
 потому что это опломбированный сервак. Если производительность упадёт
 на 50-70% то я его отвезу к тому кто его собирал и руки оторву... если
 10-20% то просто забью.

Чтоб сравнить, надо разобрать и воткнуть на два шлейфа. Сделать так ты
не имеешь права (см. выше). 

-- 
WBR,
 Alexander A. Vlasov
 Debian GNU/Linux user
 JID:   [EMAIL PROTECTED]
 nic-hdl:   ZULU-UANIC



Re: Software RAID-1

2004-11-19 Пенетрантность Michael Shigorin
On Fri, Nov 19, 2004 at 11:18:35AM +0500, Dmitry Fedoseev wrote:
 Возможно, по этой же причине в HOWTO не встречаются описания
 RAID5 на IDE: нужны минимум 3 диска, т.е. на одном контроллере
 будет master+slave и его отказ развалит весь RAID.

Ну, IDE-каналов тоже бывает больше двух.

 Нужен ли такой RAID - решайте сами.

Другое дело -- что почему-то RAID5 предпочитаю на железе...
(опять же народ хихикал, проследив историю md.c до начала)

-- 
  WBR, Michael Shigorin [EMAIL PROTECTED]
  -- Linux.Kiev http://www.linux.kiev.ua/



Re: Software RAID-1

2004-11-18 Пенетрантность Andrew V.Statsenko
В Чтв, 18.11.2004, в 15:55, Eduard Ivanov пишет:
 Всем привет!
 Вот решил поставить на сервак  сие чудо... да вот не нашёл грамотной
 доки... чтобы понятно было что к чему  и почему  Посоветуйте что
 юзать mdadm или raidtools2 ?  Ну и было б не плохо узнать в теории как
 это делается...

http://www.tldp.org/HOWTO/Software-RAID-HOWTO.html


 
 Есть тачка в которой стоит два IDE винта одинаковых ... правда на
 одном шлейфе... но тут я бессилен ... тачка - сервак одноюнитовый
 стоечный ... колупать не имею права... ну как есть ...

SATA?

 
 Вопрос к знатокам: сильно ли я проиграю в производительности на том
 что винты на одном шлейфе?
 
 
 -- 
 Best regards,
  Eduard  mailto:[EMAIL PROTECTED]
 



Re: Software RAID-1

2004-11-18 Пенетрантность Jurgen V. Uzbekoff
On Thu, Nov 18, 2004 at 03:55:27PM +0300, Eduard Ivanov wrote:
 Вот решил поставить на сервак  сие чудо... да вот не нашёл грамотной
 доки... чтобы понятно было что к чему  и почему  Посоветуйте что
 юзать mdadm или raidtools2 ?  Ну и было б не плохо узнать в теории как
 это делается...

http://www.tldp.org/HOWTO/Software-RAID-HOWTO.html
http://myrddin.org/howto/debian-grub.html
http://alioth.debian.org/projects/rootraiddoc/  # весьма подробно
http://www.tldp.org/HOWTO/Boot+Root+Raid+LILO.html

В документации, идущей с raidtools2, тоже достаточно подробно всё описано. 

 Есть тачка в которой стоит два IDE винта одинаковых ... правда на
 одном шлейфе... но тут я бессилен ... тачка - сервак одноюнитовый
 стоечный ... колупать не имею права... ну как есть ...
 
 Вопрос к знатокам: сильно ли я проиграю в производительности на том
 что винты на одном шлейфе?

Везде в доках рекомендуют использовать по одному винту на контроллер. Наверное 
неспроста...

-- 
IOpuk.



Re: Software RAID-1

2004-11-18 Пенетрантность Michael Shigorin
On Thu, Nov 18, 2004 at 04:57:14PM +0300, Eduard Ivanov wrote:
 Спасибо :) Но я уже это прочитал... Эта дока входит в пакет
 raidtools2. Но некоторые личности настоятельно мне рекомендуют
 юзать mdadm.

Слышал упоминание про ситуацию, когда /etc/raidtab (который
вообще-то дублирует информацию, забиваемую в RAID superblock при
создании /dev/md*) всё-таки оказался необходим -- точнее не
вспомню, но ситуация была нештатной (возможно, моделировалось
помирание диска).

Это при использовании mdadm, которому raidtab опять же AFAIR не
требуется. (всё со слов, сам до mdadm добирался-добирался и не
добрался :)

-- 
  WBR, Michael Shigorin [EMAIL PROTECTED]
  -- Linux.Kiev http://www.linux.kiev.ua/



Re: Software RAID-1

2004-11-18 Пенетрантность Alexander A. Vlasov
Добрый день.

On Thu, Nov 18, 2004 at 03:55:27PM +0300, Eduard Ivanov wrote:
 Вот решил поставить на сервак  сие чудо... да вот не нашёл грамотной
 доки... чтобы понятно было что к чему  и почему  Посоветуйте что
 юзать mdadm или raidtools2 ?  Ну и было б не плохо узнать в теории как
 это делается...

Я использую raidtools2. mdadm тоже работает. По дефолту в сарже --
мдадм.

 Есть тачка в которой стоит два IDE винта одинаковых ... правда на
 одном шлейфе... но тут я бессилен ... тачка - сервак одноюнитовый
 стоечный ... колупать не имею права... ну как есть ...
 
 Вопрос к знатокам: сильно ли я проиграю в производительности на том
 что винты на одном шлейфе?

А в сравнении с чем? если все равно повесить на два ты не имеешь права,
то сравнивать не с чем и соответственно никому не проиграешь.


-- 
WBR,
 Alexander A. Vlasov
 Debian GNU/Linux user
 JID:   [EMAIL PROTECTED]
 nic-hdl:   ZULU-UANIC



Re: Software RAID-1

2004-11-18 Пенетрантность Dmitry Fedoseev
В Чтв, 18.11.2004, в 20:55, Michael Shigorin пишет:
 Это при использовании mdadm, которому raidtab опять же AFAIR не
 требуется. (всё со слов, сам до mdadm добирался-добирался и не
 добрался :)

Эти слова имеются в соответствующем мануале (man mdadm):
mdadm does not use /etc/raidtab, the raidtools configuration file, at
all.  It has a different configuration file with a different format and 
an different purpose.

Сам я тоже не проверял - можно поверить мануалу на слово? :)
-- 
Dmitry Fedoseev [EMAIL PROTECTED]


Re: Software RAID

2004-05-24 Пенетрантность Vladislav
Понедельник, 24-Май-2004 15:04, Konstantin Kubatkin написал:
   возникли вопросы по установке Debian на Software RAID

 есть у меня два SATA диска, /dev/hde и /dev/hdg. разбиваю их одинаково -
 Primary, Bootable, Linux raid autodetect. потом говорю mkraid /dev/md0, у
 меня появляется устройство md0, на которое я говорю cfdisk /dev/md0 и
 создаю разделы md0p1 - /, md0p5 - /usr, md0p6 - swap, md0p7 - /var, md0p8 -
 /tmp. но с этими разделами ничего делать не могу, ни напустить на них mkfs
 ничего другого

 может для каждого раздела надо делать отдельный RAID? типа md0 - /, md1 -
 /usr, etc?

http://opennet.ru/docs/HOWTO-RU/Software-RAID-HOWTO-2.2.html
 --
 Konstantin Kubatkin   [KUB-RIPE] [KUB-UANIC]
 Kherson, TriLogiC Group
 Fido: 2:468/[EMAIL PROTECTED]

-- 
Yagdzhyyev Vladislav
Dnepropetrovsk, Ukraine


Re: Software RAID

2004-05-24 Пенетрантность Pavel Kustov

Vladislav wrote:
У меня было такое же. Есть два варианта: 1. Делать под каждый раздел 
один RAID

2. Использовать LVM, что гораздо предпочтительнее, на мой взгляд.

--
Pasha Kustovmailto:[EMAIL PROTECTED]
IATP System Administrator Assistant



Re: Software RAID

2004-01-12 Пенетрантность Evgeny Yurkin
В сообщении от 12 Январь 2004 13:38 Viktor Vislobokov написал(a):
 Привет всем!

   Есть подозрение, что у меня из зеркала в Software Raid
 вылетел диск.

   Киньте pls как правильно должен выглядеть /proc/mdstat
Personalities : [raid1]
read_ahead 1024 sectors
md0 : active raid1 hdc1[1] hdb1[0]
  39078016 blocks [2/2] [UU]
unused devices: none

 и заодно ответьте на вопрос, можно ли на ходу сделать
 raidtoadd или для этого надо обязательно выводить систему
 в Single mode?
а зачем в сингл?
если винт подключен к системе то не надо

 Виктор

 N┘
[EMAIL PROTECTED]   И ┼[huФБjzН╡х ·╥╙╧К-√+-╠в⌡┴╘Х╝
╤╛╧╦чrз╨{.nг+┴╥⌠╝▀⌡∙Ю╗·ж°╤X╛╤f╛
╣ЙЕ┼кluФБjz+

-- 
С уважением,
Юркин Евгений


Re: Software RAID

2004-01-12 Пенетрантность Vlad Harchev
Hi,

On Mon, Jan 12, 2004 at 02:32:13PM +0500, Viktor Vislobokov wrote:
 Спасибо за ответ.
 
 Есть ещё один вопрос.
 Пусть у меня mkraid был сделан на один винт.
 Теперь я добавляю второй винт в зеркало через raidtoadd
 При следующей загрузке у меня система поймёт что в raid
 должно быть оба винта, а не один?

 Кажется да - так как в разделах массива записывается UUID массива, и
ядро сканирует все разделы с типом 0xfd (кажется) на всех винтах и создает
массивы из них, кажется даже не смотря на содержимое конфигов.

-- 
 Best regards,
  -Vlad



Re: Software RAID

2004-01-12 Пенетрантность Viktor Vislobokov
Спасибо за ответ.

Есть ещё один вопрос.
Пусть у меня mkraid был сделан на один винт.
Теперь я добавляю второй винт в зеркало через raidtoadd
При следующей загрузке у меня система поймёт что в raid
должно быть оба винта, а не один?

Виктор



Re: software raid

2003-04-14 Пенетрантность Andrey Nekrasov
Hello eugene v. samusev,

Once you wrote about software raid:
 Привет All.
 
 Насколько хорошо в линуксе реализован программный raid1 ?
 Возможно ли при этом грузиться как с главного винта так и с зеркального ?
 Есть смысл связываться ?
 Или лучше все таки приобрести дешевый райд контроллер ?

 сильно лучше raid5, а тот полный отстой! :-)
 
 диски (половинки зеркала) из зеркала можно просто использовать, не как mdX,
 то есть если даже будет ядро без поддержки raid device.

 lilo вроде как умеет грузиться с raid1, посмотри в его документации.

 аппаратный удобнее конечно.

-- 
Лежу на мягком диване. Надо работать - думаю я.



Re: software raid

2003-04-14 Пенетрантность Igor Suvorov

 Насколько хорошо в линуксе реализован программный raid1 ?

Работа с уже созданным массивом - более или менее нормально.
Инсталяция - отвратительно. Собственно, тут отсутствует возможность
инсталяции системы на подобный массив. Хотя потом при помощи
бубна и одной матери перенести туда систему можно.

 Возможно ли при этом грузиться как с главного винта так и с зеркального ?

Да, возможно.

 Есть смысл связываться ?

Х.З. Я связался. На проинсталлированных системах результатом вполне
доволен. Но в случае новой системы мысль упростить себе жизнь
периодически всплывает. К сожалению, до простоты реализации в NT
тут еще далеко.

--
Igor