Re: DRBD Primary/Primary

2013-07-11 Пенетрантность Артём Н. 
On 05.07.2013 20:45, Aleksandr Sytar wrote:
 
 
 
 2013/7/5 Артём Н. artio...@yandex.ru mailto:artio...@yandex.ru
 
 Логи. Какие есть.
 
 http://rghost.ru/47232977
 
 
 собственно вот и ответ:
 
 sock_recvmsg returned -11
 block drbd10: conn( WFConnection - BrokenPipe ) 
 block drbd10: short read expecting header on sock: r=-11 
 
 Говорит о том что ошибка чтения-записи в сетевой сокет
Сейчас split-brain нет (после включения хэндлеров, как в вашем конфиге), но
почему-то переходит в режим Primary/Secondary. Руками нормально выводится в
Primary/Primary.
С сетью проблем быть не может: два отдельных провода, сетевухи в бондинге на 2 
ГБит.

Но BrokenPipe тоже появлялся...
С чем может быть связано?


-- 
To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org
with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org
Archive: http://lists.debian.org/51decef5.3090...@yandex.ru

Re: DRBD Primary/Primary

2013-07-05 Пенетрантность Артём Н. 
Логи. Какие есть.

http://rghost.ru/47232977


-- 
To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org
with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org
Archive: http://lists.debian.org/51d6ef62.9090...@yandex.ru

Re: DRBD Primary/Primary

2013-07-05 Пенетрантность Aleksandr Sytar 
2013/7/5 Артём Н. artio...@yandex.ru

 Логи. Какие есть.

 http://rghost.ru/47232977


собственно вот и ответ:

sock_recvmsg returned -11
block drbd10: conn( WFConnection - BrokenPipe )
block drbd10: short read expecting header on sock: r=-11

Говорит о том что ошибка чтения-записи в сетевой сокет

Re: DRBD Primary/Primary

2013-07-05 Пенетрантность Артём Н. 
On 05.07.2013 20:45, Aleksandr Sytar wrote:
 
 
 
 2013/7/5 Артём Н. artio...@yandex.ru mailto:artio...@yandex.ru
 
 Логи. Какие есть.
 
 http://rghost.ru/47232977
 
 
 собственно вот и ответ:
 
 sock_recvmsg returned -11
 block drbd10: conn( WFConnection - BrokenPipe ) 
 block drbd10: short read expecting header on sock: r=-11 
 
 Говорит о том что ошибка чтения-записи в сетевой сокет
Я вчера перенастраивал сеть (бондинг делал) и не выключил ресурсы. А так, сеть
работает нормально: там два канала.
Да и, в любом случае, DRBD же не должен падать напрочь (в вечный split-brain),
при разрыве и восстановлении соединения?


-- 
To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org
with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org
Archive: http://lists.debian.org/51d6ffda.4070...@yandex.ru

Re: DRBD Primary/Primary

2013-07-05 Пенетрантность Grey Fenrir 
Ребята, у меня от вас обоих дубли (последние три письма - каждое по два
экземпляра, в других тредах подобное не замечено). 
Вопрос: это только у меня так gmail/claws чудит или таки бонус рассылки?

-
Тарас aka Loki


--
To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org
with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org
Archive: http://lists.debian.org/20130706004423.7accd804@lokispawn

Re: DRBD Primary/Primary

2013-07-05 Пенетрантность Артём Н. 
On 06.07.2013 01:44, Grey Fenrir wrote:
 Ребята, у меня от вас обоих дубли (последние три письма - каждое по два
 экземпляра, в других тредах подобное не замечено). 
 Вопрос: это только у меня так gmail/claws чудит или таки бонус рассылки?
 
 -
 Тарас aka Loki
 
 
Не знаю, но у меня по одному письму. Рассылка, бывает, глючит.


-- 
To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org
with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org
Archive: http://lists.debian.org/51d7969b.9080...@yandex.ru

Re: DRBD Primary/Primary

2013-07-04 Пенетрантность Артём Н. 
 [1] - http://www.drbd.org/users-guide/ch-ocfs2.html
Кстати, вот эта строчка мне не совсем понятна:
colocation c_ocfs2 cl_fs_ocfs2 cl_ocfs2mgmt ms_drbd_ocfs2:Master

Какой colocation, если два клона?


-- 
To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org
with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org
Archive: http://lists.debian.org/51d58ce9.7060...@yandex.ru

Re: DRBD Primary/Primary

2013-07-04 Пенетрантность Aleksandr Sytar 
2013/7/4 Артём Н. artio...@yandex.ru

  [1] - http://www.drbd.org/users-guide/ch-ocfs2.html
 Кстати, вот эта строчка мне не совсем понятна:
 colocation c_ocfs2 cl_fs_ocfs2 cl_ocfs2mgmt ms_drbd_ocfs2:Master

 Какой colocation, если два клона?


Как вы себе представляете работу RAID0 в режиме Мастер-Мастер?

Re: DRBD Primary/Primary

2013-07-04 Пенетрантность Артём Н. 
Конфиги DRBD и Pacemaker во вложении.

Split brain:
version: 8.3.11 (api:88/proto:86-96)
srcversion: F937DCB2E5D83C6CCE4A6C9
 0: cs:StandAlone ro:Primary/Unknown ds:UpToDate/DUnknown   r-
ns:2796 nr:1832 dw:4628 dr:124530 al:6 bm:0 lo:0 pe:0 ua:0 ap:0 ep:1 wo:f 
oos:0
 1: cs:StandAlone ro:Primary/Unknown ds:UpToDate/DUnknown   r-
ns:0 nr:0 dw:0 dr:784 al:0 bm:0 lo:0 pe:0 ua:0 ap:0 ep:1 wo:f oos:0

10: cs:StandAlone ro:Primary/Unknown ds:UpToDate/DUnknown   r-
ns:104696 nr:1136 dw:105832 dr:186265 al:82 bm:3 lo:0 pe:0 ua:0 ap:0 ep:1
wo:f oos:0


Периодически всё работает нормально:
  0:system_data  Connected  Primary/Primary UpToDate/UpToDate C r-
  1:vm_volumes   Connected  Primary/Primary UpToDate/UpToDate C r-
 10:repository   SyncTarget Primary/Primary Inconsistent/UpToDate C r-
[=..] sync'ed: 54.2% (432504/933888)K
...
  0:system_data  Connected Primary/Primary UpToDate/UpToDate C r-
/mnt/system ocfs2 90G  968M 90G  2%
  1:vm_volumes   Connected Primary/Primary UpToDate/UpToDate C r-
 10:repository   Connected Primary/Primary UpToDate/UpToDate C r- /mnt/repo
  ocfs2 250G 82G  169G 33%
...

 Master/Slave Set: ms_drbd_repo [p_drbd_repo]
 Masters: [ cluster-data-1 cluster-data-2 ]
 Master/Slave Set: ms_drbd_system_data [p_drbd_system_data]
 Masters: [ cluster-data-1 cluster-data-2 ]
 Master/Slave Set: ms_drbd_vm_volumes [p_drbd_vm_volumes]
 Masters: [ cluster-data-1 cluster-data-2 ]
 Clone Set: ce_ocfs2mgmt [g_ocfs2mgmt]
 Started: [ cluster-data-1 cluster-data-2 ]
 Clone Set: ce_mysql [p_mysql]
 Started: [ cluster-data-1 cluster-data-2 ]
 Clone Set: ce_system_fs [p_system_fs]
 Started: [ cluster-data-1 cluster-data-2 ]
 Clone Set: ce_rabbitmq [p_rabbitmq]
 Started: [ cluster-data-1 cluster-data-2 ]
 Clone Set: ce_repo_fs [p_repo_fs]
 Started: [ cluster-data-1 cluster-data-2 ]
 Clone Set: ce_data_ip [p_data_ip]
 Started: [ cluster-data-1 cluster-data-2 ]
 Clone Set: ce_webserver [p_webserver]
 Started: [ cluster-data-1 cluster-data-2 ]


В Primary/Primary заработало после перевода в Primay/Secondary и обратно:

master-max у ms_drbd_system_data был 1.

root@cluster-data-1:~# drbd-overview
  0:system_data  StandAlone Primary/Unknown UpToDate/DUnknown r-
  1:vm_volumes   SyncTarget Primary/Primary Inconsistent/UpToDate C  r-
[] sync'ed:  1.7% (729260/741688)Mfinish: 1:44:23
speed: 119,200 (112,632) want: 1,000,001 K/sec
 10:repository   Connected  Primary/Primary UpToDate/UpToDate C  r-

root@cluster-data-1:~# drbd-overview
^C

root@cluster-data-1:~# crm resource stop ms_drbd_system_data
root@cluster-data-1:~# crm configure edit ms_drbd_system_data

root@cluster-data-1:~# drbd-overview
  0:system_data  StandAlone Primary/Unknown UpToDate/DUnknown r-
  1:vm_volumes   SyncTarget Primary/Primary Inconsistent/UpToDate C  r-
[] sync'ed:  3.0% (719600/741688)Mfinish: 1:46:58
speed: 114,784 (113,096) want: 1,000,001 K/sec
 10:repository   Connected  Primary/Primary UpToDate/UpToDate C  r-

root@cluster-data-1:~# drbd-overview
  0:system_data  StandAlone Primary/Unknown UpToDate/DUnknown r-
  1:vm_volumes   SyncTarget Primary/Primary Inconsistent/UpToDate C  r-
[] sync'ed:  3.3% (717228/741688)Mfinish: 1:45:44
speed: 115,744 (113,340) want: 1,000,001 K/sec
 10:repository   Connected  Primary/Primary UpToDate/UpToDate C  r-

root@cluster-data-1:~# crm resource manage ms_drbd_system_data
root@cluster-data-1:~# drbd-overview
  0:system_data  Unconfigured .   . . .
  1:vm_volumes   SyncTarget   Primary/Primary Inconsistent/UpToDate C r-
[] sync'ed:  4.2% (710848/741688)Mfinish: 1:45:17
speed: 115,212 (113,600) want: 1,000,001 K/sec
 10:repository   ConnectedPrimary/Primary UpToDate/UpToDate C r-

root@cluster-data-1:~# crm resource start ms_drbd_system_data
root@cluster-data-1:~# drbd-overview
  0:system_data  WFBitMapS  Primary/Secondary UpToDate/Consistent   C r-
  1:vm_volumes   SyncTarget Primary/Primary   Inconsistent/UpToDate C r-
[] sync'ed:  4.8% (706760/741688)Mfinish: 1:41:44
speed: 118,540 (113,908) want: 1,000,001 K/sec
 10:repository   Connected  Primary/Primary   UpToDate/UpToDate C r-
root@cluster-data-1:~# drbd-overview
  0:system_data  Connected  Primary/Secondary UpToDate/UpToDate C r-
  1:vm_volumes   SyncTarget Primary/Primary   Inconsistent/UpToDate C r-
[...] sync'ed:  5.2% (703360/741688)Mfinish: 1:44:21
speed: 115,008 (113,764) want: 1,000,001 K/sec
 10:repository   Connected  Primary/Primary   UpToDate/UpToDate C r-

root@cluster-data-1:~# crm configure edit ms_drbd_system_data
root@cluster-data-1:~# crm configure show ms_drbd_system_data
ms

Re: DRBD Primary/Primary

2013-07-04 Пенетрантность Артём Н. 
  [1] - http://www.drbd.org/users-guide/ch-ocfs2.html
 Кстати, вот эта строчка мне не совсем понятна:
 colocation c_ocfs2 cl_fs_ocfs2 cl_ocfs2mgmt ms_drbd_ocfs2:Master
 Какой colocation, если два клона?
 Как вы себе представляете работу RAID0 в режиме Мастер-Мастер? 
Причём здесь RAID-0?


-- 
To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org
with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org
Archive: http://lists.debian.org/51d58ed7.2050...@yandex.ru

Re: DRBD Primary/Primary

2013-07-04 Пенетрантность Aleksandr Sytar 
4 июля 2013 г., 19:03 пользователь Артём Н. artio...@yandex.ru написал:

   [1] - http://www.drbd.org/users-guide/ch-ocfs2.html
  Кстати, вот эта строчка мне не совсем понятна:
  colocation c_ocfs2 cl_fs_ocfs2 cl_ocfs2mgmt ms_drbd_ocfs2:Master
  Какой colocation, если два клона?
  Как вы себе представляете работу RAID0 в режиме Мастер-Мастер?
 Причём здесь RAID-0?


Попутал

Re: DRBD Primary/Primary

2013-07-04 Пенетрантность Aleksandr Sytar 
2013/7/4 Артём Н. artio...@yandex.ru

 Конфиги DRBD и Pacemaker во вложении.

 Split brain:
 version: 8.3.11 (api:88/proto:86-96)
 srcversion: F937DCB2E5D83C6CCE4A6C9
  0: cs:StandAlone ro:Primary/Unknown ds:UpToDate/DUnknown   r-
 ns:2796 nr:1832 dw:4628 dr:124530 al:6 bm:0 lo:0 pe:0 ua:0 ap:0 ep:1
 wo:f oos:0
  1: cs:StandAlone ro:Primary/Unknown ds:UpToDate/DUnknown   r-
 ns:0 nr:0 dw:0 dr:784 al:0 bm:0 lo:0 pe:0 ua:0 ap:0 ep:1 wo:f oos:0

 10: cs:StandAlone ro:Primary/Unknown ds:UpToDate/DUnknown   r-
 ns:104696 nr:1136 dw:105832 dr:186265 al:82 bm:3 lo:0 pe:0 ua:0 ap:0
 ep:1
 wo:f oos:0


 Периодически всё работает нормально:
   0:system_data  Connected  Primary/Primary UpToDate/UpToDate C r-
   1:vm_volumes   Connected  Primary/Primary UpToDate/UpToDate C r-
  10:repository   SyncTarget Primary/Primary Inconsistent/UpToDate C r-
 [=..] sync'ed: 54.2% (432504/933888)K
 ...
   0:system_data  Connected Primary/Primary UpToDate/UpToDate C r-
 /mnt/system ocfs2 90G  968M 90G  2%
   1:vm_volumes   Connected Primary/Primary UpToDate/UpToDate C r-
  10:repository   Connected Primary/Primary UpToDate/UpToDate C r-
 /mnt/repo
   ocfs2 250G 82G  169G 33%
 ...

  Master/Slave Set: ms_drbd_repo [p_drbd_repo]
  Masters: [ cluster-data-1 cluster-data-2 ]
  Master/Slave Set: ms_drbd_system_data [p_drbd_system_data]
  Masters: [ cluster-data-1 cluster-data-2 ]
  Master/Slave Set: ms_drbd_vm_volumes [p_drbd_vm_volumes]
  Masters: [ cluster-data-1 cluster-data-2 ]
  Clone Set: ce_ocfs2mgmt [g_ocfs2mgmt]
  Started: [ cluster-data-1 cluster-data-2 ]
  Clone Set: ce_mysql [p_mysql]
  Started: [ cluster-data-1 cluster-data-2 ]
  Clone Set: ce_system_fs [p_system_fs]
  Started: [ cluster-data-1 cluster-data-2 ]
  Clone Set: ce_rabbitmq [p_rabbitmq]
  Started: [ cluster-data-1 cluster-data-2 ]
  Clone Set: ce_repo_fs [p_repo_fs]
  Started: [ cluster-data-1 cluster-data-2 ]
  Clone Set: ce_data_ip [p_data_ip]
  Started: [ cluster-data-1 cluster-data-2 ]
  Clone Set: ce_webserver [p_webserver]
  Started: [ cluster-data-1 cluster-data-2 ]


 В Primary/Primary заработало после перевода в Primay/Secondary и обратно:

 master-max у ms_drbd_system_data был 1.

 root@cluster-data-1:~# drbd-overview
   0:system_data  StandAlone Primary/Unknown UpToDate/DUnknown r-
   1:vm_volumes   SyncTarget Primary/Primary Inconsistent/UpToDate C
  r-
 [] sync'ed:  1.7% (729260/741688)Mfinish:
 1:44:23
 speed: 119,200 (112,632) want: 1,000,001 K/sec
  10:repository   Connected  Primary/Primary UpToDate/UpToDate C
  r-

 root@cluster-data-1:~# drbd-overview
 ^C

 root@cluster-data-1:~# crm resource stop ms_drbd_system_data
 root@cluster-data-1:~# crm configure edit ms_drbd_system_data

 root@cluster-data-1:~# drbd-overview
   0:system_data  StandAlone Primary/Unknown UpToDate/DUnknown r-
   1:vm_volumes   SyncTarget Primary/Primary Inconsistent/UpToDate C
  r-
 [] sync'ed:  3.0% (719600/741688)Mfinish:
 1:46:58
 speed: 114,784 (113,096) want: 1,000,001 K/sec
  10:repository   Connected  Primary/Primary UpToDate/UpToDate C
  r-

 root@cluster-data-1:~# drbd-overview
   0:system_data  StandAlone Primary/Unknown UpToDate/DUnknown r-
   1:vm_volumes   SyncTarget Primary/Primary Inconsistent/UpToDate C
  r-
 [] sync'ed:  3.3% (717228/741688)Mfinish:
 1:45:44
 speed: 115,744 (113,340) want: 1,000,001 K/sec
  10:repository   Connected  Primary/Primary UpToDate/UpToDate C
  r-

 root@cluster-data-1:~# crm resource manage ms_drbd_system_data
 root@cluster-data-1:~# drbd-overview
   0:system_data  Unconfigured .   . . .
   1:vm_volumes   SyncTarget   Primary/Primary Inconsistent/UpToDate C
 r-
 [] sync'ed:  4.2% (710848/741688)Mfinish:
 1:45:17
 speed: 115,212 (113,600) want: 1,000,001 K/sec
  10:repository   ConnectedPrimary/Primary UpToDate/UpToDate C
 r-

 root@cluster-data-1:~# crm resource start ms_drbd_system_data
 root@cluster-data-1:~# drbd-overview
   0:system_data  WFBitMapS  Primary/Secondary UpToDate/Consistent   C
 r-
   1:vm_volumes   SyncTarget Primary/Primary   Inconsistent/UpToDate C
 r-
 [] sync'ed:  4.8% (706760/741688)Mfinish:
 1:41:44
 speed: 118,540 (113,908) want: 1,000,001 K/sec
  10:repository   Connected  Primary/Primary   UpToDate/UpToDate C
 r-
 root@cluster-data-1:~# drbd-overview
   0:system_data  Connected  Primary/Secondary UpToDate/UpToDate C
 r-
   1:vm_volumes   SyncTarget Primary/Primary   Inconsistent/UpToDate C
 r-
 [...] sync'ed:  5.2% (703360/741688)Mfinish:
 1:44:21
 speed: 115,008 (113,764) want: 1,000,001 K/sec
  10:repository   Connected  Primary/Primary   UpToDate/UpToDate C
 r-

Re: DRBD Primary/Primary

2013-07-03 Пенетрантность Aleksandr Sytar 
30 июня 2013 г., 21:55 пользователь Артём Н. artio...@yandex.ru написал:

 Делаю DRBD в режиме Primary/Primary. На неё устанавливаю OCFS2.
 Всё поддерживает Pacemaker.

 Проблема в том, что после перезагрузки одной из машин, наблюдается split
 brain.
 И устранить я его могу, только установив в ms master-max=1.
 После этого происходит синхронизация, я устанавливаю master-max=2, и DRBD
 начинает работать в режиме Primary/Primary.


- Кто управляет статусом DRBD, сам DRBD или Pacemaker? Какие хендлеры при
этом установлены? [1]
- В случае перезагрузки одной из нод какой у нее статус в Pacemaker и какой
в DRBD?

[1] - http://www.drbd.org/users-guide/ch-ocfs2.html

Re: DRBD Primary/Primary

2013-07-03 Пенетрантность Артём Н. 
On 03.07.2013 18:00, Aleksandr Sytar wrote:
 
 30 июня 2013 г., 21:55 пользователь Артём Н. artio...@yandex.ru
 mailto:artio...@yandex.ru написал:
 
 Делаю DRBD в режиме Primary/Primary. На неё устанавливаю OCFS2.
 Всё поддерживает Pacemaker.
 
 Проблема в том, что после перезагрузки одной из машин, наблюдается split 
 brain.
 И устранить я его могу, только установив в ms master-max=1.
 После этого происходит синхронизация, я устанавливаю master-max=2, и 
 DRBD
 начинает работать в режиме Primary/Primary.
 
 
 - Кто управляет статусом DRBD, сам DRBD или Pacemaker? Какие хендлеры при этом
 установлены? [1]
Управляет Pacemaker. Насчёт хэндлеров: посмотрю завтра и скину конфиги, как
DRBD, так и Pacemaker.

 - В случае перезагрузки одной из нод какой у нее статус в Pacemaker и какой в 
 DRBD?
В Pacemaker не помню. Скажу завтра. В DRBD - Master/Unknown.


-- 
To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org
with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org
Archive: http://lists.debian.org/51d446ea.2090...@yandex.ru

Re: DRBD Primary/Primary

2013-07-02 Пенетрантность Артём Н. 
Что же, ни у кого нет опыта обращения с DRBD в Primary/Primary режиме?


-- 
To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org
with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org
Archive: http://lists.debian.org/51d3129b.20...@yandex.ru

DRBD Primary/Primary

2013-06-30 Пенетрантность Артём Н. 
Делаю DRBD в режиме Primary/Primary. На неё устанавливаю OCFS2.
Всё поддерживает Pacemaker.

Проблема в том, что после перезагрузки одной из машин, наблюдается split brain.
И устранить я его могу, только установив в ms master-max=1.
После этого происходит синхронизация, я устанавливаю master-max=2, и DRBD
начинает работать в режиме Primary/Primary.

Как сделать правильно, т.е. так, чтобы split brain не возникал?

Вопрос 2.

Я хочу, чтобы ВМ могли получать тома в группе LVM, расположенной на общем
хранилище. Группа расположена на DRBD томе в режиме Primary/Primary. Хочу, чтобы
тома создавались по запросу, используя Cinder и затем пробрасывались по iSCSI
туда, где выполняются ВМ.
Нужен ли cLVM в данном случае?


-- 
To UNSUBSCRIBE, email to debian-russian-requ...@lists.debian.org
with a subject of unsubscribe. Trouble? Contact listmas...@lists.debian.org
Archive: http://lists.debian.org/51d0711d.1080...@yandex.ru