ALT Linux sysadmins discussion
 help / color / mirror / Atom feed
* [Sysadmins] Linux-HA + OpenVZ
@ 2006-12-21 12:26 ABATAPA
  2006-12-21 12:30 ` Slava Dubrovskiy
  2006-12-21 12:39 ` Шенцев Алексей Владимирович
  0 siblings, 2 replies; 28+ messages in thread
From: ABATAPA @ 2006-12-21 12:26 UTC (permalink / raw)
  To: sysadmins

	Доброго дня!
Кто делал? Как раз в ноябрьском и декабрьском номерах было...
Интересует вариант "пропорционального"  разнесения сервисов (или VE) по двум 
узлам кластера - для того, чтобы второй не простаивал. :)
Кто тут автор статьи?  :)
-- 
ABATAPA


^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-21 12:26 [Sysadmins] Linux-HA + OpenVZ ABATAPA
@ 2006-12-21 12:30 ` Slava Dubrovskiy
  2006-12-21 12:39 ` Шенцев Алексей Владимирович
  1 sibling, 0 replies; 28+ messages in thread
From: Slava Dubrovskiy @ 2006-12-21 12:30 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

[-- Attachment #1: Type: text/plain, Size: 337 bytes --]

ABATAPA wrote:
> Кто делал? Как раз в ноябрьском и декабрьском номерах было...
>   
Не делал
> Интересует вариант "пропорционального"  разнесения сервисов (или VE) по двум 
> узлам кластера - для того, чтобы второй не простаивал. :)
> Кто тут автор статьи?  :)
prokopiev@ вроде  :-) 

-- 
С уважением,
Дубровский Вячеслав.


[-- Attachment #2: S/MIME Cryptographic Signature --]
[-- Type: application/x-pkcs7-signature, Size: 3237 bytes --]

^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-21 12:26 [Sysadmins] Linux-HA + OpenVZ ABATAPA
  2006-12-21 12:30 ` Slava Dubrovskiy
@ 2006-12-21 12:39 ` Шенцев Алексей Владимирович
  2006-12-21 13:46   ` ABATAPA
  1 sibling, 1 reply; 28+ messages in thread
From: Шенцев Алексей Владимирович @ 2006-12-21 12:39 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

В сообщении от Четверг 21 декабря 2006 15:26 ABATAPA написал(a):
> 	Доброго дня!
Доброго!
> Кто делал? Как раз в ноябрьском и декабрьском номерах было...
> Интересует вариант "пропорционального"  разнесения сервисов (или VE) по
> двум узлам кластера - для того, чтобы второй не простаивал. :)
> Кто тут автор статьи?  :)
Делал Евгений Прокопьев. Вот:
http://git.altlinux.org/people/kirill/packages/?p=docs-linux_ha_openvz-enp.git;a=tree
-- 
С уважением Шенцев Алексей Владимирович.
E-mail: ashen@nsrz.ru
ICQ: 271053845
XMPP: AlexShen@jabber.ru

^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-21 12:39 ` Шенцев Алексей Владимирович
@ 2006-12-21 13:46   ` ABATAPA
  2006-12-21 14:20     ` Eugene Prokopiev
  2006-12-21 15:11     ` Konstantin A. Lepikhov
  0 siblings, 2 replies; 28+ messages in thread
From: ABATAPA @ 2006-12-21 13:46 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

21 декабря 2006 15:39, Шенцев Алексей Владимирович написал:
> Делал Евгений Прокопьев. Вот:
> http://git.altlinux.org/people/kirill/packages/?p=docs-linux_ha_openvz-enp.
>git;a=tree
Вижу-вижу. :) Но там не active/active конфигурация. Понимаю, что это - лишь 
настройка linux-ha, но я хотел бы услышать мнения, и т.д.
-- 
ABATAPA


^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-21 13:46   ` ABATAPA
@ 2006-12-21 14:20     ` Eugene Prokopiev
  2006-12-21 18:12       ` ABATAPA
  2006-12-21 15:11     ` Konstantin A. Lepikhov
  1 sibling, 1 reply; 28+ messages in thread
From: Eugene Prokopiev @ 2006-12-21 14:20 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

ABATAPA пишет:
> 21 декабря 2006 15:39, Шенцев Алексей Владимирович написал:
> 
>>Делал Евгений Прокопьев. Вот:
>>http://git.altlinux.org/people/kirill/packages/?p=docs-linux_ha_openvz-enp.
>>git;a=tree
> 
> Вижу-вижу. :) Но там не active/active конфигурация. Понимаю, что это - лишь 
> настройка linux-ha, но я хотел бы услышать мнения, и т.д.

Поначалу думал об этом :) Есть 2 сложности:

1) при отказе одного узла из двух (а я рассматриваю это не как нечто 
ужасное, а как штатную ситуацию ;) ) производительность системы в целом 
может снизиться до неприемлемой. Как-то давно была у меня веселая 
ситуация, когда производительности резервного сервера хватило на 
нормальную работу, но не хватило на построение месячных отчетов :)

2) если таки делать, то первым делом нужно собрать в Сизиф полноценную 
кластерную ФС (drbd таковой еще не является) - об этом я вкратце писал. 
Далее нужно придумать, как написать скрипт для управления ресурсом vz, 
чтобы штатно VE распределялись по узлам кластера, а при отказе узла 
переезжали на оставшиеся в живых.

Еще хочу слегка посыпать голову пеплом: я конфигурировал heartbeat в 
стиле 1.x, тогда как правильнее, наверное, было бы использовать 
OCF-style конфигурацию, просто в моем случае (только 2 узла) она никаких 
особых преимуществ не давала. И heartbeat у нас еще сильно нуждается в 
распиливании (впрочем спасибо lakostis@ за то, что уже есть)

-- 
С уважением, Прокопьев Евгений



^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-21 13:46   ` ABATAPA
  2006-12-21 14:20     ` Eugene Prokopiev
@ 2006-12-21 15:11     ` Konstantin A. Lepikhov
  2006-12-21 17:04       ` ABATAPA
  1 sibling, 1 reply; 28+ messages in thread
From: Konstantin A. Lepikhov @ 2006-12-21 15:11 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

[-- Attachment #1: Type: text/plain, Size: 458 bytes --]

Hi ABATAPA!

Thursday 21, at 04:46:42 PM you wrote:

> 21 декабря 2006 15:39, Шенцев Алексей Владимирович написал:
> > Делал Евгений Прокопьев. Вот:
> > http://git.altlinux.org/people/kirill/packages/?p=docs-linux_ha_openvz-enp.
> >git;a=tree
> Вижу-вижу. :) Но там не active/active конфигурация. Понимаю, что это - лишь 
> настройка linux-ha, но я хотел бы услышать мнения, и т.д.
для active/active нужен либо drbd8, либо LVS.

-- 
WBR et al.

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 189 bytes --]

^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-21 15:11     ` Konstantin A. Lepikhov
@ 2006-12-21 17:04       ` ABATAPA
  2006-12-21 18:08         ` Konstantin A. Lepikhov
  0 siblings, 1 reply; 28+ messages in thread
From: ABATAPA @ 2006-12-21 17:04 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

21 декабря 2006 18:11, Konstantin A. Lepikhov написал:
> для active/active нужен либо drbd8, либо LVS.
Вот я и спрашиваю - кто делал?
У нас drbd 7.22 в Сизифе. 
Как это можно сделать с LVS?  Есть какие-нибудь подсказки? 
Ситуация с "избыточностью" серверов меня не устраивает...
-- 
ABATAPA


^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-21 17:04       ` ABATAPA
@ 2006-12-21 18:08         ` Konstantin A. Lepikhov
  2006-12-21 18:52           ` ABATAPA
  2006-12-22 12:50           ` Alexey Borovskoy
  0 siblings, 2 replies; 28+ messages in thread
From: Konstantin A. Lepikhov @ 2006-12-21 18:08 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

[-- Attachment #1: Type: text/plain, Size: 638 bytes --]

Hi ABATAPA!

Thursday 21, at 08:04:21 PM you wrote:

> 21 декабря 2006 18:11, Konstantin A. Lepikhov написал:
> > для active/active нужен либо drbd8, либо LVS.
> Вот я и спрашиваю - кто делал?
> У нас drbd 7.22 в Сизифе. 
drbd8 официально еще очень сырой. Посмотрите архивы их рассылки, где народ
постоянно жалуется на oops'ы. Лучше тогда использовать ocfs2, оно хотя бы
работает. Но для ocfs2 также необходимо собирать обвязку.

> Как это можно сделать с LVS?  Есть какие-нибудь подсказки? 
> Ситуация с "избыточностью" серверов меня не устраивает...
http://www.linuxvirtualserver.org/architecture.html

-- 
WBR et al.

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 189 bytes --]

^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-21 14:20     ` Eugene Prokopiev
@ 2006-12-21 18:12       ` ABATAPA
  2006-12-21 20:07         ` Eugene Prokopiev
  0 siblings, 1 reply; 28+ messages in thread
From: ABATAPA @ 2006-12-21 18:12 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

21 декабря 2006 17:20, Eugene Prokopiev написал:
> ABATAPA пишет:
> 1) при отказе одного узла из двух (а я рассматриваю это не как нечто
> ужасное, а как штатную ситуацию ;) ) производительность системы в целом
> может снизиться до неприемлемой.
Это все зависит от многих условий: от средней нагрузки на каждый сервер, от  
отклонений от среднего, от мощности "железа",  и т.д. Например, я предпочел 
бы, чтобы критически важные для узла задачи при останове сервера (при аварии, 
при плановых/внеплановых работах, и т.д.) не приводили к коллапсу узла (и 
многочисленным звонкам;) ), а всего лишь увеличивали нагрузку на 
оставшийся(-еся) вервер(а), ибо это - ситуация временная, и - несомненно 
лучшая.
> 2) если таки делать, то первым делом нужно собрать в Сизиф полноценную
> кластерную ФС (drbd таковой еще не является) - об этом я вкратце писал.
Ну, кто-то советует drbd8, LVM, кто-то - что-то еще... 
Но у нас нет ни drbd8, ни GFS... 

> Далее нужно придумать, как написать скрипт для управления ресурсом vz,
> чтобы штатно VE распределялись по узлам кластера, а при отказе узла
> переезжали на оставшиеся в живых.
Ну, отдельные приложения ведь  Heartbeat "раскидывает" по узлам, наверное, 
можно это же сделать и для VE...

> И heartbeat у нас еще сильно нуждается в
> распиливании (впрочем спасибо lakostis@ за то, что уже есть)
Присоединяюсь.
Но - уж очень хочется "красивого" решения. 
Ну не хочу я туда ставить RH, SUSE или что-то еще!
Даже несмотря на статус Сизифа. :)
-- 
ABATAPA


^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-21 18:08         ` Konstantin A. Lepikhov
@ 2006-12-21 18:52           ` ABATAPA
  2006-12-22 12:50           ` Alexey Borovskoy
  1 sibling, 0 replies; 28+ messages in thread
From: ABATAPA @ 2006-12-21 18:52 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

21 декабря 2006 21:08, Konstantin A. Lepikhov написал:
> > Как это можно сделать с LVS?  Есть какие-нибудь подсказки?
> > Ситуация с "избыточностью" серверов меня не устраивает...
>
> http://www.linuxvirtualserver.org/architecture.html
Вечер. Устал. Протормозил. Почему-то скорее увиделось VFS, чем Linux Virtual 
Server. Но это - тоже избыточность...
-- 
ABATAPA


^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-21 18:12       ` ABATAPA
@ 2006-12-21 20:07         ` Eugene Prokopiev
  2006-12-21 20:13           ` Konstantin A. Lepikhov
                             ` (3 more replies)
  0 siblings, 4 replies; 28+ messages in thread
From: Eugene Prokopiev @ 2006-12-21 20:07 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

ABATAPA пишет:
> 21 декабря 2006 17:20, Eugene Prokopiev написал:
> 
>>ABATAPA пишет:
>>1) при отказе одного узла из двух (а я рассматриваю это не как нечто
>>ужасное, а как штатную ситуацию ;) ) производительность системы в целом
>>может снизиться до неприемлемой.
> 
> Это все зависит от многих условий: от средней нагрузки на каждый сервер, от  
> отклонений от среднего, от мощности "железа",  и т.д. Например, я предпочел 
> бы, чтобы критически важные для узла задачи при останове сервера (при аварии, 
> при плановых/внеплановых работах, и т.д.) не приводили к коллапсу узла (и 
> многочисленным звонкам;) ), а всего лишь увеличивали нагрузку на 
> оставшийся(-еся) вервер(а), ибо это - ситуация временная, и - несомненно 
> лучшая.

так я как раз о том, что слишком большой рост нагрузки иногда может быть 
равносилен остановке системы ;)

>>2) если таки делать, то первым делом нужно собрать в Сизиф полноценную
>>кластерную ФС (drbd таковой еще не является) - об этом я вкратце писал.
> 
> Ну, кто-то советует drbd8, LVM, кто-то - что-то еще... 
> Но у нас нет ни drbd8, ни GFS... 

а вот mike@ недавно грозился lustre в Сизиф собирать (clusterfs.com) ;)

а еще я попробовал бы глянуть на ocfs2 ...

>>Далее нужно придумать, как написать скрипт для управления ресурсом vz,
>>чтобы штатно VE распределялись по узлам кластера, а при отказе узла
>>переезжали на оставшиеся в живых.
> 
> Ну, отдельные приложения ведь  Heartbeat "раскидывает" по узлам, наверное, 
> можно это же сделать и для VE...

примера в /usr/lib/ocf/resource.d/heartbeat/ сходу не нашел, возможно 
плохо смотрел ...

мне это видится примерно так:

1) отдельные конфигурации openvz на каждом узле
2) /var/lib/vz/private/ на общем для всех узлов разделе
3) ссылки из общих конфигураций в /var/lib/vz/private/
4) stonith, чтобы один VE не мучали несколько узлов сразу
5) самое сложное - алгоритм распределения еще не запущенных или 
остановившихся по причине смерти узла VE по работающим узлам

>>И heartbeat у нас еще сильно нуждается в
>>распиливании (впрочем спасибо lakostis@ за то, что уже есть)
> 
> Присоединяюсь.
> Но - уж очень хочется "красивого" решения. 
> Ну не хочу я туда ставить RH, SUSE или что-то еще!
> Даже несмотря на статус Сизифа. :)

Как ни странно, у нас в Сизифе (и, надеюсь, в ALM31) связка 
heartbeat/drbd/openvz больше всего похожа на работающую из коробки - 
правда, кажется, только у меня ;) Ну и еще в SLES 10 вроде из коробки 
есть heartbeat/ocfs2/xen - по идее для xen они должны были сделать 
примерно то, что я выше расписал для openvz. Кажется, ни у кого больше 
коробочной связки кластеризации с виртуализацией нет.

-- 
С уважением, Прокопьев Евгений


^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-21 20:07         ` Eugene Prokopiev
@ 2006-12-21 20:13           ` Konstantin A. Lepikhov
  2006-12-22  7:48           ` ABATAPA
                             ` (2 subsequent siblings)
  3 siblings, 0 replies; 28+ messages in thread
From: Konstantin A. Lepikhov @ 2006-12-21 20:13 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

[-- Attachment #1: Type: text/plain, Size: 582 bytes --]

Hi Eugene!

Thursday 21, at 11:07:37 PM you wrote:

<skip>
> Как ни странно, у нас в Сизифе (и, надеюсь, в ALM31) связка 
> heartbeat/drbd/openvz больше всего похожа на работающую из коробки - 
> правда, кажется, только у меня ;) Ну и еще в SLES 10 вроде из коробки 
> есть heartbeat/ocfs2/xen - по идее для xen они должны были сделать 
> примерно то, что я выше расписал для openvz. Кажется, ни у кого больше 
> коробочной связки кластеризации с виртуализацией нет.
офигеть. Это-то при моей занятости :) За что же народ в зюзе деньги
получает? :)))

-- 
WBR et al.

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 189 bytes --]

^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-21 20:07         ` Eugene Prokopiev
  2006-12-21 20:13           ` Konstantin A. Lepikhov
@ 2006-12-22  7:48           ` ABATAPA
  2006-12-22 12:08             ` Eugene Prokopiev
  2006-12-25 16:08           ` Michael Shigorin
  2006-12-26 18:25           ` ABATAPA
  3 siblings, 1 reply; 28+ messages in thread
From: ABATAPA @ 2006-12-22  7:48 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

21 декабря 2006 23:07, Eugene Prokopiev написал:
> так я как раз о том, что слишком большой рост нагрузки иногда может быть
> равносилен остановке системы ;)
Может. Но все, как я говорил, зависит от... А так, все же, есть шанс...

> 1) отдельные конфигурации openvz на каждом узле
> 2) /var/lib/vz/private/ на общем для всех узлов разделе
> 3) ссылки из общих конфигураций в /var/lib/vz/private/
> 4) stonith, чтобы один VE не мучали несколько узлов сразу
> 5) самое сложное - алгоритм распределения еще не запущенных или
> остановившихся по причине смерти узла VE по работающим узлам
Согласен, что - непросто. Но как же было бы красиво и удобно... Например, 
нужна профилактика - мигрируем все на другие узлы, и... Или - 
ручная "балансировка" нагрузки. Ну есть же это уже все! Почему не у нас?..

> Как ни странно, у нас в Сизифе (и, надеюсь, в ALM31) связка
> heartbeat/drbd/openvz больше всего похожа на работающую из коробки -
> правда, кажется, только у меня ;) Ну и еще в SLES 10 вроде из коробки
> есть heartbeat/ocfs2/xen - по идее для xen они должны были сделать
> примерно то, что я выше расписал для openvz. Кажется, ни у кого больше
> коробочной связки кластеризации с виртуализацией нет.
Там, по-моему, даже миграция работает.


Думал еще об одном варианте: на двух (в моем случае) серверах два 
drbd-устройства, при этом каждое из них смонтировано "мастером" на одном из 
серверов (не знаю - возможно ли); соответственно, два heartbeat (в одной сети 
они это умееют, а вот на одних и тех же узлах?..), по которым распределены 
VE... При падении одного узла "выживший" сервер останется "мастером" 
для "своих" drbd и задач, и "подхватит" "умершие", для которых является 
slave...
Но что-то мне подсказывает, что это мало возможно... Да и не сильно меняет 
ситуацию с поддержкой этого у нас в целом...
-- 
ABATAPA


^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-22  7:48           ` ABATAPA
@ 2006-12-22 12:08             ` Eugene Prokopiev
  0 siblings, 0 replies; 28+ messages in thread
From: Eugene Prokopiev @ 2006-12-22 12:08 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

> Ну есть же это уже все! Почему не у нас?..

Потому, что до сих пор никому это не было надо до такой степени, чтобы 
взяться и сделать ;)

> Думал еще об одном варианте: на двух (в моем случае) серверах два 
> drbd-устройства, при этом каждое из них смонтировано "мастером" на одном из 
> серверов (не знаю - возможно ли); соответственно, два heartbeat (в одной сети 
> они это умееют, а вот на одних и тех же узлах?..), по которым распределены 
> VE... При падении одного узла "выживший" сервер останется "мастером" 
> для "своих" drbd и задач, и "подхватит" "умершие", для которых является 
> slave...
> Но что-то мне подсказывает, что это мало возможно... Да и не сильно меняет 
> ситуацию с поддержкой этого у нас в целом...

Думаю, предложенный мной вариант прямее. Если уж делать, то его. Пока вы 
самый заинтересованный ;)

-- 
С уважением, Прокопьев Евгений



^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-21 18:08         ` Konstantin A. Lepikhov
  2006-12-21 18:52           ` ABATAPA
@ 2006-12-22 12:50           ` Alexey Borovskoy
  2006-12-22 20:11             ` Konstantin A. Lepikhov
  1 sibling, 1 reply; 28+ messages in thread
From: Alexey Borovskoy @ 2006-12-22 12:50 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

-----BEGIN PGP SIGNED MESSAGE-----
Hash: SHA1

Konstantin A. Lepikhov пишет:
> drbd8 официально еще очень сырой. Посмотрите архивы их рассылки, где народ
> постоянно жалуется на oops'ы. Лучше тогда использовать ocfs2, оно хотя бы
> работает. Но для ocfs2 также необходимо собирать обвязку.

У нас не собираются ядерные модули ocfs2.

- --
Алексей.
GPG key fingerprint
949B BC0E 2C44 7528 4F63 2753 E37A 9E3F 11F3 BDE1
-----BEGIN PGP SIGNATURE-----
Version: GnuPG v1.4.5 (GNU/Linux)
Comment: Using GnuPG with Thunderbird - http://enigmail.mozdev.org

iD8DBQFFi9Sx43qePxHzveERAn6HAKCH8fnN6JEKrl/Is4KSvpbLPkwpbACeNrWq
xv4Y2pRbXctuRB/tZF62aic=
=erVf
-----END PGP SIGNATURE-----


^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-22 12:50           ` Alexey Borovskoy
@ 2006-12-22 20:11             ` Konstantin A. Lepikhov
  0 siblings, 0 replies; 28+ messages in thread
From: Konstantin A. Lepikhov @ 2006-12-22 20:11 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

[-- Attachment #1: Type: text/plain, Size: 598 bytes --]

Hi Alexey!

Saturday 23, at 12:50:57 AM you wrote:

> -----BEGIN PGP SIGNED MESSAGE-----
> Hash: SHA1
> 
> Konstantin A. Lepikhov пишет:
> > drbd8 официально еще очень сырой. Посмотрите архивы их рассылки, где народ
> > постоянно жалуется на oops'ы. Лучше тогда использовать ocfs2, оно хотя бы
> > работает. Но для ocfs2 также необходимо собирать обвязку.
> 
> У нас не собираются ядерные модули ocfs2.
собираются:
CONFIG_OCFS2_FS=m                                                                                                     
CONFIG_OCFS2_DEBUG_MASKLOG=y

-- 
WBR et al.

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 189 bytes --]

^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-21 20:07         ` Eugene Prokopiev
  2006-12-21 20:13           ` Konstantin A. Lepikhov
  2006-12-22  7:48           ` ABATAPA
@ 2006-12-25 16:08           ` Michael Shigorin
  2006-12-26 14:49             ` Eugene Prokopiev
  2007-01-05 10:58             ` Slava Dubrovskiy
  2006-12-26 18:25           ` ABATAPA
  3 siblings, 2 replies; 28+ messages in thread
From: Michael Shigorin @ 2006-12-25 16:08 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

On Thu, Dec 21, 2006 at 11:07:37PM +0300, Eugene Prokopiev wrote:
> > Ну, кто-то советует drbd8, LVM, кто-то - что-то еще... 
> > Но у нас нет ни drbd8, ни GFS... 
> а вот mike@ недавно грозился lustre в Сизиф собирать
> (clusterfs.com) ;) а еще я попробовал бы глянуть на ocfs2 ...

Не то чтобы грозился, скорее упомянул, что есть мысли попробовать
приспособить сизиф под задачи, где всё равно сейчас хватает
напильника (в частности, с люстрой).

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/


^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-25 16:08           ` Michael Shigorin
@ 2006-12-26 14:49             ` Eugene Prokopiev
  2006-12-26 14:52               ` Konstantin A. Lepikhov
  2007-01-30 12:25               ` Michael Shigorin
  2007-01-05 10:58             ` Slava Dubrovskiy
  1 sibling, 2 replies; 28+ messages in thread
From: Eugene Prokopiev @ 2006-12-26 14:49 UTC (permalink / raw)
  To: shigorin, ALT Linux sysadmin discuss

Michael Shigorin пишет:
> On Thu, Dec 21, 2006 at 11:07:37PM +0300, Eugene Prokopiev wrote:
> 
>>>Ну, кто-то советует drbd8, LVM, кто-то - что-то еще... 
>>>Но у нас нет ни drbd8, ни GFS... 
>>
>>а вот mike@ недавно грозился lustre в Сизиф собирать
>>(clusterfs.com) ;) а еще я попробовал бы глянуть на ocfs2 ...
> 
> 
> Не то чтобы грозился, скорее упомянул, что есть мысли попробовать
> приспособить сизиф под задачи, где всё равно сейчас хватает
> напильника (в частности, с люстрой).

А можно подробнее про напильник? На ум приходят 2 варианта: какой-либо 
менее автоматизированный способ распределения данных вроде rsync или та 
же неопакеченая люстра (без heartbeat ввиду отсутствия необходимости). 
Какая вообще задача решается?

-- 
С уважением, Прокопьев Евгений


^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-26 14:49             ` Eugene Prokopiev
@ 2006-12-26 14:52               ` Konstantin A. Lepikhov
  2006-12-26 15:45                 ` Slava Dubrovskiy
  2007-01-04 15:13                 ` Slava Dubrovskiy
  2007-01-30 12:25               ` Michael Shigorin
  1 sibling, 2 replies; 28+ messages in thread
From: Konstantin A. Lepikhov @ 2006-12-26 14:52 UTC (permalink / raw)
  To: sysadmins


<цитата от="Eugene Prokopiev">
> Michael Shigorin пишет:
>> On Thu, Dec 21, 2006 at 11:07:37PM +0300, Eugene Prokopiev wrote:
>>
>>>>Ну, кто-то советует drbd8, LVM, кто-то - что-то еще...
>>>>Но у нас нет ни drbd8, ни GFS...
>>>
>>>а вот mike@ недавно грозился lustre в Сизиф собирать
>>>(clusterfs.com) ;) а еще я попробовал бы глянуть на ocfs2 ...
>>
>>
>> Не то чтобы грозился, скорее упомянул, что есть мысли попробовать
>> приспособить сизиф под задачи, где всё равно сейчас хватает
>> напильника (в частности, с люстрой).
>
> А можно подробнее про напильник? На ум приходят 2 варианта: какой-либо
> менее автоматизированный способ распределения данных вроде rsync или та
> же неопакеченая люстра (без heartbeat ввиду отсутствия необходимости).
> Какая вообще задача решается?
csync еще можно опакетить.

-- 
WBR et al.



^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-26 14:52               ` Konstantin A. Lepikhov
@ 2006-12-26 15:45                 ` Slava Dubrovskiy
  2007-01-04 15:13                 ` Slava Dubrovskiy
  1 sibling, 0 replies; 28+ messages in thread
From: Slava Dubrovskiy @ 2006-12-26 15:45 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

[-- Attachment #1: Type: text/plain, Size: 1061 bytes --]

Konstantin A. Lepikhov wrote:
>>>>> Ну, кто-то советует drbd8, LVM, кто-то - что-то еще...
>>>>> Но у нас нет ни drbd8, ни GFS...
>>>>>           
>>>> а вот mike@ недавно грозился lustre в Сизиф собирать
>>>> (clusterfs.com) ;) а еще я попробовал бы глянуть на ocfs2 ...
>>>>         
>>> Не то чтобы грозился, скорее упомянул, что есть мысли попробовать
>>> приспособить сизиф под задачи, где всё равно сейчас хватает
>>> напильника (в частности, с люстрой).
>>>       
>> А можно подробнее про напильник? На ум приходят 2 варианта: какой-либо
>> менее автоматизированный способ распределения данных вроде rsync или та
>> же неопакеченая люстра (без heartbeat ввиду отсутствия необходимости).
>> Какая вообще задача решается?
>>     
> csync еще можно опакетить.
>   
rsync с сотоварищами хорош когда нужно синхронизировать не большое
количество данных (гигабайты). А когда нужно синхронизировать около 1
терабайта, то нужно думать о чем-то еще. Идеально для этого подошла бы
технология p2p.

-- 
С уважением,
Дубровский Вячеслав.


[-- Attachment #2: S/MIME Cryptographic Signature --]
[-- Type: application/x-pkcs7-signature, Size: 3237 bytes --]

^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-21 20:07         ` Eugene Prokopiev
                             ` (2 preceding siblings ...)
  2006-12-25 16:08           ` Michael Shigorin
@ 2006-12-26 18:25           ` ABATAPA
  3 siblings, 0 replies; 28+ messages in thread
From: ABATAPA @ 2006-12-26 18:25 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

21 декабря 2006 23:07, Eugene Prokopiev написал:
> Ну и еще в SLES 10 вроде из коробки
> есть heartbeat/ocfs2/xen - по идее для xen они должны были сделать
> примерно то, что я выше расписал для openvz. Кажется, ни у кого больше
> коробочной связки кластеризации с виртуализацией нет.
Скачал, поставил, обновил, посмотрел...
Что-то ocfs2 там или все еще падучий, или... То в core, то не может 
размонтировать. Создать поверх него xenU почему-то не получается.

-- 
ABATAPA


^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-26 14:52               ` Konstantin A. Lepikhov
  2006-12-26 15:45                 ` Slava Dubrovskiy
@ 2007-01-04 15:13                 ` Slava Dubrovskiy
  2007-01-04 23:14                   ` Konstantin A. Lepikhov
  1 sibling, 1 reply; 28+ messages in thread
From: Slava Dubrovskiy @ 2007-01-04 15:13 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

[-- Attachment #1: Type: text/plain, Size: 437 bytes --]

Konstantin A. Lepikhov wrote:
>> А можно подробнее про напильник? На ум приходят 2 варианта: какой-либо
>> менее автоматизированный способ распределения данных вроде rsync или та
>> же неопакеченая люстра (без heartbeat ввиду отсутствия необходимости).
>> Какая вообще задача решается?
>>     
> csync еще можно опакетить.
>   
Кстати это не оно?
http://www.sisyphus.ru/srpm/csync2

-- 
С уважением,
Дубровский Вячеслав.


[-- Attachment #2: S/MIME Cryptographic Signature --]
[-- Type: application/x-pkcs7-signature, Size: 3237 bytes --]

^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2007-01-04 15:13                 ` Slava Dubrovskiy
@ 2007-01-04 23:14                   ` Konstantin A. Lepikhov
  0 siblings, 0 replies; 28+ messages in thread
From: Konstantin A. Lepikhov @ 2007-01-04 23:14 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

[-- Attachment #1: Type: text/plain, Size: 548 bytes --]

Hi Slava!

Thursday 04, at 05:13:19 PM you wrote:

> Konstantin A. Lepikhov wrote:
> >> А можно подробнее про напильник? На ум приходят 2 варианта: какой-либо
> >> менее автоматизированный способ распределения данных вроде rsync или та
> >> же неопакеченая люстра (без heartbeat ввиду отсутствия необходимости).
> >> Какая вообще задача решается?
> >>     
> > csync еще можно опакетить.
> >   
> Кстати это не оно?
> http://www.sisyphus.ru/srpm/csync2
оно. Правда, я не знаю, пользуется ли этой тулзой мантейнер.

-- 
WBR et al.

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 189 bytes --]

^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-25 16:08           ` Michael Shigorin
  2006-12-26 14:49             ` Eugene Prokopiev
@ 2007-01-05 10:58             ` Slava Dubrovskiy
  2007-01-05 17:48               ` Eugene Prokopiev
  1 sibling, 1 reply; 28+ messages in thread
From: Slava Dubrovskiy @ 2007-01-05 10:58 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

[-- Attachment #1: Type: text/plain, Size: 559 bytes --]

Michael Shigorin wrote:
>> а вот mike@ недавно грозился lustre в Сизиф собирать
>> (clusterfs.com) ;) а еще я попробовал бы глянуть на ocfs2 ...
>>     
> Не то чтобы грозился, скорее упомянул, что есть мысли попробовать
> приспособить сизиф под задачи, где всё равно сейчас хватает
> напильника (в частности, с люстрой).
>   
Объясните пожалуйста на пальцах. Если я использую какую нибудь
кластерную FS, то значит ли это, что я могу на неё разместить, например,
базу mysql? Это заменяет кластер mysql?

-- 
С уважением,
Дубровский Вячеслав.


[-- Attachment #2: S/MIME Cryptographic Signature --]
[-- Type: application/x-pkcs7-signature, Size: 3237 bytes --]

^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2007-01-05 10:58             ` Slava Dubrovskiy
@ 2007-01-05 17:48               ` Eugene Prokopiev
  0 siblings, 0 replies; 28+ messages in thread
From: Eugene Prokopiev @ 2007-01-05 17:48 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

Slava Dubrovskiy пишет:
> Michael Shigorin wrote:
> 
>>>а вот mike@ недавно грозился lustre в Сизиф собирать
>>>(clusterfs.com) ;) а еще я попробовал бы глянуть на ocfs2 ...
>>>    
>>
>>Не то чтобы грозился, скорее упомянул, что есть мысли попробовать
>>приспособить сизиф под задачи, где всё равно сейчас хватает
>>напильника (в частности, с люстрой).
>>  
> 
> Объясните пожалуйста на пальцах. Если я использую какую нибудь
> кластерную FS, то значит ли это, что я могу на неё разместить, например,
> базу mysql? Это заменяет кластер mysql?

Теоретически да. Т.е. если СУБД на каждое клиентское подключение 
использует отдельный процесс, причем каждый такой процесс работает с 
файлами/разделами БД напрямую, используя для сихронизации какой-либо 
IPC-механизм (так, например, работает Firebird Classic, кажется, то же 
относится к PostgreSQL, но не к MySQL - хотя те, кто знает лучше, пусть 
меня поправят), то нет никаких препятствий к тому, чтобы файлы/разделы 
БД были доступны нескольким узлам кластера, разве только придется 
несколько модифицировать IPC-механизм.

И вот этого последнего шага никто, насколько мне известно, не сделал :( 
Из открытых СУБД, разумеется. Если рассматривать проприетарные решения, 
то есть, например, Oracle RAC, для которого и разрабатывалась ocfs2.

Кластер MySQL реализован совсем иначе и производит странное впечатление 
благодаря (хорошо, что частичному) наличию единой точки отказа - 
Management Server. PGCluster тоже не использует разделяемые файлы как 
таковые и сильно отстает от текущей стабильной версии PostgreSQL, а баги 
там такие, что и пробовать не хочется. Хотя вот это сообщение 
http://archives.postgresql.org/pgsql-admin/2005-09/msg00268.php наводит 
на мысль о том, что я погорячился насчет последнего шага ;)

-- 
С уважением, Прокопьев Евгений


^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2006-12-26 14:49             ` Eugene Prokopiev
  2006-12-26 14:52               ` Konstantin A. Lepikhov
@ 2007-01-30 12:25               ` Michael Shigorin
  2007-02-05 11:45                 ` ABATAPA
  1 sibling, 1 reply; 28+ messages in thread
From: Michael Shigorin @ 2007-01-30 12:25 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

On Tue, Dec 26, 2006 at 05:49:14PM +0300, Eugene Prokopiev wrote:
> >>>Ну, кто-то советует drbd8, LVM, кто-то - что-то еще... 
> >>>Но у нас нет ни drbd8, ни GFS... 
> >>а вот mike@ недавно грозился lustre в Сизиф собирать
> >>(clusterfs.com) ;) а еще я попробовал бы глянуть на ocfs2 ...
> > Не то чтобы грозился, скорее упомянул, что есть мысли попробовать
> > приспособить сизиф под задачи, где всё равно сейчас хватает
> > напильника (в частности, с люстрой).
> А можно подробнее про напильник? На ум приходят 2 варианта:
> какой-либо менее автоматизированный способ распределения данных
> вроде rsync или та же неопакеченая люстра (без heartbeat ввиду
> отсутствия необходимости).  Какая вообще задача решается?

Так... таймаут.

Может, к весне доберёмся (сейчас задача ovz на кластерах стоит
второочередной), тогда отпишусь.

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/


^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2007-01-30 12:25               ` Michael Shigorin
@ 2007-02-05 11:45                 ` ABATAPA
  2007-02-05 13:44                   ` Michael Shigorin
  0 siblings, 1 reply; 28+ messages in thread
From: ABATAPA @ 2007-02-05 11:45 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

30 января 2007 15:25, Michael Shigorin написал:
> Может, к весне доберёмся (сейчас задача ovz на кластерах стоит
> второочередной), тогда отпишусь.
А первоочередной? :)
-- 
ABATAPA


^ permalink raw reply	[flat|nested] 28+ messages in thread

* Re: [Sysadmins] Linux-HA + OpenVZ
  2007-02-05 11:45                 ` ABATAPA
@ 2007-02-05 13:44                   ` Michael Shigorin
  0 siblings, 0 replies; 28+ messages in thread
From: Michael Shigorin @ 2007-02-05 13:44 UTC (permalink / raw)
  To: ALT Linux sysadmin discuss

On Mon, Feb 05, 2007 at 02:45:16PM +0300, ABATAPA wrote:
> > Может, к весне доберёмся (сейчас задача ovz на кластерах
> > стоит второочередной), тогда отпишусь.
> А первоочередной? :)

Lustre и apcupsd, ессно.

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/


^ permalink raw reply	[flat|nested] 28+ messages in thread

end of thread, other threads:[~2007-02-05 13:44 UTC | newest]

Thread overview: 28+ messages (download: mbox.gz / follow: Atom feed)
-- links below jump to the message on this page --
2006-12-21 12:26 [Sysadmins] Linux-HA + OpenVZ ABATAPA
2006-12-21 12:30 ` Slava Dubrovskiy
2006-12-21 12:39 ` Шенцев Алексей Владимирович
2006-12-21 13:46   ` ABATAPA
2006-12-21 14:20     ` Eugene Prokopiev
2006-12-21 18:12       ` ABATAPA
2006-12-21 20:07         ` Eugene Prokopiev
2006-12-21 20:13           ` Konstantin A. Lepikhov
2006-12-22  7:48           ` ABATAPA
2006-12-22 12:08             ` Eugene Prokopiev
2006-12-25 16:08           ` Michael Shigorin
2006-12-26 14:49             ` Eugene Prokopiev
2006-12-26 14:52               ` Konstantin A. Lepikhov
2006-12-26 15:45                 ` Slava Dubrovskiy
2007-01-04 15:13                 ` Slava Dubrovskiy
2007-01-04 23:14                   ` Konstantin A. Lepikhov
2007-01-30 12:25               ` Michael Shigorin
2007-02-05 11:45                 ` ABATAPA
2007-02-05 13:44                   ` Michael Shigorin
2007-01-05 10:58             ` Slava Dubrovskiy
2007-01-05 17:48               ` Eugene Prokopiev
2006-12-26 18:25           ` ABATAPA
2006-12-21 15:11     ` Konstantin A. Lepikhov
2006-12-21 17:04       ` ABATAPA
2006-12-21 18:08         ` Konstantin A. Lepikhov
2006-12-21 18:52           ` ABATAPA
2006-12-22 12:50           ` Alexey Borovskoy
2006-12-22 20:11             ` Konstantin A. Lepikhov

ALT Linux sysadmins discussion

This inbox may be cloned and mirrored by anyone:

	git clone --mirror http://lore.altlinux.org/sysadmins/0 sysadmins/git/0.git

	# If you have public-inbox 1.1+ installed, you may
	# initialize and index your mirror using the following commands:
	public-inbox-init -V2 sysadmins sysadmins/ http://lore.altlinux.org/sysadmins \
		sysadmins@lists.altlinux.org sysadmins@lists.altlinux.ru sysadmins@lists.altlinux.com
	public-inbox-index sysadmins

Example config snippet for mirrors.
Newsgroup available over NNTP:
	nntp://lore.altlinux.org/org.altlinux.lists.sysadmins


AGPL code for this site: git clone https://public-inbox.org/public-inbox.git