[Sysadmins] PVEoRAID

[Sysadmins] PVEoRAID

[Вадим Илларионов]

Два дня бился с установкой сабжа-1 на софтовый сабж-2 из 4 ЖД - ни в
какую, ни в каких вариациях. В итоге сделал так:
1. Поставил на /dev/sda и после ребута создал два деградированных массива:
md0 level 1  metadata 0.9 /dev/sd[b-d]1 (1 гиг) - /,
md0 level 10 metadata 1.2 /dev/sd[b-d]2 (остальное место) - LVM,
попиленный на swap, /usr, /var, /var/lib/vz.
2. Смонтировал, чрутнулся, рсинкнул, пересоздал инитрд, переинсталлил
груб на все винты, перезагрузил.
3. Отрубил sda, гружусь с рейда: md0 стартует, md1 - неактивен. mdadm
-S/-A /dev/md1 помогает, но как сделать автоматически?

Спасите!

-- 
Мимо крокодил.
WBR, rednex CIO.
JID = <mailto:>
Skype = $local_part@<mailto:>
Viber = +7(964)103-65-67

Опции rsync -aHAX --delete мозг автоматом переводит как "удалить к чёртовой матери!"

Re: [Sysadmins] PVEoRAID

[Вадим Илларионов]

03.01.2017 11:19, Вадим Илларионов пишет:
> гружусь с рейда: md1 неактивен. mdadm -S/-A /dev/md1 помогает, но как сделать автоматически? Спасите!
По рецепту с https://forum.altlinux.org/index.php?topic=31369.0
пересобрал initrd, добавив в /etc/initrd.mk:

MODULES_ADD +=raid10
MODULE_PRELOAD +=raid10

Не помогло.

-- 
Мимо крокодил.
WBR, rednex CIO.
JID = <mailto:>
Skype = $local_part@<mailto:>
Viber = +7(964)103-65-67

Опции rsync -aHAX --delete мозг автоматом переводит как "удалить к чёртовой матери!"

Re: [Sysadmins] PVEoRAID

[Вадим Илларионов]

03.01.2017 12:35, Вадим Илларионов пишет:
> По рецепту с https://forum.altlinux.org/index.php?topic=31369.0
> пересобрал initrd, добавив в /etc/initrd.mk:
> MODULES_ADD +=raid10
> MODULE_PRELOAD +=raid10
>
> Не помогло.
Обновление ядра тоже не дало результата.

-- 
Мимо крокодил.
WBR, rednex CIO.
JID = <mailto:>
Skype = $local_part@<mailto:>
Viber = +7(964)103-65-67

Опции rsync -aHAX --delete мозг автоматом переводит как "удалить к чёртовой матери!"

Re: [Sysadmins] PVEoRAID

[Валентин Росавицкий]

03.01.2017 6:49, Вадим Илларионов пишет:
> 03.01.2017 12:35, Вадим Илларионов пишет:
>> По рецепту с https://forum.altlinux.org/index.php?topic=31369.0
>> пересобрал initrd, добавив в /etc/initrd.mk:
>> MODULES_ADD +=raid10
>> MODULE_PRELOAD +=raid10
>>
>> Не помогло.
> Обновление ядра тоже не дало результата.
>
Попробуйте по этому рецепту, у меня тоже было подобное.
https://lists.altlinux.org/pipermail/sysadmins/2013-August/036263.html

Re: [Sysadmins] PVEoRAID

[Вадим Илларионов]

03.01.2017 13:54, Валентин Росавицкий пишет:
> 03.01.2017 6:49, Вадим Илларионов пишет:
>> 03.01.2017 12:35, Вадим Илларионов пишет:
>>> По рецепту с https://forum.altlinux.org/index.php?topic=31369.0
>>> пересобрал initrd, добавив в /etc/initrd.mk:
>>> MODULES_ADD +=raid10
>>> MODULE_PRELOAD +=raid10
>>>
>>> Не помогло.
>> Обновление ядра тоже не дало результата.
>>
> Попробуйте по этому рецепту, у меня тоже было подобное.
> https://lists.altlinux.org/pipermail/sysadmins/2013-August/036263.html

Уже поборол.

mdadm -E --scan выдавал /dev/md0 и /dev/md/1, тогда как в конфиге было
прописано /dev/md1. Поменял конфиг, пересобрал инитрд и рейд завёлся.

Зато не завёлся ЛВМ. Его поборол, отключив опцию use_lvmetad в
/etc/lvm/lvm.conf.

Но всё равно спасибо. :)

-- 
Мимо крокодил.
WBR, rednex CIO.
JID = <mailto:>
Skype = $local_part@<mailto:>
Viber = +7(964)103-65-67

Опции rsync -aHAX --delete мозг автоматом переводит как "удалить к чёртовой матери!"

Re: [Sysadmins] PVEoRAID

[Валентин Росавицкий]

03.01.2017 6:49, Вадим Илларионов пишет:
> 03.01.2017 12:35, Вадим Илларионов пишет:
>> По рецепту с https://forum.altlinux.org/index.php?topic=31369.0
>> пересобрал initrd, добавив в /etc/initrd.mk:
>> MODULES_ADD +=raid10
>> MODULE_PRELOAD +=raid10
>>
>> Не помогло.
> Обновление ядра тоже не дало результата.
>

Попробуйте по этому рецепту, у меня тоже было подобное.
https://lists.altlinux.org/pipermail/sysadmins/2013-August/036263.html

[Sysadmins] Administriva: не удивляйтесь

[Michael Shigorin]

...это я добрался до задержавшихся писем и, в частности,
данное старое письмо по причине его полезности решил
пропустить.

-- 
 ---- WBR, Michael Shigorin / http://altlinux.org
  ------ http://opennet.ru / http://anna-news.info

Re: [Sysadmins] PVEoRAID

[Rosavitskiy Valintin]

On 03.01.2017 06:49, Вадим Илларионов wrote:
> 03.01.2017 12:35, Вадим Илларионов пишет:
>> По рецепту с https://forum.altlinux.org/index.php?topic=31369.0
>> пересобрал initrd, добавив в /etc/initrd.mk:
>> MODULES_ADD +=raid10
>> MODULE_PRELOAD +=raid10
>>
>> Не помогло.
> Обновление ядра тоже не дало результата.
>
Попробуйте по этому рецепту, у меня тоже было подобное.
https://lists.altlinux.org/pipermail/sysadmins/2013-August/036263.html

P.S это уже третье письмо, первых два не дошли

-- 
С уважением,
Валентин Росавицкий

Re: [Sysadmins] PVEoRAID

[Michael Shigorin]

On Tue, Jan 03, 2017 at 11:19:48AM +0800, Вадим Илларионов wrote:
> Два дня бился с установкой сабжа-1 на софтовый сабж-2 из 4 ЖД - ни в
> какую, ни в каких вариациях. В итоге сделал так:
> 1. Поставил на /dev/sda и после ребута создал два деградированных массива:

Рад, что поборол -- на всякий: в качестве такого sda
для меня хорош отдельный DOM или SSD, чтоб легче было
диски с "фаршем" менять, не теряя систему...

-- 
 ---- WBR, Michael Shigorin / http://altlinux.org
  ------ http://opennet.ru / http://anna-news.info

Re: [Sysadmins] PVEoRAID

[Вадим Илларионов]

04.01.2017 02:40, Michael Shigorin пишет:
> Рад, что поборол -- на всякий: в качестве такого sda
> для меня хорош отдельный DOM или SSD, чтоб легче было
> диски с "фаршем" менять, не теряя систему...

Спасибо на добром слове, Миш. :)
У меня внешний залман ве-400, который умеет притворяться оптическим
приводом, но на него ставить не могу, бо ставлю с него. :)
Есть пара винтов в запасе, но нет ни шлейфа eSATA, ни USB-адаптера -
были, но кому-то одалживал, а кому - не помню.
А перетащить систему с винта на рейды с последующим включением оного
винта в те же рейды - не такая проблема.
Проблемой оказался неподъём второго массива, а после него - ЛВМа. Но на
грабли с ЛВМ я уже нарывался, а с массивом такое впервые.
В общем, на одну только установку вместо 3 часов потратил 3 дня -
дальнейшее-то проще.
Ситуация с невозможностью поставиться с нуля на рейд+ЛВМ, однако,
нездоровая, и тянется далеко не первый год.
С дебианом ведь таких проблем не возникает (на эту машину он тоже
взлетал без затруднений).
На работе несколько серверов с аппаратными рейдами - но и на некоторые
из них не удалось альта поставить.

-- 
Мимо крокодил.
WBR, rednex CIO.
JID = <mailto:>
Skype = $local_part@<mailto:>
Viber = +7(964)103-65-67

Опции rsync -aHAX --delete мозг автоматом переводит как "удалить к чёртовой матери!"

Re: [Sysadmins] PVEoRAID

[Michael Shigorin]

On Wed, Jan 04, 2017 at 12:07:43PM +0800, Вадим Илларионов wrote:
> Ситуация с невозможностью поставиться с нуля на рейд+ЛВМ, однако,
> нездоровая, и тянется далеко не первый год.

Вешай, однако -- на alterator-vm для начала.

> На работе несколько серверов с аппаратными рейдами - но и на
> некоторые из них не удалось альта поставить.

Тоже хорошо бы конкретизировать -- очень может быть,
что достаточно положить в инсталятор ещё каких фирмварей
(возможно, предварительно собрав, но и то не факт).

-- 
 ---- WBR, Michael Shigorin / http://altlinux.org
  ------ http://opennet.ru / http://anna-news.info

Re: [Sysadmins] PVEoRAID

[Konstantin Lepikhov]

Hi Michael!

On 01/05/17, at 10:34:11 AM you wrote:

<skip>
> > На работе несколько серверов с аппаратными рейдами - но и на
> > некоторые из них не удалось альта поставить.
> 
> Тоже хорошо бы конкретизировать -- очень может быть,
> что достаточно положить в инсталятор ещё каких фирмварей
> (возможно, предварительно собрав, но и то не факт).

А если зайти с другой стороны - вот купил кто-то P8, может быть даже
поддержку на него у OOO, как в этом случае будет организована работа с
такими ситуациями? Все ясно в случае RHEL, там есть сертификация и вендоры
сразу заявляют поддержку, а как быть с ALTLinux, который вроде-бы
прикидывается и RedHat и Debian и еще непонятно чем с точки зрения
пакетов, но вот что с железом? Неужели единственный рекомендованный
вариант установки это KVM или VirtualBox? Есть ли список поддерживаемого
серверного оборудования?

Пишу это не ради флейма, просто интересно, поскольку на работе есть на чем
проверить и результаты были очень неутешительные для P8.

-- 
WBR et al.

Re: [Sysadmins] PVEoRAID

[Michael Shigorin]

On Thu, Jan 05, 2017 at 03:14:38PM +0100, Konstantin Lepikhov wrote:
> Все ясно в случае RHEL, там есть сертификация и вендоры сразу
> заявляют поддержку, а как быть с ALTLinux, который вроде-бы
> прикидывается и RedHat и Debian и еще непонятно чем с точки
> зрения пакетов, но вот что с железом?

support@ обычно рекомендует по возможности проверить,
если нет возможности сказать определённо -- да или нет.
Могут выпускаться оперативные исправления сборок.

> Есть ли список поддерживаемого серверного оборудования?

По факту нет: http://altlinux.org/HCL

> Пишу это не ради флейма, просто интересно, поскольку на работе
> есть на чем проверить и результаты были очень неутешительные
> для P8.

Тоже хорошо бы конкретизировать -- очень может быть,
что достаточно положить в инсталятор ещё каких фирмварей
(возможно, предварительно собрав, но и то не факт).

-- 
 ---- WBR, Michael Shigorin / http://altlinux.org
  ------ http://opennet.ru / http://anna-news.info

Re: [Sysadmins] PVEoRAID

[Konstantin Lepikhov]

Hi Michael!

On 01/05/17, at 06:06:19 PM you wrote:

> On Thu, Jan 05, 2017 at 03:14:38PM +0100, Konstantin Lepikhov wrote:
> > Все ясно в случае RHEL, там есть сертификация и вендоры сразу
> > заявляют поддержку, а как быть с ALTLinux, который вроде-бы
> > прикидывается и RedHat и Debian и еще непонятно чем с точки
> > зрения пакетов, но вот что с железом?
> 
> support@ обычно рекомендует по возможности проверить,
> если нет возможности сказать определённо -- да или нет.
> Могут выпускаться оперативные исправления сборок.
> 
А чем это может помочь если нет модулей в принципе? Например, возьмем HP, у
которого все модули ядра привязаны к определенному дистрибутиву, или
Supermicro, где часть функционала, такого как обновление BIOS через
фирменную утилиту требует наличия CentOS/RHEL? Я это к тому, что
проводится ли работа с вендрами или это все сдохло вместе с MaxSelect,
Etegra и др? 

> > Есть ли список поддерживаемого серверного оборудования?
> 
> По факту нет: http://altlinux.org/HCL
Да, тут все уже неактуально.

> 
> > Пишу это не ради флейма, просто интересно, поскольку на работе
> > есть на чем проверить и результаты были очень неутешительные
> > для P8.
> 
> Тоже хорошо бы конкретизировать -- очень может быть,
> что достаточно положить в инсталятор ещё каких фирмварей
> (возможно, предварительно собрав, но и то не факт).
Я могу конкретизировать, только начала нужно ответить на вопросы выше.

-- 
WBR et al.

Re: [Sysadmins] PVEoRAID

[Michael Shigorin]

On Thu, Jan 05, 2017 at 10:49:35PM +0100, Konstantin Lepikhov wrote:
> Я это к тому, что проводится ли работа с вендрами или это все
> сдохло вместе с MaxSelect, Etegra и др? 

Проводится.

> > Тоже хорошо бы конкретизировать -- очень может быть,
> > что достаточно положить в инсталятор ещё каких фирмварей
> > (возможно, предварительно собрав, но и то не факт).
> Я могу конкретизировать, только начала нужно ответить на
> вопросы выше.

Давай попробуем начать с чего-нибудь маленького, что можно
исправить малой кровью и что может оказаться полезным другим.

-- 
 ---- WBR, Michael Shigorin / http://altlinux.org
  ------ http://opennet.ru / http://anna-news.info