[sisyphus] Swap and software RAID

[sisyphus] Swap and software RAID

[Grigory Batalov]

  Здравствуйте!

Подскажите, как лучше расположить swap на дисках, предназначенных
для software RAID? У меня есть следующие соображения:

Имеются три SCSI hot-swap диска, корневой раздел - raid1,
дополнительные - raid5.

1. Допустим, swap тоже raid1

При сбое диска, или если я его сам вытащу, устройства md*
будут помечаться как сбойные (F) только при обращении к ним.
(Или можно указать принудительно?)
Например:

md0 : active raid1 sdc1[0](F) sda1[2] sdb1[1]
      1052160 blocks [3/3] [_UU]

После чего можно отключить сбойный раздел:

raidhotremove /dev/md0 /dev/sdc1

Удаление scsi-устройства из таблицы /proc/scsi/scsi, как я
обнаружил, возможно лишь при неиспользовании его разделов
одним из /dev/md*:

echo "scsi remove-single-device 0 0 2 0" > /proc/scsi/scsi

Однако, swap требуется не всегда. Cоответственно, чтобы
удалить scsi-устройство, нужно ждать, пока

- произойдёт обращение к swap на md
- составная часть sdc1 пометится как сбойная (F)
- я смогу её отключить с помощью raidhotremove

Вопрос 1: сколько этого ждать или как ускорить?

Другой вариант: сделать swapoff /dev/md0 и raidstop /dev/md0,
но тогда система некоторое время будет существовать без swap.

Вопрос 2: что в этом случае произойдёт и насколько это опасно?

2. Допустим, я не делал raid1, а сделал 3 раздела swap:
/dev/sda1, /dev/sdb1, /dev/sdc1. Вытаскиваю /dev/sda.

Вопрос 3: как скоро ядро поймет, что swap N1 недоступен,
и пора попытаться сбросить данные на swap N2 или N3 ?
Насколько это ожидание окажется критичным для процессов,
требующих swap?

Буду благодарен, если кто-нибудь ответит.

-- 
Григорий Баталов,
группа техподдержки
ОАО "Ковдорский ГОК"

Re: [sisyphus] Swap and software RAID

[Sergey Vlasov]

[-- Attachment #1: Type: text/plain, Size: 1852 bytes --]

On Fri, Dec 05, 2003 at 09:02:19AM +0300, Grigory Batalov wrote:
>   Здравствуйте!
> 
> Подскажите, как лучше расположить swap на дисках, предназначенных
> для software RAID? У меня есть следующие соображения:
> 
> Имеются три SCSI hot-swap диска, корневой раздел - raid1,
> дополнительные - raid5.
> 
> 1. Допустим, swap тоже raid1
> 
> При сбое диска, или если я его сам вытащу, устройства md*
> будут помечаться как сбойные (F) только при обращении к ним.
> (Или можно указать принудительно?)
> Например:
> 
> md0 : active raid1 sdc1[0](F) sda1[2] sdb1[1]
>       1052160 blocks [3/3] [_UU]
> 
> После чего можно отключить сбойный раздел:
> 
> raidhotremove /dev/md0 /dev/sdc1
> 
> Удаление scsi-устройства из таблицы /proc/scsi/scsi, как я
> обнаружил, возможно лишь при неиспользовании его разделов
> одним из /dev/md*:
> 
> echo "scsi remove-single-device 0 0 2 0" > /proc/scsi/scsi
> 
> Однако, swap требуется не всегда. Cоответственно, чтобы
> удалить scsi-устройство, нужно ждать, пока
> 
> - произойдёт обращение к swap на md
> - составная часть sdc1 пометится как сбойная (F)
> - я смогу её отключить с помощью raidhotremove
> 
> Вопрос 1: сколько этого ждать или как ускорить?

Так есть же raidsetfaulty.

> Другой вариант: сделать swapoff /dev/md0 и raidstop /dev/md0,
> но тогда система некоторое время будет существовать без swap.
> 
> Вопрос 2: что в этом случае произойдёт и насколько это опасно?

В зависимости от ситуации - например, может просто не хватить памяти
для swapoff.

> 2. Допустим, я не делал raid1, а сделал 3 раздела swap:
> /dev/sda1, /dev/sdb1, /dev/sdc1. Вытаскиваю /dev/sda.
> 
> Вопрос 3: как скоро ядро поймет, что swap N1 недоступен,
> и пора попытаться сбросить данные на swap N2 или N3 ?
> Насколько это ожидание окажется критичным для процессов,
> требующих swap?

Никак не поймёт.  Да и процессы попадают...

[-- Attachment #2: Type: application/pgp-signature, Size: 189 bytes --]

Re: [sisyphus] Swap and software RAID

[Grigory Batalov]

On Fri, 5 Dec 2003 10:34:39 +0300
Sergey Vlasov <vsu@altlinux.ru> wrote:

> > Подскажите, как лучше расположить swap на дисках, предназначенных
> > для software RAID? У меня есть следующие соображения:
> > 
> > Имеются три SCSI hot-swap диска, корневой раздел - raid1,
> > дополнительные - raid5.
> > 
> > 1. Допустим, swap тоже raid1
> > 
> > При сбое диска, или если я его сам вытащу, устройства md*
> > будут помечаться как сбойные (F) только при обращении к ним.
> > (Или можно указать принудительно?)
> > Например:
> > 
> > md0 : active raid1 sdc1[0](F) sda1[2] sdb1[1]
> >       1052160 blocks [3/3] [_UU]
> > 
> > После чего можно отключить сбойный раздел:
> > 
> > raidhotremove /dev/md0 /dev/sdc1
> > 
> > Удаление scsi-устройства из таблицы /proc/scsi/scsi, как я
> > обнаружил, возможно лишь при неиспользовании его разделов
> > одним из /dev/md*:
> > 
> > echo "scsi remove-single-device 0 0 2 0" > /proc/scsi/scsi
> > 
> > Однако, swap требуется не всегда. Cоответственно, чтобы
> > удалить scsi-устройство, нужно ждать, пока
> > 
> > - произойдёт обращение к swap на md
> > - составная часть sdc1 пометится как сбойная (F)
> > - я смогу её отключить с помощью raidhotremove
> > 
> > Вопрос 1: сколько этого ждать или как ускорить?
> 
> Так есть же raidsetfaulty.

  А! Тогда вопрос снимается. Спасибо.

-- 
Григорий Баталов,
группа техподдержки
ОАО "Ковдорский ГОК"