[Hardware] external journal on i-ram and ext3

[Hardware] external journal on i-ram and ext3

[seriv]

Привет всем.
Недавно у меня образовались лишние 4 гига 186-пиновых планочек, и я придумал купить к ним Gigabayt'ский i-Ram (see http://en.wikipedia.org/wiki/I-RAM)
Потом потестировал ext3 с внешним журналом на этой штуке.
Система - 8 гиг RAM, AMD Athlon(tm) 64 X2 Dual Core Processor 5200+
i-Ram распознался как:
---
ata5.00: ATA-7: GIGABYTE i-RAM, v0.98, max UDMA/133
ata5.00: 4193279 sectors, multi 16: LBA
ata5.00: configured for UDMA/133
ata6: SATA link down (SStatus 0 SControl 300)
scsi 4:0:0:0: Direct-Access     ATA      GIGABYTE i-RAM   v0.9 PQ: 0 ANSI: 5
sd 4:0:0:0: [sdd] 4193279 512-byte hardware sectors (2147 MB)
sd 4:0:0:0: [sdd] Write Protect is off
sd 4:0:0:0: [sdd] Mode Sense: 00 3a 00 00
sd 4:0:0:0: [sdd] Write cache: disabled, read cache: enabled, doesn't support DPO or FUA
sd 4:0:0:0: [sdd] 4193279 512-byte hardware sectors (2147 MB)
sd 4:0:0:0: [sdd] Write Protect is off
sd 4:0:0:0: [sdd] Mode Sense: 00 3a 00 00
sd 4:0:0:0: [sdd] Write cache: disabled, read cache: enabled, doesn't support DPO or FUA
---
Тестировал с диском 
---
scsi 1:0:0:0: Direct-Access     ATA      ST3500630AS      3.AA PQ: 0 ANSI: 5
sd 1:0:0:0: [sdb] 976773168 512-byte hardware sectors (500108 MB)
---
Тестировал вызывая 
---
bonnie++ -d /mnt/bench/ -f -n512:512
---
(что значит - пропуская побайтный ввод-вывод, и создавая 512*1024 файлов в одной директории каждый  размером в 512 байт)
Размер раздела который я создавал каждый раз заново для тестирования 100 гиг.

Вот вывод bonnie++ для ext3 созданного по умолчанию (ext3.d), ext3 с размером журнала 400 мегабайт (максимум для внутреннего журнала) (ext3.b) и ext3 с внешним журналом на i-Ram диске, внешний журнал занимал все 2147 мегабайт (ext3.e):
---

Version  1.03      ------Sequential Output------ --Sequential Input- --Random-
                    -Per Chr- --Block-- -Rewrite- -Per Chr- --Block-- --Seeks--
Machine        Size K/sec %CP K/sec %CP K/sec %CP K/sec %CP K/sec %CP  /sec %CP
ext3.d          16G           58884  37 28376  21           59873  21 175.8   1
ext3.b          16G           60315  39 28682  20           60617  14 148.4   1
ext3.e          16G           61774  51 29035  27           61071  19 245.3   1
                    ------Sequential Create------ --------Random Create--------
                    -Create-- --Read--- -Delete-- -Create-- --Read--- -Delete--
files:max:min        /sec %CP  /sec %CP  /sec %CP  /sec %CP  /sec %CP  /sec %CP
ext3.d  512:512:512 10258  62   563   2   506   5  5502  35   580   2   365   3
ext3.b  512:512:512 14059  76  8420  18  5883  29  7629  39  8380  16  2765  15
ext3.e  512:512:512 14826  78 49801  70 18230  76 14466  79 55459  73 14574  65

---
Мне очень понравилось ускорение random read в 95 раз :) 

--
   Сергей

Re: [Hardware] external journal on i-ram and ext3

[Maxim Tyurin]

seriv@parkheights.dyndns.org writes:

> Привет всем.
> Недавно у меня образовались лишние 4 гига 186-пиновых планочек, и я придумал купить к ним Gigabayt'ский i-Ram (see http://en.wikipedia.org/wiki/I-RAM)
> Потом потестировал ext3 с внешним журналом на этой штуке.
> Система - 8 гиг RAM, AMD Athlon(tm) 64 X2 Dual Core Processor 5200+
> i-Ram распознался как:
> ---
> ata5.00: ATA-7: GIGABYTE i-RAM, v0.98, max UDMA/133
> ata5.00: 4193279 sectors, multi 16: LBA
> ata5.00: configured for UDMA/133
> ata6: SATA link down (SStatus 0 SControl 300)
> scsi 4:0:0:0: Direct-Access     ATA      GIGABYTE i-RAM   v0.9 PQ: 0 ANSI: 5
> sd 4:0:0:0: [sdd] 4193279 512-byte hardware sectors (2147 MB)
> sd 4:0:0:0: [sdd] Write Protect is off
> sd 4:0:0:0: [sdd] Mode Sense: 00 3a 00 00
> sd 4:0:0:0: [sdd] Write cache: disabled, read cache: enabled, doesn't support DPO or FUA
> sd 4:0:0:0: [sdd] 4193279 512-byte hardware sectors (2147 MB)
> sd 4:0:0:0: [sdd] Write Protect is off
> sd 4:0:0:0: [sdd] Mode Sense: 00 3a 00 00
> sd 4:0:0:0: [sdd] Write cache: disabled, read cache: enabled, doesn't support DPO or FUA
\skip
> Мне очень понравилось ускорение random read в 95 раз :) 

Совсем не удивлен. Если простой вынос журнала на флешку уже хорошо
разгоняет ФС, то на RAM должно быть еще лучше.

Насколько я понял дополнительных драйверов ему не нужно. 
А какое ядро системы? Железо описали,а версию ядра я не увидел :(

И второй вопрос - какая минимальная высота сервера чтоб эта плата
влезла. Насколько я понимаю в 2U она не встанет.

-- 

With Best Regards, Maxim Tyurin
JID:	MrKooll@jabber.pibhe.com
   ___                                 
  / _ )__ _____  ___ ____ _______ _____
 / _  / // / _ \/ _ `/ _ `/ __/ // (_-<
/____/\_,_/_//_/\_, /\_,_/_/  \_,_/___/
               /___/  

Re: [Hardware] external journal on i-ram and ext3

[Michael Shigorin]

On Mon, Nov 03, 2008 at 06:26:17PM +0200, Maxim Tyurin wrote:
> > Мне очень понравилось ускорение random read в 95 раз :) 
> Совсем не удивлен. Если простой вынос журнала на флешку уже
> хорошо разгоняет ФС, то на RAM должно быть еще лучше.

Поподробней про вынос на флэшку -- это эксперименты или 
можно давать детям?  Просто развал журнала -- AFAIK весьма
стрёмная вещь, а забыть сменить флэшку раз в <сколько?>
можно очень даже просто...

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/

Re: [Hardware] external journal on i-ram and ext3

[Maxim Tyurin]

Michael Shigorin writes:

> On Mon, Nov 03, 2008 at 06:26:17PM +0200, Maxim Tyurin wrote:
>> > Мне очень понравилось ускорение random read в 95 раз :) 
>> Совсем не удивлен. Если простой вынос журнала на флешку уже
>> хорошо разгоняет ФС, то на RAM должно быть еще лучше.
>
> Поподробней про вынос на флэшку -- это эксперименты или 
> можно давать детям?  Просто развал журнала -- AFAIK весьма
> стрёмная вещь, а забыть сменить флэшку раз в <сколько?>
> можно очень даже просто...

Не эксперименты. Уже работает.

Только решил не на ГЫИ флешке остановиться, а на CF-SATA переходнике.

А менять просто по расписанию.


-- 

With Best Regards, Maxim Tyurin
JID:	MrKooll@jabber.pibhe.com
   ___                                 
  / _ )__ _____  ___ ____ _______ _____
 / _  / // / _ \/ _ `/ _ `/ __/ // (_-<
/____/\_,_/_//_/\_, /\_,_/_/  \_,_/___/
               /___/  

Re: [Hardware] external journal on i-ram and ext3

[Michael Shigorin]

On Mon, Nov 03, 2008 at 07:57:11PM +0200, Maxim Tyurin wrote:
> Не эксперименты. Уже работает.  Только решил не на ГЫИ флешке
> остановиться, а на CF-SATA переходнике.  А менять просто по
> расписанию.

Модели, "где" и расписание можешь уточнить?

2 seriv: кстати об ускорении чтения: noatime нет, что ли?

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/

Re: [Hardware] external journal on i-ram and ext3

[seriv]

----- "Michael Shigorin" <mike@osdn.org.ua> wrote:

> 
> 2 seriv: кстати об ускорении чтения: noatime нет, что ли?
> 

Спасибо! Я и не заметил! 
Однако всё равно тесты были непредставительные, та часть где создавались, читались и удалялись много файлов: эти все файлы могли поместиться в буферах. Трудно тестировать с большим RAM'ом :(

С другой стороны, для тестирования, -o nodiratime,noatime как мне перставляется должно пропорционально изменять результаты тестов.
Однако предположение - предположением, а повторно тесты запустил и через некоторое время будут результаты. На этот раз чтобы RAM насытить общий размер создаваемых файлов будет 2*RAM. 

-- 
  Сергей

Re: [Hardware] external journal on i-ram and ext3

[Michael Shigorin]

On Tue, Nov 04, 2008 at 04:36:57PM -0500, seriv@parkheights.dyndns.org wrote:
> > 2 seriv: кстати об ускорении чтения: noatime нет, что ли?
> Спасибо! Я и не заметил! 

Так да-нет? :)

> Однако всё равно тесты были непредставительные, та часть где
> создавались, читались и удалялись много файлов: эти все файлы
> могли поместиться в буферах. Трудно тестировать с большим
> RAM'ом :(

mem=256m при загрузке ядра придёт на выручку ;)

> На этот раз чтобы RAM насытить общий размер создаваемых файлов
> будет 2*RAM. 

Или так.

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/

Re: [Hardware] external journal on i-ram and ext3

[Vladimir V. Kamarzin]

>>>>> On 05 Nov 2008 at 02:36 "s" == seriv  writes:

s> Спасибо! Я и не заметил! Однако всё равно тесты были непредставительные, та
s> часть где создавались, читались и удалялись много файлов: эти все файлы
s> могли поместиться в буферах. Трудно тестировать с большим RAM'ом :(

http://www.bramschoenmakers.nl/en/node/310

-- 
vvk

Re: [Hardware] external journal on i-ram and ext3

[Денис Смирнов]

[-- Attachment #1: Type: text/plain, Size: 657 bytes --]

On Fri, Oct 31, 2008 at 11:31:26AM -0400, seriv@parkheights.dyndns.org wrote:

> Привет всем.
> Недавно у меня образовались лишние 4 гига 186-пиновых планочек, и я придумал купить к ним Gigabayt'ский i-Ram (see http://en.wikipedia.org/wiki/I-RAM)
> Потом потестировал ext3 с внешним журналом на этой штуке.

Спасибо! Я уже год мечтаю купить и протестировать, но все руки не доходят
:(

Раз уж такое дело, не протестируете ли аналогично с xfs?

И еще, режим для монтирование ext3 был data=journal или data=ordered?

-- 
С уважением, Денис

http://freesource.info
----------------------------------------------------------------------------

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 197 bytes --]