[Hardware] 4GB на TYAN S2885 Thunder K8W ( =?KOI8-R?Q?=D1=C4=D2=CF=3F?=)

[Hardware] 4GB на TYAN S2885 Thunder K8W ( =?KOI8-R?Q?=D1=C4=D2=CF=3F?=)

[Andrey Liakhovets]

Здравствуйте.

После добавления памяти до 4GB в мат.плату TYAN S2885 Thunder K8W с двумя
Opteron 246 и включения в BIOS'е Memory Hole возникли проблемы с загрузкой
(проблем нет, если Memory Hole не включать, но тогда BIOS-e820 говорит,
что можно использовать память только до 00000000ccff0000 - около 3.3 GB).

Эксперименты дали следующее:

Не грузятся (на этапе начала выполнения init-скриптов):
- x86_64 ядро 3.0.4-std-def-alt0.M60P.1 + i586 branch P6 (с лок.диска)
- x86_64 Server Light P6 1.1.7 с ядром 2.6.38-std-def-alt8.1 (rescue)
- x86_64 Simply beta20110919 с ядром 3.0.4-std-def-alt0.M60P.1 (rescue)
- x86_64 Gnome3 от 20110420 с ядром 2.6.38-std-def-alt3 (LiveCD)
(загрузка Gnome3 прошла дальше всех, я даже переключился на 12 консоль).

Грузятся и работают со всеми 4GB (запускал 58..59 штук `burnMMX P'):
- x86_64 ядро 2.6.32-el-smp-alt27 + i586 branch P6 (с лок.диска)
- x86_64 Centaurus RC1 (20110909) с ядром 2.6.32-el-smp-alt24 (rescue)
- x86_64 KDesktop (20110829) с ядром 3.0.3-std-def-alt0.M60P.1 (rescue)
- x86_64 Centaurus beta 20110201 с ядром 2.6.32-el-smp-alt13 (rescue)
- x86_64 School Server 5.0.1 с ядром 2.6.27-ovz-smp-alt9 (rescue)
- x86_64 School Server 5.0.2 с ядром 2.6.27-ovz-smp-alt9 (rescue).

В принципе, на el-smp всё работает, но если есть какие-то соображения,
что можно сделать/посмотреть, - я бы ещё некоторое время поковырялся.
Пока думаю, что виновато всё-таки ядро, и особенно странно, что
работает 3.0.3 и не работает 3.0.4.
Наверное, надо получить сообщения ядра в плохих случаях?
Проще всего с помощью netconsole?

sysreport, снятый в rescue School Server 5.0.1, отправлю на sysreport@
и также кладу сюда:
 http://ftp.linux.kiev.ua/pub/Linux/ALT/people/_aoliakh/k8w/
Там же плохонькие фото того, как не грузится.
3.0.4 локально и Server Light rescue не фотографировал, там было что-то
типа:
... /bin/true: /bin/true: cannot execute binary file
Activating swap partitions: /sbin/swapon: /sbin/swapon: cannot execute ...
и что-то насчёт openvt.

На всякий случай копирую, что BIOS говорит о памяти:

без Memory Hole (3.3 GB):
[    0.000000] BIOS-provided physical RAM map:
[    0.000000]  BIOS-e820: 0000000000000000 - 000000000009fc00 (usable)
[    0.000000]  BIOS-e820: 000000000009fc00 - 00000000000a0000 (reserved)
[    0.000000]  BIOS-e820: 00000000000e0000 - 0000000000100000 (reserved)
[    0.000000]  BIOS-e820: 0000000000100000 - 00000000ccff0000 (usable)
[    0.000000]  BIOS-e820: 00000000ccff0000 - 00000000ccfff000 (ACPI data)
[    0.000000]  BIOS-e820: 00000000ccfff000 - 00000000cd000000 (ACPI NVS)
[    0.000000]  BIOS-e820: 00000000ff780000 - 0000000100000000 (reserved)

с Memory Hole (снято в School Server 5.0.1 rescue):
[    0.000000] BIOS-provided physical RAM map:
[    0.000000]  BIOS-e820: 0000000000000000 - 000000000009fc00 (usable)
[    0.000000]  BIOS-e820: 000000000009fc00 - 00000000000a0000 (reserved)
[    0.000000]  BIOS-e820: 00000000000e0000 - 0000000000100000 (reserved)
[    0.000000]  BIOS-e820: 0000000000100000 - 00000000bfff0000 (usable)
[    0.000000]  BIOS-e820: 00000000bfff0000 - 00000000bffff000 (ACPI data)
[    0.000000]  BIOS-e820: 00000000bffff000 - 00000000c0000000 (ACPI NVS)
[    0.000000]  BIOS-e820: 00000000ff780000 - 0000000100000000 (reserved)
[    0.000000]  BIOS-e820: 0000000100000000 - 0000000140000000 (usable)

Андрей Ляховец

Re: [Hardware] 4GB на TYAN S2885 Thunder K8W

[Michael Shigorin]

On Fri, Sep 23, 2011 at 03:28:15PM +0400, Andrey Liakhovets wrote:
> После добавления памяти до 4GB в мат.плату TYAN S2885 Thunder K8W с двумя
> Opteron 246 и включения в BIOS'е Memory Hole возникли проблемы с загрузкой

Есть Tyan S2881 Thunder K8SR с двумя Opteron 270 и 4G RAM,
в принципе могу добраться и посмотреть в BIOS, но подобного
не припоминаю (сейчас под 2.6.18-ovz-rhel).

На всякий, BIOS же у Вас там точно последний под неё?

> 3.0.4 локально и Server Light rescue не фотографировал,
> там было что-то типа:
> ... /bin/true: /bin/true: cannot execute binary file
> Activating swap partitions: /sbin/swapon: /sbin/swapon: cannot execute ...
> и что-то насчёт openvt.

Что-то лезет в голову насчёт IOMMU... проходивший мимо sr@ сказал,
что где-то после .32 появилась эмуляция, кажется (мог не всё
точно уловить).  Ещё говорит, что если отсюда вылезло отлетание
стораджа под /bin, можно попробовать загрузиться по сети для
проверки этого варианта.  Тж. http://lwn.net/Articles/252826/

PS: и ещё на всякий -- я бы загрузился с добавленной памятью
_без_ той, что стояла раньше, и поставил под memtest86+.

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/

Re: [Hardware] 4GB на TYAN S2885 Thunder K8W

[Andrey Liakhovets]

On Fri, 23 Sep 2011 17:01:32 +0300 Michael Shigorin wrote:
>On Fri, Sep 23, 2011 at 03:28:15PM +0400, Andrey Liakhovets wrote:
>> После добавления памяти до 4GB в мат.плату TYAN S2885 Thunder K8W с двумя
>> Opteron 246 и включения в BIOS'е Memory Hole возникли проблемы с загрузкой
>
>Есть Tyan S2881 Thunder K8SR с двумя Opteron 270 и 4G RAM,
>в принципе могу добраться и посмотреть в BIOS, но подобного
>не припоминаю (сейчас под 2.6.18-ovz-rhel).
>
>На всякий, BIOS же у Вас там точно последний под неё?

Да, последний 2.07.

>> 3.0.4 локально и Server Light rescue не фотографировал,
>> там было что-то типа:
>> ... /bin/true: /bin/true: cannot execute binary file
>> Activating swap partitions: /sbin/swapon: /sbin/swapon: cannot execute ...
>> и что-то насчёт openvt.
>
>Что-то лезет в голову насчёт IOMMU... проходивший мимо sr@ сказал,
>что где-то после .32 появилась эмуляция, кажется (мог не всё
>точно уловить).  Ещё говорит, что если отсюда вылезло отлетание
>стораджа под /bin, можно попробовать загрузиться по сети для
>проверки этого варианта.  Тж. http://lwn.net/Articles/252826/

Спасибо, посмотрю.
Кстати, с 2.6.32-el-smp-alt27 появились такие строки в dmesg:

kernel: AMD-Vi disabled by default: pass amd_iommu=on to enable
kernel: PCI-DMA: using GART IOMMU.
kernel: PCI-DMA: Reserving 64MB of IOMMU area in the AGP aperture

>PS: и ещё на всякий -- я бы загрузился с добавленной памятью
>_без_ той, что стояла раньше, и поставил под memtest86+.

Память предварительно протестировал, и по-отдельности (старую и новую),
и вместе. Вдобавок на пару ночей на всех 4GB запускал "под завязку"
`burnMMX P'.

Андрей Ляховец