[devel] NFS Root/ Diskless workstations

[devel] NFS Root/ Diskless workstations

[Yury A. Romanov]

-----BEGIN PGP SIGNED MESSAGE-----
Hash: SHA1

Господа, возможно вопрос не по теме рассылки, но все же. Никто из вас
не сталкивался с nfs, запущенным в openVZ в базовой системе?
Существует следующая проблема:
имеется сеть с 11 машинами, на которых пользователи работают с
расшаренными по nfs базами данных 1C и файлами в домашних каталогах.
Также, они получают корневую файловую систему по nfs. Были замечены
огромные задержки при запуске систем и приложений, при доступе к
файлам. При этом, тупо копирование файлов на nfs идет со скоростью
10+-2 мегабайт/с, что вполне нормально для 100мегабитной сетки. В
случае если я подключаю одну из машин с гигабитным интерфейсом
напрямую к серверу (с гигабитным интерфейсом), и устанавливаю скорость
обоих интерфейсов в 1 гигабит, никаких изменений в производительности
не происходит. при этом, прослушивание интерфейса через tcpdump выдает
нечто навроде:
16:32:09.402885 IP server.office.nordcell.ru.nfs >
wks5.office.nordcell.ru.3398107136: reply ERR 1460

экспортируемые разделы находятся на зеркальном raid, скорость доступа
к каждому отдельному винту и к массиву держится в районе 60
мегабайт/с, скорость доступа к файлам на сервере локально в примерно
таких же пределах. Файловая система ext3.

Есть какие-нибудь предположения на этот счет?
-----BEGIN PGP SIGNATURE-----
Version: GnuPG v1.4.7 (GNU/Linux)
Comment: Using GnuPG with Mozilla - http://enigmail.mozdev.org

iD8DBQFGu2yz7FcZFBNU99wRAty3AKDBzTMalZYeX2fdQJHQLYFjQZYz+gCgkG6i
ynVULoN7UR44IMOxpxJQSZw=
=k0AX
-----END PGP SIGNATURE-----

Re: [devel] NFS Root/ Diskless workstations

[Stanislav Ievlev]

У OVZ ядер действительно есть 
проблемы с nfs в виде периодического отказа в обслуживании с последующим восстановлением.

upstream OVZ уже несколько раз пытался их решить.

On Thu, Aug 09, 2007 at 11:36:20PM +0400, Yury A. Romanov wrote:
> -----BEGIN PGP SIGNED MESSAGE-----
> Hash: SHA1
> 
> Господа, возможно вопрос не по теме рассылки, но все же. Никто из вас
> не сталкивался с nfs, запущенным в openVZ в базовой системе?
> Существует следующая проблема:
> имеется сеть с 11 машинами, на которых пользователи работают с
> расшаренными по nfs базами данных 1C и файлами в домашних каталогах.
> Также, они получают корневую файловую систему по nfs. Были замечены
> огромные задержки при запуске систем и приложений, при доступе к
> файлам. При этом, тупо копирование файлов на nfs идет со скоростью
> 10+-2 мегабайт/с, что вполне нормально для 100мегабитной сетки. В
> случае если я подключаю одну из машин с гигабитным интерфейсом
> напрямую к серверу (с гигабитным интерфейсом), и устанавливаю скорость
> обоих интерфейсов в 1 гигабит, никаких изменений в производительности
> не происходит. при этом, прослушивание интерфейса через tcpdump выдает
> нечто навроде:
> 16:32:09.402885 IP server.office.nordcell.ru.nfs >
> wks5.office.nordcell.ru.3398107136: reply ERR 1460
> 
> экспортируемые разделы находятся на зеркальном raid, скорость доступа
> к каждому отдельному винту и к массиву держится в районе 60
> мегабайт/с, скорость доступа к файлам на сервере локально в примерно
> таких же пределах. Файловая система ext3.
> 
> Есть какие-нибудь предположения на этот счет?
> -----BEGIN PGP SIGNATURE-----
> Version: GnuPG v1.4.7 (GNU/Linux)
> Comment: Using GnuPG with Mozilla - http://enigmail.mozdev.org
> 
> iD8DBQFGu2yz7FcZFBNU99wRAty3AKDBzTMalZYeX2fdQJHQLYFjQZYz+gCgkG6i
> ynVULoN7UR44IMOxpxJQSZw=
> =k0AX
> -----END PGP SIGNATURE-----
> 
> _______________________________________________
> Devel mailing list
> Devel@lists.altlinux.org
> https://lists.altlinux.org/mailman/listinfo/devel

Re: [devel] NFS Root/ Diskless workstations

[Yury A. Romanov]

Stanislav Ievlev wrote:
> У OVZ ядер действительно есть проблемы с nfs в виде периодического
> отказа в обслуживании с последующим восстановлением.
>
> upstream OVZ уже несколько раз пытался их решить.
>

Т.е. вы предлагаете использование обычного ядра на сервере в таких
случаях?  Или есть еще какие-то варианты помимо nfs?

Re: [devel] NFS Root/ Diskless workstations

[Michael Shigorin]

On Fri, Aug 10, 2007 at 11:32:18AM +0400, Yury A. Romanov wrote:
> Или есть еще какие-то варианты помимо nfs?

SMB?

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/

Re: [devel] NFS Root/ Diskless workstations

[Sergey Lebedev]

В сообщении от Friday 10 August 2007 11:32:18 Yury A. Romanov написал(а):
> Stanislav Ievlev wrote:
> > У OVZ ядер действительно есть проблемы с nfs в виде периодического
> > отказа в обслуживании с последующим восстановлением.
> >
> > upstream OVZ уже несколько раз пытался их решить.
>
> Т.е. вы предлагаете использование обычного ядра на сервере в таких
> случаях?  Или есть еще какие-то варианты помимо nfs?

А вот если его попробовать unfs3, те же будут грабли?

Re: [devel] NFS Root/ Diskless workstations

[Led]

В сообщении от Friday 10 August 2007 12:07:13 Michael Shigorin написал(а):
> On Fri, Aug 10, 2007 at 11:32:18AM +0400, Yury A. Romanov wrote:
> > Или есть еще какие-то варианты помимо nfs?
>
> SMB?

1) раза в 2 медленнее

2) Если 1С - сетевая и с одной базой конкретно работает >=2 пользователей - 
SMB (AFAIR) - самоубийство (в т.ч. и с сервером w2k[3]).

-- 
Led

Re: [devel] NFS Root/ Diskless workstations

[Michael Shigorin]

On Fri, Aug 10, 2007 at 01:43:47PM +0300, Led wrote:
> 2) Если 1С - сетевая и с одной базой конкретно работает >=2
> пользователей - SMB (AFAIR) - самоубийство (в т.ч. и с сервером
> w2k[3]).

Не-а.

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/

Re: [devel] NFS Root/ Diskless workstations

[Ivan Fedorov]

[-- Attachment #1: Type: text/plain, Size: 344 bytes --]

Led пишет:
> В сообщении от Friday 10 August 2007 12:07:13 Michael Shigorin написал(а):
>> On Fri, Aug 10, 2007 at 11:32:18AM +0400, Yury A. Romanov wrote:
>>> Или есть еще какие-то варианты помимо nfs?
>> SMB?
> 
> 1) раза в 2 медленнее
Ну не надо так категорично... иногда CIFS делает NFS (по крайней мере
NFSv3) как бог черепаху.


[-- Attachment #2: OpenPGP digital signature --]
[-- Type: application/pgp-signature, Size: 252 bytes --]

Re: [devel] NFS Root/ Diskless workstations

[Dmitry V. Levin]

[-- Attachment #1: Type: text/plain, Size: 452 bytes --]

On Thu, Aug 09, 2007 at 11:36:20PM +0400, Yury A. Romanov wrote:
> Господа, возможно вопрос не по теме рассылки, но все же. Никто из вас
> не сталкивался с nfs, запущенным в openVZ в базовой системе?

С nfs-сервером проблем не замечено
(возможно что тестировали недостаточно интенсивно).
Есть проблема с NFS-клиентом на ovz: можно сказать что он до сих пор
работает нестабильно, см. http://bugzilla.openvz.org/show_bug.cgi?id=469


-- 
ldv

[-- Attachment #2: Type: application/pgp-signature, Size: 189 bytes --]

Re: [devel] NFS Root/ Diskless workstations

[Yury A. Romanov]

Dmitry V. Levin wrote:
> On Thu, Aug 09, 2007 at 11:36:20PM +0400, Yury A. Romanov wrote:
>   
>> Господа, возможно вопрос не по теме рассылки, но все же. Никто из вас
>> не сталкивался с nfs, запущенным в openVZ в базовой системе?
>>     
>
> С nfs-сервером проблем не замечено
> (возможно что тестировали недостаточно интенсивно).
> Есть проблема с NFS-клиентом на ovz: можно сказать что он до сих пор
> работает нестабильно, см. http://bugzilla.openvz.org/show_bug.cgi?id=469
>
>
>   
> ------------------------------------------------------------------------
>
> _______________________________________________
> Devel mailing list
> Devel@lists.altlinux.org
> https://lists.altlinux.org/mailman/listinfo/devel
На клиентах стоит самое обычное кошерное ядро 2.6.18-std-smp-alt6.
Просто странно, что при соединении напрямую двух машин с гигабитными
сетевыми картами, изменений в производительности системы не возникло.

Re: [devel] NFS Root/ Diskless workstations

[Dmitry V. Levin]

[-- Attachment #1: Type: text/plain, Size: 1094 bytes --]

On Sat, Aug 11, 2007 at 02:24:21PM +0400, Yury A. Romanov wrote:
> Dmitry V. Levin wrote:
> > On Thu, Aug 09, 2007 at 11:36:20PM +0400, Yury A. Romanov wrote:
> >   
> >> Господа, возможно вопрос не по теме рассылки, но все же. Никто из вас
> >> не сталкивался с nfs, запущенным в openVZ в базовой системе?
> >
> > С nfs-сервером проблем не замечено
> > (возможно что тестировали недостаточно интенсивно).
> > Есть проблема с NFS-клиентом на ovz: можно сказать что он до сих пор
> > работает нестабильно, см. http://bugzilla.openvz.org/show_bug.cgi?id=469
[...]
> На клиентах стоит самое обычное кошерное ядро 2.6.18-std-smp-alt6.
> Просто странно, что при соединении напрямую двух машин с гигабитными
> сетевыми картами, изменений в производительности системы не возникло.

Тогда нужно заменять разные части системы и искать причину снижения
производительности: попробовать обычного клиента, попробовать обычное ядро
на сервере, попробовать с другими гигабитными сетевыми картами, и т.п.
У нас в офисе производительность гигабитной сети не вызывает сомнений.


-- 
ldv

[-- Attachment #2: Type: application/pgp-signature, Size: 189 bytes --]

Re: [devel] NFS Root/ Diskless workstations

[Michael Shigorin]

On Sat, Aug 11, 2007 at 02:24:21PM +0400, Yury A. Romanov wrote:
> На клиентах стоит самое обычное кошерное ядро 2.6.18-std-smp-alt6.

Вроде уже alt7 в моде (и соответственно ovz*alt15).

> Просто странно, что при соединении напрямую двух машин с гигабитными
> сетевыми картами, изменений в производительности системы не возникло.

Очень может быть, что они просто встали в сотку, вот и нет
изменений.  Если это не так -- значит, упираемся во что-то
ещё.

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/