[devel] I: tmpfs is unreliable

[devel] I: tmpfs is unreliable

[Dmitry V. Levin]

[-- Attachment #1: Type: text/plain, Size: 736 bytes --]

On Mon, Apr 24, 2006 at 12:50:26AM +0400, Dmitry V. Levin wrote:
[...]
> По неизвестной мне причине эти и последующие пакеты в Сизиф ещё не
> попали.

Причина установлена: пакеты не собрались, как теперь стало ясно,
по вине сборочных серверов.

Как известно, мы собираем пакеты на tmpfs из-за существенного роста
производительности.
В данном случае пакеты попали на сборку в то время, когда на серверах
работал mklocatedb.  Как правило, пакет, попавший на сборку во время
работы mklocatedb, не собирается по причине исчезновения произвольных
файлов.  Эта проблема с tmpfs воспроизводится на всех доступных ядрах,
от 2.4.26-std-smp-alt13 до 2.6.16-std26-smp-alt2.

Сергей, можно что-нибудь с этим сделать?


-- 
ldv

[-- Attachment #2: Type: application/pgp-signature, Size: 191 bytes --]

Re: [devel] I: tmpfs is unreliable

[Anton Farygin]

Dmitry V. Levin wrote:
> On Mon, Apr 24, 2006 at 12:50:26AM +0400, Dmitry V. Levin wrote:
> [...]
>> По неизвестной мне причине эти и последующие пакеты в Сизиф ещё не
>> попали.
> 
> Причина установлена: пакеты не собрались, как теперь стало ясно,
> по вине сборочных серверов.
> 
> Как известно, мы собираем пакеты на tmpfs из-за существенного роста
> производительности.
> В данном случае пакеты попали на сборку в то время, когда на серверах
> работал mklocatedb.  Как правило, пакет, попавший на сборку во время
> работы mklocatedb, не собирается по причине исчезновения произвольных
> файлов.  Эта проблема с tmpfs воспроизводится на всех доступных ядрах,
> от 2.4.26-std-smp-alt13 до 2.6.16-std26-smp-alt2.
> 
> Сергей, можно что-нибудь с этим сделать?
> 

А можно простенький testcase ?

Rgds,
Rider

Re: [devel] I: tmpfs is unreliable

[Dmitry V. Levin]

[-- Attachment #1: Type: text/plain, Size: 1215 bytes --]

On Mon, Apr 24, 2006 at 07:27:40PM +0400, Anton Farygin wrote:
> Dmitry V. Levin wrote:
> > On Mon, Apr 24, 2006 at 12:50:26AM +0400, Dmitry V. Levin wrote:
> > [...]
> >> По неизвестной мне причине эти и последующие пакеты в Сизиф ещё не
> >> попали.
> > 
> > Причина установлена: пакеты не собрались, как теперь стало ясно,
> > по вине сборочных серверов.
> > 
> > Как известно, мы собираем пакеты на tmpfs из-за существенного роста
> > производительности.
> > В данном случае пакеты попали на сборку в то время, когда на серверах
> > работал mklocatedb.  Как правило, пакет, попавший на сборку во время
> > работы mklocatedb, не собирается по причине исчезновения произвольных
> > файлов.  Эта проблема с tmpfs воспроизводится на всех доступных ядрах,
> > от 2.4.26-std-smp-alt13 до 2.6.16-std26-smp-alt2.
> > 
> > Сергей, можно что-нибудь с этим сделать?
> 
> А можно простенький testcase ?

Простенький testcase:
1. запускаешь /etc/cron.daily/updatedb или даже просто find / &>/dev/null
2. пока оно работает, запускаешь на сборку заведомо собирающийся пакет.
3. с вероятностью "всегда, когда нужно собрать пакет" пакет не соберётся с
диагностикой о ненайденных файлах.


-- 
ldv

[-- Attachment #2: Type: application/pgp-signature, Size: 191 bytes --]

Re: [devel] I: tmpfs is unreliable

[Anton Farygin]

Dmitry V. Levin wrote:
> On Mon, Apr 24, 2006 at 07:27:40PM +0400, Anton Farygin wrote:
>> Dmitry V. Levin wrote:
>>> On Mon, Apr 24, 2006 at 12:50:26AM +0400, Dmitry V. Levin wrote:
>>> [...]
>>>> По неизвестной мне причине эти и последующие пакеты в Сизиф ещё не
>>>> попали.
>>> Причина установлена: пакеты не собрались, как теперь стало ясно,
>>> по вине сборочных серверов.
>>>
>>> Как известно, мы собираем пакеты на tmpfs из-за существенного роста
>>> производительности.
>>> В данном случае пакеты попали на сборку в то время, когда на серверах
>>> работал mklocatedb.  Как правило, пакет, попавший на сборку во время
>>> работы mklocatedb, не собирается по причине исчезновения произвольных
>>> файлов.  Эта проблема с tmpfs воспроизводится на всех доступных ядрах,
>>> от 2.4.26-std-smp-alt13 до 2.6.16-std26-smp-alt2.
>>>
>>> Сергей, можно что-нибудь с этим сделать?
>> А можно простенький testcase ?
> 
> Простенький testcase:
> 1. запускаешь /etc/cron.daily/updatedb или даже просто find / &>/dev/null
> 2. пока оно работает, запускаешь на сборку заведомо собирающийся пакет.
> 3. с вероятностью "всегда, когда нужно собрать пакет" пакет не соберётся с
> диагностикой о ненайденных файлах

Это на SMP машине ? а на UP воспроизводится ?

Rgds,
Rider

Re: [devel] I: tmpfs is unreliable

[Dmitry V. Levin]

[-- Attachment #1: Type: text/plain, Size: 169 bytes --]

On Mon, Apr 24, 2006 at 08:02:01PM +0400, Anton Farygin wrote:
[...]
> Это на SMP машине ? а на UP воспроизводится ?

На std26-up воспроизводится. :(


-- 
ldv

[-- Attachment #2: Type: application/pgp-signature, Size: 191 bytes --]

Re: [devel] I: tmpfs is unreliable

[Sergey Vlasov]

[-- Attachment #1: Type: text/plain, Size: 327 bytes --]

On Mon, Apr 24, 2006 at 08:02:09PM +0400, Dmitry V. Levin wrote:
> On Mon, Apr 24, 2006 at 08:02:01PM +0400, Anton Farygin wrote:
> [...]
> > Это на SMP машине ? а на UP воспроизводится ?
> 
> На std26-up воспроизводится. :(

Вот только у меня никак не воспроизводится.  Или для этого нужно собирать
что-то вроде OOo?

[-- Attachment #2: Type: application/pgp-signature, Size: 189 bytes --]

Re: [devel] I: tmpfs is unreliable

[Dmitry V. Levin]

[-- Attachment #1: Type: text/plain, Size: 507 bytes --]

On Wed, Apr 26, 2006 at 05:42:32PM +0400, Sergey Vlasov wrote:
> On Mon, Apr 24, 2006 at 08:02:09PM +0400, Dmitry V. Levin wrote:
> > On Mon, Apr 24, 2006 at 08:02:01PM +0400, Anton Farygin wrote:
> > [...]
> > > Это на SMP машине ? а на UP воспроизводится ?
> > 
> > На std26-up воспроизводится. :(
> 
> Вот только у меня никак не воспроизводится.  Или для этого нужно собирать
> что-то вроде OOo?

Нет, достаточно собирать один небольшой пакет в цикле, пока сборка не
свалится.


-- 
ldv

[-- Attachment #2: Type: application/pgp-signature, Size: 191 bytes --]

Re: [devel] I: tmpfs is unreliable

[Alexey Gladkov]

Anton Farygin wrote:
> Это на SMP машине ? а на UP воспроизводится ?

Воспроизводится на разных версиях ядер и разных архитектурах.

-- 
Rgrds, legion

Re: [devel] I: tmpfs is unreliable

[Anton Farygin]

Dmitry V. Levin wrote:
> On Mon, Apr 24, 2006 at 12:50:26AM +0400, Dmitry V. Levin wrote:
> [...]
>> По неизвестной мне причине эти и последующие пакеты в Сизиф ещё не
>> попали.
> 
> Причина установлена: пакеты не собрались, как теперь стало ясно,
> по вине сборочных серверов.
> 
> Как известно, мы собираем пакеты на tmpfs из-за существенного роста
> производительности.
> В данном случае пакеты попали на сборку в то время, когда на серверах
> работал mklocatedb.  Как правило, пакет, попавший на сборку во время
> работы mklocatedb, не собирается по причине исчезновения произвольных
> файлов.  Эта проблема с tmpfs воспроизводится на всех доступных ядрах,
> от 2.4.26-std-smp-alt13 до 2.6.16-std26-smp-alt2.
> 
> Сергей, можно что-нибудь с этим сделать?

Можно заменить tmpfs на i-RAM.

Работать правда будет несколько медленнее, чем TMPFS, но зато и глюков 
будет меньше.

http://www.thg.ru/storage/20050910/index.html

Rgds,
Rider

Re: [devel] I: tmpfs is unreliable

[Dmitry V. Levin]

[-- Attachment #1: Type: text/plain, Size: 961 bytes --]

On Mon, Apr 24, 2006 at 07:36:53PM +0400, Anton Farygin wrote:
> Dmitry V. Levin wrote:
> > On Mon, Apr 24, 2006 at 12:50:26AM +0400, Dmitry V. Levin wrote:
> > [...]
> >> По неизвестной мне причине эти и последующие пакеты в Сизиф ещё не
> >> попали.
> > 
> > Причина установлена: пакеты не собрались, как теперь стало ясно,
> > по вине сборочных серверов.
> > 
> > Как известно, мы собираем пакеты на tmpfs из-за существенного роста
> > производительности.
> > В данном случае пакеты попали на сборку в то время, когда на серверах
> > работал mklocatedb.  Как правило, пакет, попавший на сборку во время
> > работы mklocatedb, не собирается по причине исчезновения произвольных
> > файлов.  Эта проблема с tmpfs воспроизводится на всех доступных ядрах,
> > от 2.4.26-std-smp-alt13 до 2.6.16-std26-smp-alt2.
> > 
> > Сергей, можно что-нибудь с этим сделать?
> 
> Можно заменить tmpfs на i-RAM.

Это, извините, денег стоит.


-- 
ldv

[-- Attachment #2: Type: application/pgp-signature, Size: 191 bytes --]

Re: [devel] I: tmpfs is unreliable

[Денис Смирнов]

On Mon, Apr 24, 2006 at 07:36:53PM +0400, Anton Farygin wrote:

AF> Можно заменить tmpfs на i-RAM.

Это уже появилось в продаже в Москве?

-- 
С уважением, Денис

http://freesource.info
----------------------------------------------------------------------------
P.S. Вообще-то это offtopic для данной баги. :)
		-- ldv in #7606

Re: [devel] I: tmpfs is unreliable

[Anton Farygin]

Денис Смирнов wrote:
> On Mon, Apr 24, 2006 at 07:36:53PM +0400, Anton Farygin wrote:
> 
> AF> Можно заменить tmpfs на i-RAM.
> 
> Это уже появилось в продаже в Москве?
> 

на price.ru я нашёл, но не знаю в каком состоянии ;)

Поддержку в Linux не гарантирую ;)

Rgds,
Rider

Re: [devel] I: tmpfs is unreliable

[Andrey Rahmatullin]

[-- Attachment #1: Type: text/plain, Size: 461 bytes --]

On Tue, Apr 25, 2006 at 09:50:30AM +0400, Anton Farygin wrote:
> на price.ru я нашёл, но не знаю в каком состоянии ;)
> 
> Поддержку в Linux не гарантирую ;)
Идите уже в курилку с оффтопиком.

-- 
WBR, wRAR (ALT Linux Team)
Powered by the ALT Linux fortune(8):

> Я спрашивал - вешать багу в багзиллу или мантейнер и так поправит. :)
Вешать, конечно - мантейнер /dev/cpu - субстанция довольно абстрактная,
может и забыть. :)
		-- ldv in sisyphus@

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 191 bytes --]

Re: [devel] I: tmpfs is unreliable

[Alexander Bokovoy]

Dmitry V. Levin пишет:
> Как известно, мы собираем пакеты на tmpfs из-за существенного роста 
> производительности. В данном случае пакеты попали на сборку в то
> время, когда на серверах работал mklocatedb.  Как правило, пакет,
> попавший на сборку во время работы mklocatedb, не собирается по
> причине исчезновения произвольных файлов.  Эта проблема с tmpfs
> воспроизводится на всех доступных ядрах, от 2.4.26-std-smp-alt13 до
> 2.6.16-std26-smp-alt2.
> 
> Сергей, можно что-нибудь с этим сделать?
Вообще-то, проблема пропадания инодов в tmpfs стара и известна давно. Не
фиксится.

-- 
/ Alexander Bokovoy
Samba Team                      http://www.samba.org/
ALT Linux Team                  http://www.altlinux.org/
Midgard Project Ry              http://www.midgard-project.org/

Re: [devel] I: tmpfs is unreliable

[Andrey Rahmatullin]

[-- Attachment #1: Type: text/plain, Size: 552 bytes --]

On Wed, Apr 26, 2006 at 05:49:31PM +0400, Alexander Bokovoy wrote:
> Вообще-то, проблема пропадания инодов 
При каких условиях?

> Не фиксится.
Фигассе. Всё так плохо?

-- 
WBR, wRAR (ALT Linux Team)
Powered by the ALT Linux fortune(8):

В дистрибутивах ALT Linux по умолчанию сервис talk выключен,
удалённые пользователи не имеют доступа к сервису talk, а
локальные непривилегированные пользователи не могут формировать
UDP-пакеты такого вида, которые можно использовать для
организации DoS-атаки.
		-- security in security-announce@

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 191 bytes --]

Re: [devel] I: tmpfs is unreliable

[Kirill A. Shutemov]

[-- Attachment #1: Type: text/plain, Size: 923 bytes --]

On 17:49 Wed 26 Apr, Alexander Bokovoy wrote:
> Dmitry V. Levin пишет:
> > Как известно, мы собираем пакеты на tmpfs из-за существенного роста 
> > производительности. В данном случае пакеты попали на сборку в то
> > время, когда на серверах работал mklocatedb.  Как правило, пакет,
> > попавший на сборку во время работы mklocatedb, не собирается по
> > причине исчезновения произвольных файлов.  Эта проблема с tmpfs
> > воспроизводится на всех доступных ядрах, от 2.4.26-std-smp-alt13 до
> > 2.6.16-std26-smp-alt2.
> > 
> > Сергей, можно что-нибудь с этим сделать?
> Вообще-то, проблема пропадания инодов в tmpfs стара и известна давно. Не
> фиксится.
А можно подробней? Почему это происходит. Для меня не очевидно.

-- 
Kirill A. Shutemov				Belarus, Minsk
E-mail:	k.shutemov (AT) sam-solutions.net
JID: kas (AT) altlinux.org
ICQ: 152302675

> #7070 как поживает?
Померла
		-- zerg in sisyphus@

[-- Attachment #2: Type: application/pgp-signature, Size: 191 bytes --]

Re: [devel] I: tmpfs is unreliable

[Ildar Mulyukov]

On 24.04.2006 21:04:17, Dmitry V. Levin wrote:
> On Mon, Apr 24, 2006 at 12:50:26AM +0400, Dmitry V. Levin wrote:
> [...]
> > По неизвестной мне причине эти и последующие пакеты в Сизиф ещё не
> > попали.
> 
> Причина установлена: пакеты не собрались, как теперь стало ясно,
> по вине сборочных серверов.
> 
> Как известно, мы собираем пакеты на tmpfs из-за существенного роста
> производительности.
> В данном случае пакеты попали на сборку в то время, когда на серверах
> работал mklocatedb.  Как правило, пакет, попавший на сборку во время
> работы mklocatedb, не собирается по причине исчезновения произвольных
> файлов.  Эта проблема с tmpfs воспроизводится на всех доступных ядрах,
> от 2.4.26-std-smp-alt13 до 2.6.16-std26-smp-alt2.
> 
> Сергей, можно что-нибудь с этим сделать?

Извините, возможно я пишу чепуху, но, ИМХО, можно попробовать
EXT2 on LOOP on FILE on TMPFS. Это конечно, медленнее, чем голый tmpfs,  
но, подозреваю, не катастрофически медленнее и железобетонно.  
Попробуете?

Кста, можно при желании "оттюнить" так, чтобы при необходимости  
динамически наращивался размер файла и ext2. Вот только может ли это  
loop - не знаю.

С уважением, Ильдар.
--
Ildar  Mulyukov,
   free SW designer/programmer/packager
=========================================
email: ildar@altlinux.ru
ALT Linux Sisyphus http://www.sisyphus.ru
=========================================

Re: [devel] I: tmpfs is unreliable

[Michael Shigorin]

On Tue, Jul 18, 2006 at 12:30:09PM +0600, Ildar Mulyukov wrote:
> Извините, возможно я пишу чепуху, но, ИМХО, можно попробовать
> EXT2 on LOOP on FILE on TMPFS. Это конечно, медленнее, чем
> голый tmpfs,  но, подозреваю, не катастрофически медленнее и
> железобетонно.  Попробуете?

Я как-то предлагал на рамдиск и шлёпнуть (только под сборку лучше
не ext2, а reiser3).

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/

Re: [devel] I: tmpfs is unreliable

[Sergey Y. Afonin]

On Monday 24 April 2006 20:04, Dmitry V. Levin wrote:

> Как правило, пакет, попавший на сборку во время работы mklocatedb, 
> не собирается по причине исчезновения произвольных файлов. 

Это только из-за нагрузки/расхода памяти, или из-за того, что mklocatedb
на tmpfs лезет ?

-- 
С уважением, Сергей Афонин
asy@altlinux.ru

Re: [devel] I: tmpfs is unreliable

[Alexey Gladkov]

Sergey Y. Afonin пишет:
> Это только из-за нагрузки/расхода памяти, или из-за того, что mklocatedb
> на tmpfs лезет ?

Конечно mklocatedb в tmpfs не лезет ... если бы всё было так просто.

-- 
Rgrds, legion

Re: [devel] I: tmpfs is unreliable

[Sergey Y. Afonin]

On Wednesday 19 July 2006 13:06, Alexey Gladkov wrote:

> > Это только из-за нагрузки/расхода памяти, или из-за того, что mklocatedb
> > на tmpfs лезет ?
> 
> Конечно mklocatedb в tmpfs не лезет ... если бы всё было так просто.

Я на всякий случай спросил. :-)

-- 
С уважением, Сергей Афонин
asy@altlinux.ru