[sisyphus] Утекает память с новым ядром

[sisyphus] Утекает память с новым ядром

[Vitaly Lipatov]

Вот выдержка из /proc/meminfo:
MemTotal:       516088 kB
MemFree:         43076 kB
Buffers:         60564 kB
Cached:          12444 kB
SwapCached:        132 kB
Active:         236288 kB
Inactive:       207064 kB

Как видно, занято около 400Мб памяти, причём это runlevel 1,
и запущен только bash, в котором я файл и сохранял.

Я так понимаю, так прятать память может только ядро, поэтому и 
думаю на 2.6.10, которое недавно поставил. Воспроизводится у 
меня легко - я запускаю команду
$ time find /mnt/cdrom/путь_к_rpm-файлам | xargs rpm --checksig
И память начинает пропадать. Монтируется DVD-RW диск через 
submount, все scsi-эмуляции отключены. Как узнать, куда девается 
память и как это побороть?

-- 
Lav
Виталий Липатов
Санкт-Петербург
GNU! ALT Linux Team! LaTeX! LyX!

Re: [sisyphus] Утекает память с новым ядром

[Aleksey E Birukov]

[-- Attachment #1: Type: text/plain, Size: 863 bytes --]

В сообщении от 1 Февраль 2005 12:09 Vitaly Lipatov написал(a):
> Вот выдержка из /proc/meminfo:
> MemTotal:       516088 kB
> MemFree:         43076 kB
> Buffers:         60564 kB
> Cached:          12444 kB
> SwapCached:        132 kB
> Active:         236288 kB
> Inactive:       207064 kB
>
> Как видно, занято около 400Мб памяти, причём это runlevel 1,
> и запущен только bash, в котором я файл и сохранял.
>
> Я так понимаю, так прятать память может только ядро, поэтому и
> думаю на 2.6.10, которое недавно поставил. Воспроизводится у
> меня легко - я запускаю команду
> $ time find /mnt/cdrom/путь_к_rpm-файлам | xargs rpm --checksig
> И память начинает пропадать. Монтируется DVD-RW диск через
> submount, все scsi-эмуляции отключены. Как узнать, куда девается
> память и как это побороть?

Тоже заметил. Правда на ядре 2.6.10-wks26-up-alt2

-- 
$respect

[-- Attachment #2: Type: application/pgp-signature, Size: 190 bytes --]

Re: [sisyphus] Утекает память с новым ядром

[Ilia Menchikh]

Aleksey E Birukov wrote:

>В сообщении от 1 Февраль 2005 12:09 Vitaly Lipatov написал(a):
>  
>
>>Вот выдержка из /proc/meminfo:
>>MemTotal:       516088 kB
>>MemFree:         43076 kB
>>Buffers:         60564 kB
>>Cached:          12444 kB
>>SwapCached:        132 kB
>>Active:         236288 kB
>>Inactive:       207064 kB
>>
>>Как видно, занято около 400Мб памяти, причём это runlevel 1,
>>и запущен только bash, в котором я файл и сохранял.
>>
>>Я так понимаю, так прятать память может только ядро, поэтому и
>>думаю на 2.6.10, которое недавно поставил. Воспроизводится у
>>меня легко - я запускаю команду
>>$ time find /mnt/cdrom/путь_к_rpm-файлам | xargs rpm --checksig
>>И память начинает пропадать. Монтируется DVD-RW диск через
>>submount, все scsi-эмуляции отключены. Как узнать, куда девается
>>память и как это побороть?
>>    
>>
>
>Тоже заметил. Правда на ядре 2.6.10-wks26-up-alt2
>
Было подобное на std26-up-2.6.8-alt9 из Мастера - 
http://lists.altlinux.ru/pipermail/sisyphus/2005-January/051619.html
вылечилось переходом на std26-up-2.6.10-alt2

[sisyphus] Re: Утекает память с новым ядром

[Konstantin A. Lepikhov]

<цитата от="Aleksey E Birukov">
<skip>
>> думаю на 2.6.10, которое недавно поставил.
>> Воспроизводится у
>> меня легко - я запускаю команду
>> $ time find /mnt/cdrom/путь_к_rpm-файлам | xargs rpm
>> --checksig
>> И память начинает пропадать.
>> Монтируется DVD-RW диск через
>> submount, все scsi-эмуляции отключены. Как
>> узнать, куда девается
>> память и как это побороть?
>
> Тоже заметил. Правда на ядре 2.6.10-wks26-up-alt2
Это не утечка а новое поведение - все
данные хранятся в оперативной памяти
для ускорения дисковых операций и
меньшего обращения к swap.

-- 
WBR et al.

[sisyphus] Re: Утекает память с новым ядром

[Michael Shigorin]

On Tue, Feb 01, 2005 at 04:03:25PM +0300, Konstantin A. Lepikhov wrote:
> Это не утечка а новое поведение - все данные хранятся в
> оперативной памяти для ускорения дисковых операций и меньшего
> обращения к swap.

Ох.  То кэш в своп заталкивают, то наоборот -- своп изгоняют...
Воистину неисповедимы тараканы пишущих VM :(

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/

[sisyphus] Re: Утекает память с новым ядром

[Konstantin A. Lepikhov]

<цитата от="Michael Shigorin">
> On Tue, Feb 01, 2005 at 04:03:25PM +0300, Konstantin A. Lepikhov wrote:
>> Это не утечка а новое поведение - все
>> данные хранятся в
>> оперативной памяти для ускорения
>> дисковых операций и меньшего
>> обращения к swap.
>
> Ох.  То кэш в своп заталкивают, то
> наоборот -- своп изгоняют...
> Воистину неисповедимы тараканы пишущих
> VM :(
from FAQ на con.kolivas.org:

Mapped watermark??
This readjusts the way memory is evicted by lightly removing cached ram
once the ram just under full capacity, if less than the "mapped watermark"
percent of ram is mapped ram (ie applications). The normal system is to
aggresively start scanning ram once it is completely full. The benefits of
this are:
1. Allocating memory while ram is being lightly scanned is faster and
cheaper than when it is being heavily scanned.
2. There is usually some free ram which tends to speed up application
startup times.
3. Swapping is an unusual event instead of a common one if you have enough
ram for your workload.
4. It is rare for your applications to be swapped out by file cache pressure.
Disadvantage: Less file cache.

The mapped watermark is configurable so a server for example might be
happy to have a lower mapped percentage. The default is 66 and a server
might like 33

echo 33 > /proc/sys/vm/mapped

This removes the swappiness knob entirely and deprecates all my previous
vm hacks (autoregulated swappiness, hard swappiness, kiflush).


-- 
WBR et al.

Re: [sisyphus] Re: Утекает память с новым ядром

[Vitaly Lipatov]

On Tuesday 01 February 2005 16:03, Konstantin A. Lepikhov wrote:

> Это не утечка а новое поведение - все
> данные хранятся в оперативной памяти
> для ускорения дисковых операций и
> меньшего обращения к swap.
Если вы про строку Mapped в /proc/meminfo, то там всего 3Мб:
Mapped:           3552 kB

А про утечку я говорю не с того, что памяти не досчитался, а с 
того, что при 512 метрах памяти у меня своп на 400 мегабайт 
занят при одном лишь запущенном bash :) Явно не похоже на новое 
поведение.

-- 
Lav
Виталий Липатов
Санкт-Петербург
GNU! ALT Linux Team! LaTeX! LyX!

[sisyphus] Re: Утекает память с новым ядром

[Konstantin A. Lepikhov]

Hi Vitaly!

Wednesday 02, at 01:50:32 AM you wrote:

> On Tuesday 01 February 2005 16:03, Konstantin A. Lepikhov wrote:
> 
> > Это не утечка а новое поведение - все
> > данные хранятся в оперативной памяти
> > для ускорения дисковых операций и
> > меньшего обращения к swap.
> Если вы про строку Mapped в /proc/meminfo, то там всего 3Мб:
> Mapped:           3552 kB
> 
> А про утечку я говорю не с того, что памяти не досчитался, а с 
> того, что при 512 метрах памяти у меня своп на 400 мегабайт 
> занят при одном лишь запущенном bash :) Явно не похоже на новое 
> поведение.
я говорил про wks26. Насчет того, что творится в std26 - не в курсе. 

-- 
WBR, Konstantin	      chat with ==>ICQ: 109916175
     Lepikhov,	      speak  to ==>JID: lakostis@jabber.org
aka L.A. Kostis       write  to ==>mailto:lakostis@pisem.net.nospam

...The information is like the bank... 			  (c) EC8OR