From: Anton Farygin <rider@basealt.ru>
To: devel@lists.altlinux.org
Subject: Re: [devel] hsh --initroot: nvme vs ssd
Date: Sun, 21 Feb 2021 23:27:19 +0300
Message-ID: <df5bcd20-a3a7-fe5e-f4c4-c6822f57ccb3@basealt.ru> (raw)
In-Reply-To: <c7377d0f-3181-cfeb-535c-5806d2164a81@basealt.ru>
On 21.02.2021 22:41, Anton Farygin wrote:
> On 21.02.2021 21:51, Dmitry V. Levin wrote:
>> On Sun, Feb 21, 2021 at 09:23:31PM +0300, Anton Farygin wrote:
>> [...]
>>> Что ещё попробовать пособирать ?
>> Интересно сравнить скорость работы hsh --initroot-only в режиме
>> unchecked_initroot_cache="$(b2sum
>> /path/to/Sisyphus/files/list/task.info)"
>> (cached, без использования apt). В этом режиме оно работает достаточно
>> быстро, поэтому имеет смысл замерить скорость выполнения серии операций
>> (hsh --init, hsh --clean).
> на серии операций просто накапливается 1 секунда расхождения - т.е.
> 100 операций initroot даёт разницу в 100 секунд
>>
>> Ещё интересно сравнить то же самое, но под нагрузкой, когда `nproc`
>> потоков выполняют эту серию операций более-менее одновременно.
>
> А вот этот тест оказался более интересным и показал разницу почти в 4
> раза между памятью и nvme. В принципе это почти соответсвует реальной
> разнице в производительности между скоростью записи на накопитель и
> скоростью работы оперативной памяти.
>
> 32 параллельных initroot на nvme = 26 секунд, тоже самое на tmpfs - 7
> секунд.
>
>
> Но всё равно не очень понятно, насколько существенно это окажет
> влияние на скорость пересборки репозитория, т.к. с уменьшением
> количества потоков эта разница уменьшается.
>
> возможно, тут уже надо заняться настройкой шедулера и кеширования.
Я настроил кеш так, что бы диск не использовался вообще и получил
выигрыш в 0.5%
Это показалось мне странным и я сделал 100Gb файл на tmpfs, разбил его в
ext4, смонтировал через loop.
Честнее, конечно же, было бы использовать ramdisk но мне влом перегружаться.
результат - ramdisk на tmpfs с ext4 медленнее чем ssd на 50%. Из этого,
как мне кажется, можно сделать вывод что тормозит не nvme а файловая
система ext4 или vfs.
Есть идеи, как можно сделать tmpfs over nvme ?
next prev parent reply other threads:[~2021-02-21 20:27 UTC|newest]
Thread overview: 55+ messages / expand[flat|nested] mbox.gz Atom feed top
2021-02-17 22:52 ` [devel] Time limit Dmitry V. Levin
2021-02-17 23:34 ` Andrey Savchenko
2021-02-17 22:55 ` Alexey Gladkov
2021-02-17 23:21 ` Alexey Gladkov
2021-02-18 5:52 ` Sergey Afonin
2021-02-17 23:22 ` Dmitry V. Levin
2021-02-17 23:43 ` Alexey Gladkov
2021-02-18 6:44 ` Anton Farygin
2021-02-18 6:56 ` Alexey V. Vissarionov
2021-02-18 7:02 ` Anton Farygin
2021-02-18 7:18 ` Alexey V. Vissarionov
2021-02-18 7:25 ` Anton Farygin
2021-02-18 7:41 ` Alexey V. Vissarionov
2021-02-18 7:43 ` Anton Farygin
2021-02-18 7:47 ` Alexey V. Vissarionov
2021-02-18 7:53 ` Anton Farygin
2021-02-18 11:41 ` Dmitry V. Levin
2021-02-18 7:11 ` Vitaly Chikunov
2021-02-18 11:37 ` Dmitry V. Levin
2021-02-18 17:50 ` Anton Farygin
2021-02-18 21:52 ` Michael Shigorin
2021-02-18 22:00 ` Alexey V. Vissarionov
2021-02-19 7:11 ` Anton Farygin
2021-02-19 10:50 ` Michael Shigorin
2021-02-19 11:11 ` Anton Farygin
2021-02-19 12:05 ` Michael Shigorin
2021-02-19 12:23 ` Anton Farygin
2021-02-21 18:23 ` [devel] hsh --initroot: nvme vs ssd Anton Farygin
2021-02-21 18:38 ` Vladimir D. Seleznev
2021-02-21 18:41 ` Anton Farygin
2021-02-21 18:47 ` Anton Farygin
2021-02-21 18:51 ` Dmitry V. Levin
2021-02-21 19:41 ` Anton Farygin
2021-02-21 20:27 ` Anton Farygin [this message]
2021-02-19 12:29 ` [devel] О пропускной способности устройств хранения (Re: Time limit) Alexey Sheplyakov
2021-02-19 13:50 ` Anton V. Boyarshinov
2021-02-19 13:56 ` Anton Farygin
2021-02-19 14:03 ` Anton V. Boyarshinov
2021-02-22 8:54 ` Alexey Sheplyakov
2021-02-24 7:51 ` Anton V. Boyarshinov
2021-02-19 8:47 ` [devel] Time limit Anton V. Boyarshinov
2021-02-19 8:48 ` Anton Farygin
2021-02-19 9:39 ` Leonid Krivoshein
2021-02-19 9:57 ` Anton Farygin
2021-02-19 11:12 ` Michael Shigorin
2021-02-19 11:26 ` Anton Farygin
2021-02-19 11:28 ` Anton V. Boyarshinov
2021-02-19 11:36 ` Anton Farygin
2021-02-19 11:43 ` Anton V. Boyarshinov
2021-02-19 11:48 ` Anton Farygin
2021-02-19 11:59 ` Anton V. Boyarshinov
2021-02-19 12:01 ` Anton Farygin
2021-02-19 11:45 ` [devel] ssd for hasher Anton Farygin
2021-02-19 16:11 ` [devel] Time limit Alexey Gladkov
2021-02-19 16:18 ` Dmitry V. Levin
Reply instructions:
You may reply publicly to this message via plain-text email
using any one of the following methods:
* Save the following mbox file, import it into your mail client,
and reply-to-all from there: mbox
Avoid top-posting and favor interleaved quoting:
https://en.wikipedia.org/wiki/Posting_style#Interleaved_style
* Reply using the --to, --cc, and --in-reply-to
switches of git-send-email(1):
git send-email \
--in-reply-to=df5bcd20-a3a7-fe5e-f4c4-c6822f57ccb3@basealt.ru \
--to=rider@basealt.ru \
--cc=devel@lists.altlinux.org \
/path/to/YOUR_REPLY
https://kernel.org/pub/software/scm/git/docs/git-send-email.html
* If your mail client supports setting the In-Reply-To header
via mailto: links, try the mailto: link
ALT Linux Team development discussions
This inbox may be cloned and mirrored by anyone:
git clone --mirror http://lore.altlinux.org/devel/0 devel/git/0.git
# If you have public-inbox 1.1+ installed, you may
# initialize and index your mirror using the following commands:
public-inbox-init -V2 devel devel/ http://lore.altlinux.org/devel \
devel@altlinux.org devel@altlinux.ru devel@lists.altlinux.org devel@lists.altlinux.ru devel@linux.iplabs.ru mandrake-russian@linuxteam.iplabs.ru sisyphus@linuxteam.iplabs.ru
public-inbox-index devel
Example config snippet for mirrors.
Newsgroup available over NNTP:
nntp://lore.altlinux.org/org.altlinux.lists.devel
AGPL code for this site: git clone https://public-inbox.org/public-inbox.git