From: "Alexander Bokovoy" <ab@altlinux.org>
To: "ALT Linux Team development discussions" <devel@lists.altlinux.org>
Subject: Re: [devel] rpm: LZMA payload compression
Date: Sat, 24 May 2008 20:02:05 +0400
Message-ID: <6062a6e60805240902y6890904i5f5e639bc7913602@mail.gmail.com> (raw)
In-Reply-To: <6062a6e60805240853o254c656bi989903eef98417a6@mail.gmail.com>
24 мая 2008 г. 19:53 пользователь Alexander Bokovoy <ab@altlinux.org> написал:
> 24 мая 2008 г. 19:35 пользователь Alexey Tourbin <at@altlinux.ru> написал:
>>> Два вопроса по производительности:
>>> 1. Насколько это ускоряет типичную установку пакетов? Скажем, kde или
>>> что-нибудь подобное по объему?
>>
>> Это не может ускорить установку пакетов, потому что скорость разжатия
>> раза в три меньше, чем у gzip, который сейчас используется (но при этом
>> раза в 3-4 больше, чем у bzip2).
>>
>> Точнее, на это лучше смотреть по-другому. Скорость разжатия LZMA на
>> современных процессорах (2GHz) -- 20 Mb/s. Это неплохо соотносится
>> со скоростью современных дисков и media. Например, если *.rpm пакеты
>> с DVD читаются медленнее, чем 20 MB/s (чем процессор успевает их
>> распаковывать), то установка пойдёт несколько быстрее (за счёт того,
>> что при LZMA сжатии *.rpm пакеты занимают меньше места на DVD).
> Было бы интересно увидеть конкретные цифры установок в хэшере.
>
>>
>>> 2. Насколько этот режим совместим с rsync? Сам по себе LZMA не очень
>>> приспособлен к генерации блочных структур.
>>
>> Не знаю. В текущем виде gzdio тоже создаёт payload, который rsync
>> "не берёт". К тому же rsync синхронизирует только файлы с одинаковыми
>> названиями (точнее, у rsync есть опция -y, но я не уверен, что она
>> всегда хорошо работает).
> Дело в том, что gzip имеет код, который позволяет создавать архивы,
> построенные на фиксированных блоках (опция --rsyncable в утилите
> gzip), наверняка такую же настройку можно активировать и в библиотеке.
> С этими фиксированными блоками rsync очень хорошо справляется.
Вот, кстати, подробное исследование применимости rsync к репозитариям,
которое было выполнено на основе debian-подобного дистрибутива и alt
linux (Святослав Свиридов как раз тогда эти патчи для нашего apt/rsync
написал) пять лет назад.
http://lists.debian.org/debian-devel/2003/07/msg00462.html
--
/ Alexander Bokovoy
next prev parent reply other threads:[~2008-05-24 16:02 UTC|newest]
Thread overview: 33+ messages / expand[flat|nested] mbox.gz Atom feed top
2008-05-24 14:21 Alexey Tourbin
2008-05-24 14:20 ` Andrey Rahmatullin
2008-05-24 14:32 ` Alexey Tourbin
2008-05-25 0:01 ` Dmitry V. Levin
2008-05-24 14:51 ` Alexander Bokovoy
2008-05-24 15:35 ` Alexey Tourbin
2008-05-24 15:45 ` Alexey Tourbin
2008-05-24 15:53 ` Alexander Bokovoy
2008-05-24 15:58 ` Andrey Rahmatullin
2008-05-24 16:09 ` Alexander Bokovoy
2008-05-24 16:02 ` Alexander Bokovoy [this message]
2008-05-24 16:37 ` Alexey Tourbin
2008-05-24 17:55 ` Alexander Bokovoy
2008-05-24 19:16 ` Alexey Tourbin
2008-05-25 6:55 ` [devel] [JT] " Alexey Tourbin
2008-05-25 7:10 ` Alexander Bokovoy
2008-05-25 7:24 ` Alexey Tourbin
2008-05-25 7:27 ` Alexander Bokovoy
2008-05-25 0:11 ` [devel] rsync mirrors Dmitry V. Levin
2008-05-25 6:03 ` Alexey Tourbin
2008-05-25 7:54 ` [devel] gzip --rsyncable Alexey Tourbin
2008-05-25 8:08 ` Alexander Bokovoy
2008-05-25 8:18 ` Alexey Tourbin
2008-05-25 8:31 ` Alexander Bokovoy
2008-05-25 8:48 ` Alexander Bokovoy
2008-05-25 11:35 ` Alexey Tourbin
2008-05-25 18:30 ` [devel] rsync_roll Alexey Tourbin
2008-05-25 18:38 ` Alexander Bokovoy
2008-05-25 20:11 ` Alexander Myltsev
2008-05-26 7:15 ` Alexey Tourbin
2008-05-26 8:38 ` Alexey Tourbin
2008-05-25 8:09 ` [devel] gzip --rsyncable Led
2008-05-25 8:27 ` Alexey Tourbin
Reply instructions:
You may reply publicly to this message via plain-text email
using any one of the following methods:
* Save the following mbox file, import it into your mail client,
and reply-to-all from there: mbox
Avoid top-posting and favor interleaved quoting:
https://en.wikipedia.org/wiki/Posting_style#Interleaved_style
* Reply using the --to, --cc, and --in-reply-to
switches of git-send-email(1):
git send-email \
--in-reply-to=6062a6e60805240902y6890904i5f5e639bc7913602@mail.gmail.com \
--to=ab@altlinux.org \
--cc=devel@lists.altlinux.org \
/path/to/YOUR_REPLY
https://kernel.org/pub/software/scm/git/docs/git-send-email.html
* If your mail client supports setting the In-Reply-To header
via mailto: links, try the mailto: link
ALT Linux Team development discussions
This inbox may be cloned and mirrored by anyone:
git clone --mirror http://lore.altlinux.org/devel/0 devel/git/0.git
# If you have public-inbox 1.1+ installed, you may
# initialize and index your mirror using the following commands:
public-inbox-init -V2 devel devel/ http://lore.altlinux.org/devel \
devel@altlinux.org devel@altlinux.ru devel@lists.altlinux.org devel@lists.altlinux.ru devel@linux.iplabs.ru mandrake-russian@linuxteam.iplabs.ru sisyphus@linuxteam.iplabs.ru
public-inbox-index devel
Example config snippet for mirrors.
Newsgroup available over NNTP:
nntp://lore.altlinux.org/org.altlinux.lists.devel
AGPL code for this site: git clone https://public-inbox.org/public-inbox.git