From: Alexey Tourbin <at@altlinux.ru>
To: ALT Linux Team development discussions <devel@lists.altlinux.org>
Subject: [devel] ccache(1) to prop things up
Date: Thu, 9 Feb 2012 10:14:28 +0400
Message-ID: <20120209061427.GA15463@altlinux.org> (raw)
In-Reply-To: <20120202003649.GA15652@altlinux.org>
On Thu, Feb 02, 2012 at 04:36:49AM +0400, Alexey Tourbin wrote:
> Но эта система была направлена на строгий учет изменений и контроль
> целостности репозитория. А реализовать ее не удалось, потому что это
> требовало сборочных ресурсов, которые оказались фирме альт линукс не по
> карману. Возможно, стратегической ошибкой было и то, что мы не хотели
> использовать ccache(1) по крайней мере для тестовой пересборки, а это
> могло бы значительно удешевить процесс.
Когда в 2002 году ab и sb разрабатывали sandman (прототип сборочной
системы), они предлагали, насколько я помню, монтировать внутрь чрута
глобальный раздел с ~/.ccache. На это есть два возражения. С точки
зрения безопасности это дает интерференцию между пакетами. С точки
зрения распределенной архитектуры это требует синхронизацию кеша.
Оба возражения снимаются, если для каждого пакета поддерживать
персональный "сикеш". Более того, поскольку сборка пакета идет обычно
идет в каталоге ~/RPM/BUILD/%name-%version, а при компиляции с флагом -g
учитываются пути к исходным файлам, то персональный сикеш можно сразу же
ограничить не только именем пакета, но и версией.
То есть можно было бы сделать файлы типа ccache/%name-%version.tar.gz,
и гонять их зад-назад вместе с src.rpm.
Если преследовать еще более строгую схему, которая исключает влияние
сикеша по крайней мере на "настоящие" пакеты, которые поступют в
репозиторий, то можно сделать следующее. Пакеты всегда собираются
через сикеш. Сборка "настоящего" пакета (внутри задания) просто
будет выполняться при пустом ~/.ccache (фактически в режиме write-only),
но результат сохраняется для последующих тестовых пересборок (в режиме
read-write).
Я проделал некоторые замеры. Повторная сборка elinks с сикешем идет
примерно на 20% быстрее, а повторная сборка apt - в 2 раза. То есть
наибольшая выгода, очевидно, будет на больших пакетах с Си++ кодом.
В первом приближении (пальцем в небо) сикеш может ускорить тестовую
пересборку репозитория в 2 раза.
next prev parent reply other threads:[~2012-02-09 6:14 UTC|newest]
Thread overview: 37+ messages / expand[flat|nested] mbox.gz Atom feed top
2011-12-19 20:01 [devel] I: imported libraries Igor Vlasenko
2011-12-21 8:05 ` thecrux
2011-12-21 9:28 ` Sergey Y. Afonin
2011-12-21 11:05 ` Paul Wolneykien
2011-12-21 10:16 ` Денис Смирнов
2011-12-21 11:16 ` Michael Shigorin
2011-12-21 11:03 ` Paul Wolneykien
2011-12-21 12:25 ` thecrux
2011-12-21 12:59 ` Paul Wolneykien
2011-12-21 18:37 ` Igor Vlasenko
2011-12-22 10:09 ` Paul Wolneykien
2011-12-22 10:14 ` Dmitriy Kruglikov
2011-12-22 20:56 ` Igor Vlasenko
2011-12-22 21:15 ` Paul Wolneykien
2011-12-23 6:44 ` thecrux
2011-12-23 10:18 ` [devel] I: overlays Paul Wolneykien
2011-12-23 12:48 ` thecrux
2011-12-23 15:31 ` Denis G. Samsonenko
2011-12-23 15:50 ` thecrux
2011-12-23 16:30 ` Denis G. Samsonenko
2011-12-26 11:47 ` Michael Shigorin
2011-12-23 19:16 ` [devel] [JT] I: overlay bantustans Igor Vlasenko
2011-12-23 20:07 ` Paul Wolneykien
2011-12-26 11:51 ` Michael Shigorin
2011-12-26 19:32 ` Igor Vlasenko
2011-12-27 23:50 ` [devel] I: imported libraries Vitaly Lipatov
2012-01-28 0:19 ` [devel] Q: personal package repositories: user PoV Dmitry V. Levin
2012-01-28 1:26 ` Led
2012-01-30 13:23 ` Денис Смирнов
2012-02-01 17:47 ` Alexey Tourbin
2012-02-01 18:57 ` Dmitry V. Levin
2012-02-02 0:36 ` Alexey Tourbin
2012-02-04 10:37 ` Michael Shigorin
2012-02-06 9:38 ` George V. Kouryachy
2012-02-09 6:14 ` Alexey Tourbin [this message]
2012-02-09 8:20 ` [devel] ccache(1) to prop things up Alexander Bokovoy
2011-12-21 18:25 ` [devel] I: imported libraries Igor Vlasenko
Reply instructions:
You may reply publicly to this message via plain-text email
using any one of the following methods:
* Save the following mbox file, import it into your mail client,
and reply-to-all from there: mbox
Avoid top-posting and favor interleaved quoting:
https://en.wikipedia.org/wiki/Posting_style#Interleaved_style
* Reply using the --to, --cc, and --in-reply-to
switches of git-send-email(1):
git send-email \
--in-reply-to=20120209061427.GA15463@altlinux.org \
--to=at@altlinux.ru \
--cc=devel@lists.altlinux.org \
/path/to/YOUR_REPLY
https://kernel.org/pub/software/scm/git/docs/git-send-email.html
* If your mail client supports setting the In-Reply-To header
via mailto: links, try the mailto: link
ALT Linux Team development discussions
This inbox may be cloned and mirrored by anyone:
git clone --mirror http://lore.altlinux.org/devel/0 devel/git/0.git
# If you have public-inbox 1.1+ installed, you may
# initialize and index your mirror using the following commands:
public-inbox-init -V2 devel devel/ http://lore.altlinux.org/devel \
devel@altlinux.org devel@altlinux.ru devel@lists.altlinux.org devel@lists.altlinux.ru devel@linux.iplabs.ru mandrake-russian@linuxteam.iplabs.ru sisyphus@linuxteam.iplabs.ru
public-inbox-index devel
Example config snippet for mirrors.
Newsgroup available over NNTP:
nntp://lore.altlinux.org/org.altlinux.lists.devel
AGPL code for this site: git clone https://public-inbox.org/public-inbox.git