ALT Linux Team development discussions
 help / color / mirror / Atom feed
From: Igor Vlasenko <vlasenko@imath.kiev.ua>
To: ALT Linux Team development discussions <devel@lists.altlinux.org>
Subject: Re: [devel] Мухи и котлеты: основная ошибка дизайна сборочницы.
Date: Sun, 30 Aug 2020 20:41:32 +0300
Message-ID: <20200830174132.GA20845@dad.imath.kiev.ua> (raw)
In-Reply-To: <CAEdvWkQ+rv_Xo9XKtKQ3cBSDqsUPa2zybsbEpaXw3HEhiz=vDA@mail.gmail.com>

On Sun, Aug 30, 2020 at 05:16:52PM +0300, Alexey Shabalin wrote:
> Локальная сборочница, как отдельный продукт - это хорошо.
> Но я не понял как она влияет на ускорение централизованной сборочницы для
> сизифа и p8,p9,...

Действительно, в зачинателе темы, письме # Мухи и котлеты: ...
https://lists.altlinux.org/pipermail/devel/2020-August/211678.html
я писал о боттлнеке в алгоритме на серверной стороне
(пример с поварами и официантками).

Тему ускорения работы именно локальной сборочницы я упомянул
в письме # incoming/girar: проблема производительности.
https://lists.altlinux.org/pipermail/devel/2020-August/211601.html
но подробно не развивал.

У меня есть несколько нароботок на эту тему.
Одна из них связана с изменениями в hasher
для повторного использования hasher's 
initroot-only workdir, при условии, если сборка
происходит относительно неизменного репозитория
(скажем, дневное зеркало Сизифа).

Вторая описана на
https://www.altlinux.org/Girar/Parallel#VII._Алгоритмы_ускорения_сборки_Больших_Транзакций.

Есть и еще наметки, но без локальной сборочницы
как их пробовать и тестировать?

> Как можно доверять результатам какой-то локальной сборочницы безоговорочно?

Как раз локальная сборочница и позволяет не слепо доверять
тому, что творится на стороне сервера, а проверять
предложенные изменения самому.

Установить страндартный пакет локальной сборочницы, 
сформировать тестовый таск, запустить на сборку, 
провести бенчмарки времени, CPU, IO.

Посмотреть патчи кандидата на улучшение сборки.
Самому убедиться, не сжульничал ли, не отключил
ли проверки. Самому собрать и установить его
код, самому получить бенчмарки нового кода
и самому убедиться, есть ли в итоге ускорение
сборочницы.

-- 

I V


  parent reply	other threads:[~2020-08-30 17:41 UTC|newest]

Thread overview: 38+ messages / expand[flat|nested]  mbox.gz  Atom feed  top
2020-08-29 23:03 Igor Vlasenko
2020-08-29 23:17 ` Igor Vlasenko
2020-08-29 23:24 ` Dmitry V. Levin
2020-08-29 23:39   ` Igor Vlasenko
2020-08-30  8:49     ` Anton Farygin
2020-08-30  8:56       ` Igor Vlasenko
2020-08-30  9:18         ` Anton Farygin
2020-08-30  9:28           ` Igor Vlasenko
2020-08-30  9:40           ` Igor Vlasenko
2020-08-30 10:04               ` Igor Vlasenko
2020-08-30 14:23                   ` Alexey V. Vissarionov
2020-08-30 17:41                   ` Igor Vlasenko [this message]
2020-08-30 17:42                   ` Anton Farygin
2020-08-30 18:07                     ` Igor Vlasenko
2020-08-30 12:21                   ` Pavel Nakonechnyi
2020-08-31 22:09                   ` Konstantin Lepikhov
2020-12-19  9:30                 ` Alexey Tourbin
2020-08-30 12:18               ` Alexey V. Vissarionov
2020-08-30 14:44           ` Andrey Savchenko
2020-08-30 10:17       ` Alexey Gladkov
2020-08-30 12:59         ` Igor Vlasenko
2020-08-30 15:38           ` Alexey Gladkov
2020-08-30 15:46             ` Andrey Savchenko
2020-08-30 16:09               ` Alexey Gladkov
2020-08-30 16:25                 ` Michael Shigorin
2020-08-30 17:06                   ` Alexey Gladkov
2020-08-30 17:39                     ` [devel] параллельный install check (was: Мухи и котлеты: основная ошибка дизайна сборочницы) Michael Shigorin
2020-08-30 16:27                 ` [devel] Мухи и котлеты: основная ошибка дизайна сборочницы Andrey Savchenko
2020-08-30 17:23                   ` Alexey Gladkov
2020-08-31 11:46               ` Sergey V Turchin
2020-08-30 17:48             ` [devel] install check refactoring Anton Farygin
2020-08-30 18:01               ` Igor Vlasenko
2020-08-30 18:19               ` Alexey Gladkov
2021-10-12 18:55               ` Anton Farygin
2021-10-13 12:37                 ` Dmitry V. Levin
2020-08-31 11:46             ` [devel] Мухи и котлеты: основная ошибка дизайна сборочницы Sergey V Turchin
2020-08-30  8:24 ` Igor Vlasenko
2020-08-30 12:25   ` Alexey V. Vissarionov

Reply instructions:

You may reply publicly to this message via plain-text email
using any one of the following methods:

* Save the following mbox file, import it into your mail client,
  and reply-to-all from there: mbox

  Avoid top-posting and favor interleaved quoting:
  https://en.wikipedia.org/wiki/Posting_style#Interleaved_style

* Reply using the --to, --cc, and --in-reply-to
  switches of git-send-email(1):

  git send-email \
    --in-reply-to=20200830174132.GA20845@dad.imath.kiev.ua \
    --to=vlasenko@imath.kiev.ua \
    --cc=devel@lists.altlinux.org \
    /path/to/YOUR_REPLY

  https://kernel.org/pub/software/scm/git/docs/git-send-email.html

* If your mail client supports setting the In-Reply-To header
  via mailto: links, try the mailto: link

ALT Linux Team development discussions

This inbox may be cloned and mirrored by anyone:

	git clone --mirror http://lore.altlinux.org/devel/0 devel/git/0.git

	# If you have public-inbox 1.1+ installed, you may
	# initialize and index your mirror using the following commands:
	public-inbox-init -V2 devel devel/ http://lore.altlinux.org/devel \
		devel@altlinux.org devel@altlinux.ru devel@lists.altlinux.org devel@lists.altlinux.ru devel@linux.iplabs.ru mandrake-russian@linuxteam.iplabs.ru sisyphus@linuxteam.iplabs.ru
	public-inbox-index devel

Example config snippet for mirrors.
Newsgroup available over NNTP:
	nntp://lore.altlinux.org/org.altlinux.lists.devel


AGPL code for this site: git clone https://public-inbox.org/public-inbox.git