ALT Linux Team development discussions
 help / color / mirror / Atom feed
From: "Dmitry V. Levin" <ldv@altlinux.org>
To: ALT Devel discussion list <devel@lists.altlinux.org>
Subject: Re: [devel] не все пакеты одинаково собираются
Date: Tue, 19 Dec 2017 02:30:48 +0300
Message-ID: <20171218233048.GC26303@altlinux.org> (raw)
In-Reply-To: <20171218085247.GR3594@imap.altlinux.org>

[-- Attachment #1: Type: text/plain, Size: 1877 bytes --]

On Mon, Dec 18, 2017 at 11:52:47AM +0300, Michael Shigorin wrote:
> On Fri, Dec 15, 2017 at 02:41:13PM +0300, Dmitry V. Levin wrote:
> > > Потом новый libint стал собираться 8 часов,
> > > причем там уже ничего не отрежешь.
> > Значит, можно распараллелить.
> 
> ...с nprocs=1, ага (речь же явно шла про git.alt).

Ну давайте уберём nprocs=1, если мешает.

> Дим, тут действительно напрашивается минимум два варианта --
> причём под обмолот "лёгких" и "тяжёлых" пакетов есть прямой
> смысл вообще по-разному выбирать железо для сборочниц.

Почему?  Это *совершенно* не очевидно.
Поделись, если ты делал какие-то замеры на эту тему.

> Лично меня вполне бы устроил для начала флажок "тяжёлый пакет",
> выставляемый на git.alt административно и отправляющий пакет при
> сборке на "тяжёлый" узел.  Заодно это позволило бы поднять
> степень параллелизма при сборке "лёгких" пакетов даже на
> имеющемся прямо сейчас оборудовании -- например, можно один
> из узлов выделить в "тяжёлый", три остальных определить
> "лёгкими".  Возможно, для "тяжёлых" разрешать и параллельную
> сборку, хотя тогда ожидаемы поползновения насчёт границы.

Такие костыли никто не захочет реализовывать, насколько я понимаю.

> А в дальнейшем можно поставить один быстрый (и дорогой) сервер
> на обмолот в первую очередь "тяжёлых" заданий, остальные же
> разгребать оптимальными по цене процессорами как при текущей
> сборке в репозитории, так и при пересборках разного толка.

Да не нужен никакой быстрый и дорогой сервер, если даже самый тяжёлый
пакет, который есть в Сизифе (chromium), на совершенно бюджетных
2 * E5-2620v4 сейчас собирается с -j16 примерно за час.

> И в ещё более дальнейшем автоматизировать "развесовку" с учётом
> реально потребляемых при сборке ресурсов, желательно с историей.

Это подразумевается сразу, а не в дальнейшем.


-- 
ldv

[-- Attachment #2: signature.asc --]
[-- Type: application/pgp-signature, Size: 801 bytes --]

  parent reply	other threads:[~2017-12-18 23:30 UTC|newest]

Thread overview: 19+ messages / expand[flat|nested]  mbox.gz  Atom feed  top
2017-12-14 19:44 [devel] I: texlive 2016 is going to come Igor Vlasenko
2017-12-14 20:59 ` Dmitry V. Levin
2017-12-14 21:26   ` Igor Vlasenko
2017-12-14 21:36     ` Dmitry V. Levin
2017-12-14 23:17       ` Andrey Savchenko
2017-12-14 23:38         ` Dmitry V. Levin
2017-12-15  4:23           ` Denis Medvedev
2017-12-15  4:52             ` Anton Farygin
2017-12-15 11:32           ` Igor Vlasenko
2017-12-15 11:41             ` Dmitry V. Levin
2017-12-18  8:52               ` [devel] не все пакеты одинаково собираются (was: I: texlive 2016 is going to come) Michael Shigorin
2017-12-18 10:36                 ` [devel] не все пакеты одинаково собираются Denis Medvedev
2017-12-18 11:00                   ` Aleksei Nikiforov
2017-12-18 11:11                     ` Denis Medvedev
2017-12-18 12:06                       ` Sergey Bolshakov
2017-12-18 23:30                 ` Dmitry V. Levin [this message]
2017-12-15 11:14       ` [devel] I: texlive 2016 is going to come Igor Vlasenko
2017-12-15 21:05     ` Kirill Maslinsky
2017-12-19 15:16       ` Igor Vlasenko

Reply instructions:

You may reply publicly to this message via plain-text email
using any one of the following methods:

* Save the following mbox file, import it into your mail client,
  and reply-to-all from there: mbox

  Avoid top-posting and favor interleaved quoting:
  https://en.wikipedia.org/wiki/Posting_style#Interleaved_style

* Reply using the --to, --cc, and --in-reply-to
  switches of git-send-email(1):

  git send-email \
    --in-reply-to=20171218233048.GC26303@altlinux.org \
    --to=ldv@altlinux.org \
    --cc=devel@lists.altlinux.org \
    /path/to/YOUR_REPLY

  https://kernel.org/pub/software/scm/git/docs/git-send-email.html

* If your mail client supports setting the In-Reply-To header
  via mailto: links, try the mailto: link

ALT Linux Team development discussions

This inbox may be cloned and mirrored by anyone:

	git clone --mirror http://lore.altlinux.org/devel/0 devel/git/0.git

	# If you have public-inbox 1.1+ installed, you may
	# initialize and index your mirror using the following commands:
	public-inbox-init -V2 devel devel/ http://lore.altlinux.org/devel \
		devel@altlinux.org devel@altlinux.ru devel@lists.altlinux.org devel@lists.altlinux.ru devel@linux.iplabs.ru mandrake-russian@linuxteam.iplabs.ru sisyphus@linuxteam.iplabs.ru
	public-inbox-index devel

Example config snippet for mirrors.
Newsgroup available over NNTP:
	nntp://lore.altlinux.org/org.altlinux.lists.devel


AGPL code for this site: git clone https://public-inbox.org/public-inbox.git