ALT Linux Team development discussions
 help / color / mirror / Atom feed
From: Michael Shigorin <mike@altlinux.org>
To: devel@lists.altlinux.org
Subject: [devel] не все пакеты одинаково собираются (was: I: texlive 2016 is going to come)
Date: Mon, 18 Dec 2017 11:52:47 +0300
Message-ID: <20171218085247.GR3594@imap.altlinux.org> (raw)
In-Reply-To: <20171215114113.GB5191@altlinux.org>

On Fri, Dec 15, 2017 at 02:41:13PM +0300, Dmitry V. Levin wrote:
> > Потом новый libint стал собираться 8 часов,
> > причем там уже ничего не отрежешь.
> Значит, можно распараллелить.

...с nprocs=1, ага (речь же явно шла про git.alt).

Дим, тут действительно напрашивается минимум два варианта --
причём под обмолот "лёгких" и "тяжёлых" пакетов есть прямой
смысл вообще по-разному выбирать железо для сборочниц.

Лично меня вполне бы устроил для начала флажок "тяжёлый пакет",
выставляемый на git.alt административно и отправляющий пакет при
сборке на "тяжёлый" узел.  Заодно это позволило бы поднять
степень параллелизма при сборке "лёгких" пакетов даже на
имеющемся прямо сейчас оборудовании -- например, можно один
из узлов выделить в "тяжёлый", три остальных определить
"лёгкими".  Возможно, для "тяжёлых" разрешать и параллельную
сборку, хотя тогда ожидаемы поползновения насчёт границы.

А в дальнейшем можно поставить один быстрый (и дорогой) сервер
на обмолот в первую очередь "тяжёлых" заданий, остальные же
разгребать оптимальными по цене процессорами как при текущей
сборке в репозитории, так и при пересборках разного толка.

И в ещё более дальнейшем автоматизировать "развесовку" с учётом
реально потребляемых при сборке ресурсов, желательно с историей.

-- 
 ---- WBR, Michael Shigorin / http://altlinux.org
  ------ http://opennet.ru / http://anna-news.info


  reply	other threads:[~2017-12-18  8:52 UTC|newest]

Thread overview: 19+ messages / expand[flat|nested]  mbox.gz  Atom feed  top
2017-12-14 19:44 [devel] I: texlive 2016 is going to come Igor Vlasenko
2017-12-14 20:59 ` Dmitry V. Levin
2017-12-14 21:26   ` Igor Vlasenko
2017-12-14 21:36     ` Dmitry V. Levin
2017-12-14 23:17       ` Andrey Savchenko
2017-12-14 23:38         ` Dmitry V. Levin
2017-12-15  4:23           ` Denis Medvedev
2017-12-15  4:52             ` Anton Farygin
2017-12-15 11:32           ` Igor Vlasenko
2017-12-15 11:41             ` Dmitry V. Levin
2017-12-18  8:52               ` Michael Shigorin [this message]
2017-12-18 10:36                 ` [devel] не все пакеты одинаково собираются Denis Medvedev
2017-12-18 11:00                   ` Aleksei Nikiforov
2017-12-18 11:11                     ` Denis Medvedev
2017-12-18 12:06                       ` Sergey Bolshakov
2017-12-18 23:30                 ` Dmitry V. Levin
2017-12-15 11:14       ` [devel] I: texlive 2016 is going to come Igor Vlasenko
2017-12-15 21:05     ` Kirill Maslinsky
2017-12-19 15:16       ` Igor Vlasenko

Reply instructions:

You may reply publicly to this message via plain-text email
using any one of the following methods:

* Save the following mbox file, import it into your mail client,
  and reply-to-all from there: mbox

  Avoid top-posting and favor interleaved quoting:
  https://en.wikipedia.org/wiki/Posting_style#Interleaved_style

* Reply using the --to, --cc, and --in-reply-to
  switches of git-send-email(1):

  git send-email \
    --in-reply-to=20171218085247.GR3594@imap.altlinux.org \
    --to=mike@altlinux.org \
    --cc=devel@lists.altlinux.org \
    /path/to/YOUR_REPLY

  https://kernel.org/pub/software/scm/git/docs/git-send-email.html

* If your mail client supports setting the In-Reply-To header
  via mailto: links, try the mailto: link

ALT Linux Team development discussions

This inbox may be cloned and mirrored by anyone:

	git clone --mirror http://lore.altlinux.org/devel/0 devel/git/0.git

	# If you have public-inbox 1.1+ installed, you may
	# initialize and index your mirror using the following commands:
	public-inbox-init -V2 devel devel/ http://lore.altlinux.org/devel \
		devel@altlinux.org devel@altlinux.ru devel@lists.altlinux.org devel@lists.altlinux.ru devel@linux.iplabs.ru mandrake-russian@linuxteam.iplabs.ru sisyphus@linuxteam.iplabs.ru
	public-inbox-index devel

Example config snippet for mirrors.
Newsgroup available over NNTP:
	nntp://lore.altlinux.org/org.altlinux.lists.devel


AGPL code for this site: git clone https://public-inbox.org/public-inbox.git