ALT Linux Team development discussions
 help / color / mirror / Atom feed
From: Anton Farygin <rider@basealt.ru>
To: devel@lists.altlinux.org
Subject: Re: [devel] Time limit
Date: Thu, 18 Feb 2021 20:50:57 +0300
Message-ID: <36b7252b-b1be-b0d0-b91d-7265aa90fd37@basealt.ru> (raw)
In-Reply-To: <20210218113756.GA32487@altlinux.org>

On 18.02.2021 14:37, Dmitry V. Levin wrote:
> On Thu, Feb 18, 2021 at 09:44:14AM +0300, Anton Farygin wrote:
>> On 18.02.2021 02:22, Dmitry V. Levin wrote:
>>> Кстати, кто хочет решить задачу оптимального распределения пакетов по
>>> серверам во время тестовой пересборки пакетов?  Пусть вас не пугает,
>>> что эта задача в общем случае NP-полная.:)
>> а данные по ресурсам, использованным во время предыдущих сборок - где
>> лежат ?
> По времени сборки лежит в beehive/logs/$repo/$arch/latest/time.list
Это же только время сборки, оно интересно, конечно, но в расчётах по 
идее не должно сильно участвовать.
>
>> меня интересует память, диск, максимальное количество потоков и
>> затраченное время.
> Это отдельная подзадача - какие данные нужны, и как их собрать.
>
>
Т.е. - эта задача ещё не решена. Понятно.

память собирается как выше предложили через time, затраченное время 
известно.

с потоками сложнее всего, т.к. идеально хочется видеть top cpu usage а 
не average.
В идеальном случае было бы классно строить график по CPU usage, и это 
даже понятно как сделать. Но сборочницу придётся научить использовать 
cgroups2, с которых можно снимать эту информацию прямо во время сборки.

Что касается диска (а он же и память), то, на мой взгляд, от 
использования ramdisk надо отходить в сторону быстрых nvme/U2 SSD с 
большим ресурсом - найти SSD со скоростью записи в 3000 MB/s сейчас 
вообще не проблема. Тогда объём использованного диска для нас станет не 
очень критичным, да и памяти освободится много.





  reply	other threads:[~2021-02-18 17:50 UTC|newest]

Thread overview: 55+ messages / expand[flat|nested]  mbox.gz  Atom feed  top
2021-02-17 22:52 ` Dmitry V. Levin
2021-02-17 23:34     ` Andrey Savchenko
2021-02-17 22:55 ` Alexey Gladkov
2021-02-17 23:21     ` Alexey Gladkov
2021-02-18  5:52     ` Sergey Afonin
2021-02-17 23:22   ` Dmitry V. Levin
2021-02-17 23:43     ` Alexey Gladkov
2021-02-18  6:44     ` Anton Farygin
2021-02-18  6:56       ` Alexey V. Vissarionov
2021-02-18  7:02         ` Anton Farygin
2021-02-18  7:18           ` Alexey V. Vissarionov
2021-02-18  7:25             ` Anton Farygin
2021-02-18  7:41               ` Alexey V. Vissarionov
2021-02-18  7:43                 ` Anton Farygin
2021-02-18  7:47                   ` Alexey V. Vissarionov
2021-02-18  7:53                     ` Anton Farygin
2021-02-18 11:41               ` Dmitry V. Levin
2021-02-18  7:11       ` Vitaly Chikunov
2021-02-18 11:37       ` Dmitry V. Levin
2021-02-18 17:50         ` Anton Farygin [this message]
2021-02-18 21:52           ` Michael Shigorin
2021-02-18 22:00             ` Alexey V. Vissarionov
2021-02-19  7:11             ` Anton Farygin
2021-02-19 10:50               ` Michael Shigorin
2021-02-19 11:11                 ` Anton Farygin
2021-02-19 12:05                   ` Michael Shigorin
2021-02-19 12:23                     ` Anton Farygin
2021-02-21 18:23                       ` [devel] hsh --initroot: nvme vs ssd Anton Farygin
2021-02-21 18:38                         ` Vladimir D. Seleznev
2021-02-21 18:41                           ` Anton Farygin
2021-02-21 18:47                         ` Anton Farygin
2021-02-21 18:51                         ` Dmitry V. Levin
2021-02-21 19:41                           ` Anton Farygin
2021-02-21 20:27                             ` Anton Farygin
2021-02-19 12:29                 ` [devel] О пропускной способности устройств хранения (Re: Time limit) Alexey Sheplyakov
2021-02-19 13:50                   ` Anton V. Boyarshinov
2021-02-19 13:56                     ` Anton Farygin
2021-02-19 14:03                       ` Anton V. Boyarshinov
2021-02-22  8:54                     ` Alexey Sheplyakov
2021-02-24  7:51                       ` Anton V. Boyarshinov
2021-02-19  8:47           ` [devel] Time limit Anton V. Boyarshinov
2021-02-19  8:48             ` Anton Farygin
2021-02-19  9:39             ` Leonid Krivoshein
2021-02-19  9:57               ` Anton Farygin
2021-02-19 11:12                 ` Michael Shigorin
2021-02-19 11:26                   ` Anton Farygin
2021-02-19 11:28               ` Anton V. Boyarshinov
2021-02-19 11:36                 ` Anton Farygin
2021-02-19 11:43                   ` Anton V. Boyarshinov
2021-02-19 11:48                     ` Anton Farygin
2021-02-19 11:59                       ` Anton V. Boyarshinov
2021-02-19 12:01                         ` Anton Farygin
2021-02-19 11:45                   ` [devel] ssd for hasher Anton Farygin
2021-02-19 16:11     ` [devel] Time limit Alexey Gladkov
2021-02-19 16:18       ` Dmitry V. Levin

Reply instructions:

You may reply publicly to this message via plain-text email
using any one of the following methods:

* Save the following mbox file, import it into your mail client,
  and reply-to-all from there: mbox

  Avoid top-posting and favor interleaved quoting:
  https://en.wikipedia.org/wiki/Posting_style#Interleaved_style

* Reply using the --to, --cc, and --in-reply-to
  switches of git-send-email(1):

  git send-email \
    --in-reply-to=36b7252b-b1be-b0d0-b91d-7265aa90fd37@basealt.ru \
    --to=rider@basealt.ru \
    --cc=devel@lists.altlinux.org \
    /path/to/YOUR_REPLY

  https://kernel.org/pub/software/scm/git/docs/git-send-email.html

* If your mail client supports setting the In-Reply-To header
  via mailto: links, try the mailto: link

ALT Linux Team development discussions

This inbox may be cloned and mirrored by anyone:

	git clone --mirror http://lore.altlinux.org/devel/0 devel/git/0.git

	# If you have public-inbox 1.1+ installed, you may
	# initialize and index your mirror using the following commands:
	public-inbox-init -V2 devel devel/ http://lore.altlinux.org/devel \
		devel@altlinux.org devel@altlinux.ru devel@lists.altlinux.org devel@lists.altlinux.ru devel@linux.iplabs.ru mandrake-russian@linuxteam.iplabs.ru sisyphus@linuxteam.iplabs.ru
	public-inbox-index devel

Example config snippet for mirrors.
Newsgroup available over NNTP:
	nntp://lore.altlinux.org/org.altlinux.lists.devel


AGPL code for this site: git clone https://public-inbox.org/public-inbox.git