From: Leonid Krivoshein <klark.devel@gmail.com> To: ALT Linux Team development discussions <devel@lists.altlinux.org> Subject: Re: [devel] Задачи для сборочницы следующего поколения Date: Tue, 20 Feb 2018 03:03:55 +0300 Message-ID: <f0687224-00e2-c6f7-ebb8-ae053e3b0cbc@gmail.com> (raw) In-Reply-To: <20180216013323.GA10681@altlinux.org> Можно тут рядышком постоять? Иначе для чего ещё эта рассылка... 16.02.2018 04:33, Dmitry V. Levin пишет: > Предлагаю начинать разговор не с алгоритмов оптимизации сборочницы, > а с задач, которые мы хотим решать с помощью сборочной системы > следующего поколения. > > ... > > Одна из задач, которую мы хотели решать ещё 9 лет назад - оперативно > выявлять регрессии собираемости/устанавливаемости пакетов репозитория > и на этом основании (полу)автоматически принимать решения об окончательном > коммите транзакций. Правильно понимаю, что полуавтоматическое принятие решения позволяет, в числе прочего, условно модератору репозитория откатывать мержи вручную? Если да, то какова (обычно) судьба всех последующих мержей, следующих за выкинутым(и)? > Мы хотим не только автоматически выявлять анметы, порождаемые транзакцией, > но и... > Наша традиционная сборочная система обладает следующим полезным свойством: > каждое следующее состояние репозитория получается в результате применения > транзакции к предыдущему состоянию. > > Такой детерминизм позволяет воспроизводимо получать новое состояние > репозитория из старого путём последовательного применения транзакций. > Для разработчиков, госадминов и регуляторов большой интерес представляет репозиторий с исходниками (git, .src.rpm). Для большинства конечных пользователей куда важнее работоспособность производного -- бинарного репозитория. Очень хорошо, что сборочница позволяет автоматически выявлять и пресекать многие проблемы "на подлёте". Но мы же понимаем, что выявить все проблемы автоматически нельзя. И со всеми успешно прошедшими тестами, случается, возникают регрессии, больше проявляющиеся даже не в части сборки/установки, а уже в процессе эксплуатации. Конечно важно мерило, определяющее качество исходного репозитория, в целом, полученного в результате очередной (мега) транзакции. Но также важно иметь возможность отката отдельных изменений с автоматическим применением последующих изменений. Тогда фаза тестирования может отставать (то бишь не быть тормозящим фактором), но при необходимости, бить по мержу вдогонку. А все последующие (мега) транзакции в случае такого фейла могут быть объединены в ещё более крупную супер-(мега) транзакцию. > К чему привело бы применение нескольких транзакций одновременно? В общем > случае к тому, что результат применения отличался бы от результата > последовательного применения. Не лучше ли вместо этого (спекулятивно) > объединять множество транзакций, готовых к применению, в полноценные > мега-транзакции, обрабатываемые как обычные транзакции? Если одна обычная транзакция -- изменения репозитория в результате одобрения задания из одного и более исходных пакетов, то мега-транзакция -- это, если не весь репозиторий, то, по крайней мере, оба графа зависимостей с каждым из пакетов накопившихся к текущему моменту заданий (сборочными и установочными), верно? Мне кажется, если преодолеть зависимость мержа от предыдущего мержа не в ущерб воспроизводимой сборке, мы как раз-таки получим параллельную сборочницу нового поколения. Очерёдность безусловно важна. Но ведь если кому-то в очереди становится плохо, очередь от этого не аннулируется. Можно гонять сборочницу несколько раз в сутки по всем необходимым пакетам по мере их поступления, но публиковать только те состояния репозитория, при которых мерило показывает приемлемый результат. То есть мега-транзакция может допускать фейлы отдельных пакетов. Но такое состояние не публикуется, а учитывается на следующих кругах. -- Best regards, Leonid Krivoshein.
next prev parent reply other threads:[~2018-02-20 0:03 UTC|newest] Thread overview: 10+ messages / expand[flat|nested] mbox.gz Atom feed top 2018-02-15 22:33 [devel] Параллельная сборочница. Алгоритмы Igor Vlasenko 2018-02-16 1:33 ` [devel] Задачи для сборочницы следующего поколения (was: Параллельная сборочница. Алгоритмы.) Dmitry V. Levin 2018-02-16 10:20 ` Igor Vlasenko 2018-02-16 11:03 ` Igor Vlasenko 2018-02-16 14:40 ` Igor Vlasenko 2018-02-16 20:21 ` [devel] Задачи для сборочницы следующего поколения Leonid Krivoshein 2018-02-20 0:03 ` Leonid Krivoshein [this message] 2018-02-20 0:11 ` Dmitry V. Levin 2018-02-17 23:44 ` [devel] Параллельная сборочница. Алгоритмы Dmitry V. Levin 2018-02-19 15:18 ` Igor Vlasenko
Reply instructions: You may reply publicly to this message via plain-text email using any one of the following methods: * Save the following mbox file, import it into your mail client, and reply-to-all from there: mbox Avoid top-posting and favor interleaved quoting: https://en.wikipedia.org/wiki/Posting_style#Interleaved_style * Reply using the --to, --cc, and --in-reply-to switches of git-send-email(1): git send-email \ --in-reply-to=f0687224-00e2-c6f7-ebb8-ae053e3b0cbc@gmail.com \ --to=klark.devel@gmail.com \ --cc=devel@lists.altlinux.org \ /path/to/YOUR_REPLY https://kernel.org/pub/software/scm/git/docs/git-send-email.html * If your mail client supports setting the In-Reply-To header via mailto: links, try the mailto: link
ALT Linux Team development discussions This inbox may be cloned and mirrored by anyone: git clone --mirror http://lore.altlinux.org/devel/0 devel/git/0.git # If you have public-inbox 1.1+ installed, you may # initialize and index your mirror using the following commands: public-inbox-init -V2 devel devel/ http://lore.altlinux.org/devel \ devel@altlinux.org devel@altlinux.ru devel@lists.altlinux.org devel@lists.altlinux.ru devel@linux.iplabs.ru mandrake-russian@linuxteam.iplabs.ru sisyphus@linuxteam.iplabs.ru public-inbox-index devel Example config snippet for mirrors. Newsgroup available over NNTP: nntp://lore.altlinux.org/org.altlinux.lists.devel AGPL code for this site: git clone https://public-inbox.org/public-inbox.git