[devel] Announce: cronbuild (полностью автоматическая сборка пакетов)

[devel] Announce: cronbuild (полностью автоматическая сборка пакетов)

[Igor Vlasenko]

Господа,

в свое время Евгений Ростовцев попросил меня написать скрипт,
который собирал бы по крону python-module-objects.inv каждые три дня. 
Скрипт был благополучно написан, и работает уже полгода.

Потом 

http://www.altlinux.org/Gear/cronbuild

Введение в cronbuild.

Некоторые пакеты по своей природе нуждаются в постоянном обновлении, при этом при обновлении у этих пакетов спек практически не меняется. К таким пакетам относятся различные базы - антивирусные, оборудования (foomatic-db, PCI IDs, мониторов, ...), cliparts, и т. д. Как правило, в версии/релизе таких пакетов присутствует timestamp. Система cronbuild предназначена для автоматизации сборки таких пакетов. Теперь майнтайнеру достаточно один раз настроить для пакета cronbuild и пакет будет автоматически собираться в Сизиф с заданной майнтайнером периодичностью, например, раз в неделю, до тех пор, пока сборка не сломается.

При этом пакеты собираются только тогда, когда это действительно нужно: если после обновления файлы исходников не изменились (согласно git diff <commit before update>), то сборка пакета будет пропущена, так как в ней нет необходимости. 

-- 

Dr. Igor Vlasenko
--------------------
Topology Department
Institute of Math
Kiev, Ukraine

Re: [devel] Announce: cronbuild (полностью автоматическая сборка пакетов)

[Igor Vlasenko]

On Sun, Jul 04, 2010 at 01:04:23AM +0300, Igor Vlasenko wrote:
> Господа,
> 
> в свое время Евгений Ростовцев попросил меня написать скрипт,
> который собирал бы по крону python-module-objects.inv каждые три дня. 
> Скрипт был благополучно написан, и работает уже полгода.
> 
> Потом 
(засыпаю, отправил недописанное письмо)
Евгений попросил написать еще один скрипт,
на что я ответил, что это не unix-way и надо
писать универсальный скрипт. (и тут же отложил дело в долгий ящик;
спасибо Евгению за терпение).
Заставила проснуться история с foomatic-db.
Это действительно безобразие, что этот пакет не 
обновлялся почти год. 
Я собираюсь поставить сборку этого пакета на cron
и решить проблему раз и навсегда.

У кого есть похожие пакеты
(которые чем чаще обновляются, тем лучше,
а обновлять их лень)

прошу ознакомиться с 
http://www.altlinux.org/Gear/cronbuild

> Введение в cronbuild.
> 
> Некоторые пакеты по своей природе нуждаются в постоянном обновлении, при этом при обновлении у этих пакетов спек практически не меняется. К таким пакетам относятся различные базы - антивирусные, оборудования (foomatic-db, PCI IDs, мониторов, ...), cliparts, и т. д. Как правило, в версии/релизе таких пакетов присутствует timestamp. Система cronbuild предназначена для автоматизации сборки таких пакетов. Теперь майнтайнеру достаточно один раз настроить для пакета cronbuild и пакет будет автоматически собираться в Сизиф с заданной майнтайнером периодичностью, например, раз в неделю, до тех пор, пока сборка не сломается.
> 
> При этом пакеты собираются только тогда, когда это действительно нужно: если после обновления файлы исходников не изменились (согласно git diff <commit before update>), то сборка пакета будет пропущена, так как в ней нет необходимости. 

-- 

Dr. Igor Vlasenko
--------------------
Topology Department
Institute of Math
Kiev, Ukraine

Re: [devel] Announce: cronbuild (полностью автоматическая сборка пакетов)

[Dmitry V. Levin]

[-- Attachment #1: Type: text/plain, Size: 907 bytes --]

On Sun, Jul 04, 2010 at 01:04:23AM +0300, Igor Vlasenko wrote:
> http://www.altlinux.org/Gear/cronbuild
> 
> Введение в cronbuild.

Вопрос по архитектуре сервера удалённой сборки, описанного в
http://www.altlinux.org/Gear/cronbuild#.D1.81.D0.B5.D1.80.D0.B2.D0.B5.D1.80_.D1.83.D0.B4.D0.B0.D0.BB.D0.B5.D0.BD.D0.BD.D0.BE.D0.B9_.D1.81.D0.B1.D0.BE.D1.80.D0.BA.D0.B8_.28cronbuild_repocop.altlinux.org.29

Насколько я понял из описания, .gear/cronbuild-update-source -- это
произвольный shell-скрипт (наверное даже произвольный исполняемый файл).
Этот исполняемый файл живёт в том коммите, из которого пакет был последний
раз собран в Сизиф, и gear-cronbuild запустит этот файл автоматически.

Насколько я понимаю, тем самым реализовано исполнение произвольного кода
на удалённом сервере со всеми вытекающими последствиями.
Просьба ещё раз перечитать раздел REQUIREMENTS в hasher(7).


-- 
ldv

[-- Attachment #2: Type: application/pgp-signature, Size: 198 bytes --]

Re: [devel] Announce: cronbuild (полностью автоматическая сборка пакетов)

[Igor Vlasenko]

On Tue, Jul 06, 2010 at 02:15:32AM +0400, Dmitry V. Levin wrote:
> On Sun, Jul 04, 2010 at 01:04:23AM +0300, Igor Vlasenko wrote:
> > http://www.altlinux.org/Gear/cronbuild
> > 
> > Введение в cronbuild.
> 
> Вопрос по архитектуре сервера удалённой сборки, описанного в
> http://www.altlinux.org/Gear/cronbuild#.D1.81.D0.B5.D1.80.D0.B2.D0.B5.D1.80_.D1.83.D0.B4.D0.B0.D0.BB.D0.B5.D0.BD.D0.BD.D0.BE.D0.B9_.D1.81.D0.B1.D0.BE.D1.80.D0.BA.D0.B8_.28cronbuild_repocop.altlinux.org.29
> 
> Насколько я понял из описания, .gear/cronbuild-update-source -- это
> произвольный shell-скрипт (наверное даже произвольный исполняемый файл).
> Этот исполняемый файл живёт в том коммите, из которого пакет был последний
> раз собран в Сизиф, и gear-cronbuild запустит этот файл автоматически.
> 
> Насколько я понимаю, тем самым реализовано исполнение произвольного кода
> на удалённом сервере со всеми вытекающими последствиями.

В настоящее время не реализовано - удаленный сервер,
как таковой, не развернут.

Пока я только выложил пакет с локальными утилитами.
Теперь вопрос, будут ли желающие пользоваться этим сервисом.
Будут желающие - будет сервис.

> Просьба ещё раз перечитать раздел REQUIREMENTS в hasher(7).

Ок, конечно. Для меня было важно описать, как это выглядит
для майнтайнера, который хочет поставить сборку своего пакета
на автомат.

То, как оно устроено на сервере - от пользователя скрыто,
детали реализации. Т.е. легко можно обновлять репозиторий
в созданном хешером чруте, затем запускать сборку в другом
chroot, а при желании можно извратиться
и производить обновление .git в том же chroot, в котором 
будет идти сборка.

Вопрос, будут ли пользователи
(отличные от меня и Евгения Ростовцева).
Без них -- "You ain't gonna need it".

-- 

Dr. Igor Vlasenko
--------------------
Topology Department
Institute of Math
Kiev, Ukraine