[devel] I: arepo refactoring plans and prototypes

[devel] I: arepo refactoring plans and prototypes

[Igor Vlasenko]

Господа, 
надо дожимать arepo. 

arepo, как помню, задумывался как быстрый хак, 
пока у нас не появится полноценный биарч. 
Хак получился красивым и элегантным.
Народ начал пользоваться, годы шли,
полноценный биарч у нас так и не появился.
Значит, надо допиливать то, что у нас есть,
т.е. arepo.

Что, IMHO, больше всего надо переделать в старом arepo -
это его монолитный конфиг, в котором смешаны "мухи" -
локальные настройки путей и "котлеты" - пакеты репозитория.
Плюс, хотелось бы иметь возможность набирать arepo.conf
из кусочков: t6.skype.conf+t6.wine.conf+t6.GoogleEarth.conf ...

В общем, когда я случайно снес локальный t6-x86_32 вместе 
с ручной работы arepo.conf, то почувствовал, что проще захачить
arepo, чем мержить и восстанавливать старый arepo.conf вручную.

первым делом добавил реализацию include.
(у меня в git.alt:/people/viy/packages/arepo.git,
(в примере конфиги ищутся в . и в /etc/arepo.conf.d)
Вот что получилось (синтаксис еще прототип):

$ cat arepo.conf.local
name: t6
origin: /var/ftp/pub/Linux/ALT/t6/branch
flavor: classic
source: i586
target: x86_64
shadow: /var/ftp/pub/Linux/ALT/t6-local/branch/x86_32

include: >
    arepo.conf.t6.updates.etersoft.ru
    arepo.conf.t6.updates.etersoft.ru
#    arepo.conf.t6.downloads.mithraen.ru

# vim:set ft=yaml et ts=4 sw=4:
#-----------------------------------

Здесь arepo.conf.t6.updates.etersoft.ru
скачан как есть с updates.etersoft.ru.
Заметим, что в нем указан другой origin: 
/var/ftp/pub/ALTLinux/p6, но значение origin: 
из главного arepo.conf его затирает на правильное 
локальное значение.

Дважды
    arepo.conf.t6.updates.etersoft.ru
    arepo.conf.t6.updates.etersoft.ru
для тестирования, как пример, что include 
загружает файл только 1 раз.

Только что от Дениса пришел arepo.conf из 
downloads.mithraen.ru,
следующий шаг - чтобы эти два конфига корректно
смержились внутри arepo :)

В общем, господа, 
критикуйте подход к реализации,
высказывайте пожелания, предложения,
Хотелось бы обсудить, чего не хватает 
у текущего arepo и все-таки дожать.

И еще вопрос. Последнее время arepo сопровождает vitty@,
К кому обращаться по поводу включения кода. avm@, vitty@?

-- 

Dr. Igor Vlasenko
--------------------
Topology Department
Institute of Math
Kiev, Ukraine

Re: [devel] I: arepo refactoring plans and prototypes

[Igor Vlasenko]

On Thu, Feb 16, 2012 at 10:41:07PM +0200, Igor Vlasenko wrote:
> Только что от Дениса пришел arepo.conf из 
> downloads.mithraen.ru,
> следующий шаг - чтобы эти два конфига корректно
> смержились внутри arepo :)

UPD: 
Таки, похоже, arepo.conf от updates.etersoft.ru
и от downloads.mithraen.ru корректно смержились,
во всяком случае, процесс досборки пошел.


-- 

Dr. Igor Vlasenko
--------------------
Topology Department
Institute of Math
Kiev, Ukraine

Re: [devel] I: arepo refactoring plans and prototypes

[Igor Vlasenko]

On Thu, Feb 16, 2012 at 10:52:30PM +0200, Igor Vlasenko wrote:
> On Thu, Feb 16, 2012 at 10:41:07PM +0200, Igor Vlasenko wrote:
> > Только что от Дениса пришел arepo.conf из 
> > downloads.mithraen.ru,
> > следующий шаг - чтобы эти два конфига корректно
> > смержились внутри arepo :)
> 
> UPD: 
> Таки, похоже, arepo.conf от updates.etersoft.ru
> и от downloads.mithraen.ru корректно смержились,
> во всяком случае, процесс досборки пошел.
И успешно завершился.

Таким образом, можно рубить arepo.conf на кусочки
include: >
    arepo.conf.t6.default
    arepo.conf.t6.GoogleEarth
    ...


-- 

Dr. Igor Vlasenko
--------------------
Topology Department
Institute of Math
Kiev, Ukraine

Re: [devel] I: arepo refactoring plans and prototypes

[Vitaly Kuznetsov]

On Thu, 16 Feb 2012 22:41:07 +0200, Igor Vlasenko wrote:
> Господа,
> надо дожимать arepo.
>
> arepo, как помню, задумывался как быстрый хак,
> пока у нас не появится полноценный биарч.
> Хак получился красивым и элегантным.
> Народ начал пользоваться, годы шли,
> полноценный биарч у нас так и не появился.
> Значит, надо допиливать то, что у нас есть,
> т.е. arepo.
>
> Что, IMHO, больше всего надо переделать в старом arepo -
> это его монолитный конфиг, в котором смешаны "мухи" -
> локальные настройки путей и "котлеты" - пакеты репозитория.

Самая большая проблема arepo состоит в том, что он не поддаётся 
встраиванию в сборочницу (т.к. обрабатывает весь репозиторий за раз и 
результат не гарантирован). Нам нужен такой arepo, который будет 
автоматически перепаковывать пакет при сборке в сборочнице новой версии. 
Так мы навсегда избавимся от проблемы "отъезжающего"
x86_32.

> ....
>
> И еще вопрос. Последнее время arepo сопровождает vitty@,
> К кому обращаться по поводу включения кода. avm@, vitty@?

Текущую реализацию я по чуть-чуть сопровождаю, патчи принимаются.

Re: [devel] I: arepo refactoring plans and prototypes

[Igor Vlasenko]

On Fri, Feb 17, 2012 at 10:14:26AM +0400, Vitaly Kuznetsov wrote:
> Самая большая проблема arepo состоит в том, что он не поддаётся
> встраиванию в сборочницу (т.к. обрабатывает весь репозиторий за раз
> и результат не гарантирован). Нам нужен такой arepo, который будет
> автоматически перепаковывать пакет при сборке в сборочнице новой
> версии. Так мы навсегда избавимся от проблемы "отъезжающего"
> x86_32.

Это действительно большая проблема. Думаю,
нарезка конфигов - первый шаг в нужном направлении.
Ведь сборочница работает автоматически, а список 
packages: |-
приходится сопровождать вручную. Это не стыкуется 
друг с другом. Следующий шаг -- автоматизация получения
списка packages: для данного репо и заданного набора 
бинарников или rpm-пакетов с помощью утилит(ы).

> >И еще вопрос. Последнее время arepo сопровождает vitty@,
> >К кому обращаться по поводу включения кода. avm@, vitty@?
> 
> Текущую реализацию я по чуть-чуть сопровождаю, патчи принимаются.

Я хотел бы еще причесать свой код и подготовить
упаковку arepo с разделенным конфигом вида
# локальные настройки c include sisyphus-default.conf
%config(noreplace) /etc/arepo.conf
%dir /etc/arepo.conf.d
# системные настройки
%config /etc/arepo.conf.d/sisyphus-default.conf
%config /etc/arepo.conf.d/t6-default.conf
%config /etc/arepo.conf.d/p6-default.conf

Приняли бы такое?

-- 

Dr. Igor Vlasenko
--------------------
Topology Department
Institute of Math
Kiev, Ukraine

Re: [devel] I: arepo refactoring plans and prototypes

[Vitaly Kuznetsov]

On Fri, 17 Feb 2012 17:49:07 +0200, Igor Vlasenko wrote:
> Я хотел бы еще причесать свой код и подготовить
> упаковку arepo с разделенным конфигом вида
> # локальные настройки c include sisyphus-default.conf
> %config(noreplace) /etc/arepo.conf
> %dir /etc/arepo.conf.d
> # системные настройки
> %config /etc/arepo.conf.d/sisyphus-default.conf
> %config /etc/arepo.conf.d/t6-default.conf
> %config /etc/arepo.conf.d/p6-default.conf
>
> Приняли бы такое?

Да, стало бы удобней, чем сейчас.

Re: [devel] I: arepo refactoring plans and prototypes

[Sergey V Turchin]

[-- Attachment #1: Type: text/plain, Size: 572 bytes --]

On 16 февраля 2012 22:41:07 Igor Vlasenko wrote:

[...]
> высказывайте пожелания, предложения,
> Хотелось бы обсудить, чего не хватает
> у текущего arepo и все-таки дожать.
У текущего нельзя не указывать noarch репозиторий.
Так же хочется не потерять возможность указывать любые ix86 репозитории вместо 
i586

[...]

-- 
Regards, Sergey.       ALT Linux, http://www.altlinux.ru/

[-- Attachment #2: This is a digitally signed message part. --]
[-- Type: application/pgp-signature, Size: 198 bytes --]

Re: [devel] I: arepo refactoring plans and prototypes

[Igor Vlasenko]

On Fri, Feb 17, 2012 at 03:32:21PM +0400, Sergey V Turchin wrote:
> У текущего нельзя не указывать noarch репозиторий.

Я посмотрел, это важно из-за unmets.
Да и по логике, механизм зависимостей нужен -
удобнее, чтобы i586-wine сам вытянул свои зависимости,
а не ставить россыпью 40 пакетов.
А для этого надо полный репо.

> Так же хочется не потерять возможность указывать любые ix86 репозитории вместо
> i586

Т.е. не ломать ? 
Не собираюсь ;)

-- 

Dr. Igor Vlasenko
--------------------
Topology Department
Institute of Math
Kiev, Ukraine

Re: [devel] I: arepo refactoring plans and prototypes

[Sergey V Turchin]

[-- Attachment #1: Type: text/plain, Size: 1274 bytes --]

On 17 февраля 2012 16:48:15 Igor Vlasenko wrote:
> On Fri, Feb 17, 2012 at 03:32:21PM +0400, Sergey V Turchin wrote:
> > У текущего нельзя не указывать noarch репозиторий.
> 
> Я посмотрел, это важно из-за unmets.
> Да и по логике, механизм зависимостей нужен -
> удобнее, чтобы i586-wine сам вытянул свои зависимости,
> а не ставить россыпью 40 пакетов.
> А для этого надо полный репо.
Я имел ввиду, если нет unmets и не существует noarch репозитория.
gear такие репозитории делает и у меня самосборные, где лишние движения проще 
не делать для выделения noarch пакетов в отдельный репозиторий после сборки 
i686 и x86_64

> > Так же хочется не потерять возможность указывать любые ix86 репозитории
> > вместо i586
> Т.е. не ломать ?
> Не собираюсь ;)
Я на всякий :-)

-- 
Regards, Sergey.       ALT Linux, http://www.altlinux.ru/

[-- Attachment #2: This is a digitally signed message part. --]
[-- Type: application/pgp-signature, Size: 198 bytes --]

Re: [devel] I: arepo refactoring plans and prototypes

[Igor Vlasenko]

On Fri, Feb 17, 2012 at 07:09:17PM +0400, Sergey V Turchin wrote:
> Я имел ввиду, если нет unmets и не существует noarch репозитория.
> gear такие репозитории делает и у меня самосборные, где лишние движения проще 
> не делать для выделения noarch пакетов в отдельный репозиторий после сборки 
> i686 и x86_64

Вроде бы реализовал эту возможность. У меня в git,
ветка optional-noarch 
commit 7984b84
arepo.py: check whether noarch exists in origin

Проверьте, пожалуйста.


-- 

Dr. Igor Vlasenko
--------------------
Topology Department
Institute of Math
Kiev, Ukraine

Re: [devel] I: arepo refactoring plans and prototypes

[Sergey V Turchin]

On 16 февраля 2012 22:41:07 Igor Vlasenko wrote:

[...]
> В общем, господа,
> критикуйте подход к реализации,
> высказывайте пожелания, предложения,
Еще бы придумать что-нибудь для багов 24235 24236 24237

[...]

-- 
Regards, Sergey.       ALT Linux, http://www.altlinux.ru/

Re: [devel] I: arepo refactoring plans and prototypes

[Igor Vlasenko]

On Mon, Feb 27, 2012 at 03:07:07PM +0400, Sergey V Turchin wrote:
> Еще бы придумать что-нибудь для багов 24235 24236 24237

Ок, понял. 
Запланирую набег на arepo, чтобы посмотреть, как c ними.


-- 

Dr. Igor Vlasenko
--------------------
Topology Department
Institute of Math
Kiev, Ukraine

Re: [devel] I: arepo refactoring plans and prototypes

[Vitaly Kuznetsov]

On Mon, 27 Feb 2012 18:32:46 +0200, Igor Vlasenko wrote:
> On Mon, Feb 27, 2012 at 03:07:07PM +0400, Sergey V Turchin wrote:
>> Еще бы придумать что-нибудь для багов 24235 24236 24237
>
> Ок, понял.
> Запланирую набег на arepo, чтобы посмотреть, как c ними.

Я подумал, и мне кажется, что набег должен быть достаточно большой. Мне 
хочется всё переделать так, чтобы таки встроить в сборочницу. Я попробую 
завтра описать то, как я себе вижу arepo-2.0.

Re: [devel] I: arepo refactoring plans and prototypes

[Igor Vlasenko]

On Mon, Feb 27, 2012 at 08:43:05PM +0400, Vitaly Kuznetsov wrote:
> Я подумал, и мне кажется, что набег должен быть достаточно большой.
> Мне хочется всё переделать так, чтобы таки встроить в сборочницу. Я
> попробую завтра описать то, как я себе вижу arepo-2.0.

О, я как раз тоже пишу письмо о проблемах в arepo.
Я тогда добавлю по поводу встраивания в сборочницу.

-- 

Dr. Igor Vlasenko
--------------------
Topology Department
Institute of Math
Kiev, Ukraine