[devel] Бранчевание

[devel] Бранчевание

[Aleksey Novodvorsky]

Коллеги, мы хотели бранчеваться на прошедших выходных, но неожиданная
кончина ftp-сервера поломала планы и заставила нас перенести начало
создания бранча p7 на среду 23 апреля, то есть завтра. Если вы
считаете  необходимым поместить в p7  пакеты, собранные в Сизиф после
8.00MSK 23 апреля и до открытия бранча, то пишите об этом ldv@.

Rgrds, Алексей

Re: [devel] Бранчевание

[Led]

On Tuesday 23 April 2013 18:50:32 Aleksey Novodvorsky wrote:
> Коллеги, мы хотели бранчеваться на прошедших выходных, но неожиданная
> кончина ftp-сервера поломала планы и заставила нас перенести начало
> создания бранча p7 на среду 23 апреля, то есть завтра. Если вы
> считаете  необходимым поместить в p7  пакеты, собранные в Сизиф после
> 8.00MSK 23 апреля и до открытия бранча, то пишите об этом ldv@.

Так в среду или 23 апреля?

-- 
Led

Re: [devel] Бранчевание

[Aleksey Novodvorsky]

23 апреля 2013 г., 20:05 пользователь Led <led@altlinux.ru> написал:
> On Tuesday 23 April 2013 18:50:32 Aleksey Novodvorsky wrote:
>> Коллеги, мы хотели бранчеваться на прошедших выходных, но неожиданная
>> кончина ftp-сервера поломала планы и заставила нас перенести начало
>> создания бранча p7 на среду 23 апреля, то есть завтра. Если вы
>> считаете  необходимым поместить в p7  пакеты, собранные в Сизиф после
>> 8.00MSK 23 апреля и до открытия бранча, то пишите об этом ldv@.
>
> Так в среду или 23 апреля?

Ой.
В среду.
24 апреля.

Rgrds, Алексей

Re: [devel] Бранчевание

[Aleksey Novodvorsky]

23 апреля 2013 г., 20:05 пользователь Led <led@altlinux.ru> написал:
> On Tuesday 23 April 2013 18:50:32 Aleksey Novodvorsky wrote:
>> Коллеги, мы хотели бранчеваться на прошедших выходных, но неожиданная
>> кончина ftp-сервера поломала планы и заставила нас перенести начало
>> создания бранча p7 на среду 23 апреля, то есть завтра. Если вы
>> считаете  необходимым поместить в p7  пакеты, собранные в Сизиф после
>> 8.00MSK 23 апреля и до открытия бранча, то пишите об этом ldv@.
>
> Так в среду или 23 апреля?

Ой.
В среду.
24 апреля.

Rgrds, Алексей

Re: [devel] Бранчевание

[REAL]

23.04.2013 23:08, Aleksey Novodvorsky пишет:
> Ой.
> В среду.
> 24 апреля.

А t7 когда ждать?

-- 

REAL aka Евгений Ростовцев, программист ЦНИТ КемГУ

Re: [devel] Бранчевание

[Aleksey Novodvorsky]

24 апреля 2013 г., 6:32 пользователь REAL <real@kemsu.ru> написал:
> 23.04.2013 23:08, Aleksey Novodvorsky пишет:
>
>> Ой.
>> В среду.
>> 24 апреля.
>
>
> А t7 когда ждать?

Это "инициативной группе" t7 надо согласовать с ldv@. Возможно, имеет
смысл подождать исправления первых шишек p7. А может и нет.

Rgrds, Алексей

>
> --
>
> REAL aka Евгений Ростовцев, программист ЦНИТ КемГУ
>
>
> _______________________________________________
> Devel mailing list
> Devel@lists.altlinux.org
> https://lists.altlinux.org/mailman/listinfo/devel

Re: [devel] Бранчевание

[Igor Zubkov]

2013/4/23 Aleksey Novodvorsky:
> Коллеги, мы хотели бранчеваться на прошедших выходных, но неожиданная
> кончина ftp-сервера поломала планы и заставила нас перенести начало
> создания бранча p7 на среду 23 апреля, то есть завтра. Если вы
> считаете  необходимым поместить в p7  пакеты, собранные в Сизиф после
> 8.00MSK 23 апреля и до открытия бранча, то пишите об этом ldv@.

Скажите когда начинать импорт p7 бранча на packages.altlinux.org. Так
же, нужно название что будет в урле. Т.е. /ru/t7/home, /ru/p7/home,
/ru/t7/srpms/glibc, /ru/p7/srpms/glibc cойдёт?

Так же, хочу сразу предупредить что если 7 будет такая же как  и 6
(т.е. будет p7/t7), то скорее всего придётся добавить памяти (256M)
для контейнера. Это надо будет что бы sphinx смог заиндексировать всё.

-- 
Igor Zubkov
http://hi.im/ice

Re: [devel] Бранчевание

[Michael Shigorin]

On Wed, Apr 24, 2013 at 07:46:51AM +0400, Aleksey Novodvorsky wrote:
> >> 24 апреля.
> > А t7 когда ждать?
> Это "инициативной группе" t7 надо согласовать с ldv@.

Кстати, желающие стать крайними всё так же приглашаются
к озвучиванию такового желания, чтоб избежать узких мест
вроде одного меня :)

По умолчанию предполагаю, что это мы с viy@.

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/

Re: [devel] Бранчевание

[Dmitry V. Levin]

[-- Attachment #1: Type: text/plain, Size: 978 bytes --]

On Wed, Apr 24, 2013 at 10:09:15AM +0300, Igor Zubkov wrote:
> 2013/4/23 Aleksey Novodvorsky:
> > Коллеги, мы хотели бранчеваться на прошедших выходных, но неожиданная
> > кончина ftp-сервера поломала планы и заставила нас перенести начало
> > создания бранча p7 на среду 23 апреля, то есть завтра. Если вы
> > считаете  необходимым поместить в p7  пакеты, собранные в Сизиф после
> > 8.00MSK 23 апреля и до открытия бранча, то пишите об этом ldv@.
> 
> Скажите когда начинать импорт p7 бранча на packages.altlinux.org.

Полагаю что уже можно начинать.

> Так же, нужно название что будет в урле. Т.е. /ru/t7/home, /ru/p7/home,
> /ru/t7/srpms/glibc, /ru/p7/srpms/glibc cойдёт?

А как было раньше, для соседних бранчей?

> Так же, хочу сразу предупредить что если 7 будет такая же как  и 6
> (т.е. будет p7/t7), то скорее всего придётся добавить памяти (256M)
> для контейнера. Это надо будет что бы sphinx смог заиндексировать всё.

Добавил.


-- 
ldv

[-- Attachment #2: Type: application/pgp-signature, Size: 198 bytes --]

Re: [devel] Бранчевание

[Igor Zubkov]

2013/4/26 Dmitry V. Levin:
> On Wed, Apr 24, 2013 at 10:09:15AM +0300, Igor Zubkov wrote:
>> 2013/4/23 Aleksey Novodvorsky:
>> > Коллеги, мы хотели бранчеваться на прошедших выходных, но неожиданная
>> > кончина ftp-сервера поломала планы и заставила нас перенести начало
>> > создания бранча p7 на среду 23 апреля, то есть завтра. Если вы
>> > считаете  необходимым поместить в p7  пакеты, собранные в Сизиф после
>> > 8.00MSK 23 апреля и до открытия бранча, то пишите об этом ldv@.
>>
>> Скажите когда начинать импорт p7 бранча на packages.altlinux.org.
>
> Полагаю что уже можно начинать.

Можно, но пока не получится.

>> Так же, нужно название что будет в урле. Т.е. /ru/t7/home, /ru/p7/home,
>> /ru/t7/srpms/glibc, /ru/p7/srpms/glibc cойдёт?
>
> А как было раньше, для соседних бранчей?

Предлагаю p7 в урлы и Platform7 в качестве названия.

>> Так же, хочу сразу предупредить что если 7 будет такая же как  и 6
>> (т.е. будет p7/t7), то скорее всего придётся добавить памяти (256M)
>> для контейнера. Это надо будет что бы sphinx смог заиндексировать всё.
>
> Добавил.

Ого. Теперь на нём пять гигабайт оперативной памяти. Это хорошо, но
проблему с утеканием памяти в руби я уже решил:
W, [2013-04-26T23:56:16.565213 #6066]  WARN -- :
#<Unicorn::HttpServer:0x002b291c22f658>: worker (pid: 6066) exceeds
memory limit (263962624 bytes > 200168812 bytes)

Жирные процессы перезапускаются автоматически и всё стало просто
отлично. За прошедший месяц было 20 минут даунтайма. И то из-за того
что закончилось место.

Так что, сейчас надо немного места для прометея. Примерно 12-13Gb. Из
них, 1-2 пойдут для posgtresql, а остальное под бекапы. Один бекап это
6 гигов. Бекапится раз в неделю и хранить последние 4 бекапа т.е. за
месяц. Сейчас последний бекап прометея датирован 19 января 2013.

Я знаю что там есть внешняя система бекапа, но мне эти бекапы нужно
здесь и сейчас. На случай умирания база или кривого деплоя который
испортит данные.

-- 
Igor Zubkov
http://hi.im/ice

Re: [devel] Бранчевание

[Igor Zubkov]

2013/4/27 Igor Zubkov:
> 2013/4/26 Dmitry V. Levin:
>> On Wed, Apr 24, 2013 at 10:09:15AM +0300, Igor Zubkov wrote:
>>> 2013/4/23 Aleksey Novodvorsky:
>>> > Коллеги, мы хотели бранчеваться на прошедших выходных, но неожиданная
>>> > кончина ftp-сервера поломала планы и заставила нас перенести начало
>>> > создания бранча p7 на среду 23 апреля, то есть завтра. Если вы
>>> > считаете  необходимым поместить в p7  пакеты, собранные в Сизиф после
>>> > 8.00MSK 23 апреля и до открытия бранча, то пишите об этом ldv@.
>>>
>>> Скажите когда начинать импорт p7 бранча на packages.altlinux.org.
>>
>> Полагаю что уже можно начинать.
>
> Можно, но пока не получится.

Все технические проблемы решены. Бекап данных сделан и запущен скрипт импорта:

[prometheusapp@prometheus current]$ bundle exec rake p7:update
2013-04-27 19:23:21 +0400: Update p7 stuff
2013-04-27 19:23:21 +0400: update *.src.rpm from p7 to database
2013-04-27 19:23:25 +0400: import 'sugar-flip-5-alt1_4.src.rpm'

Это займёт какое-то время. В это время остальные скрипты обновления
отключены. Я напишу отдельно когда всё заимпортится и прометей
перейдёт в штатный режим автопилота.

-- 
Igor Zubkov
http://hi.im/ice

Re: [devel] Бранчевание

[Igor Zubkov]

2013/4/29 Michael Shigorin <mike@osdn.org.ua>:
> On Sat, Apr 27, 2013 at 06:43:01PM +0300, Igor Zubkov wrote:
>> Это займёт какое-то время. В это время остальные скрипты
>> обновления отключены. Я напишу отдельно когда всё заимпортится
>> и прометей перейдёт в штатный режим автопилота.
>
> Если уже -- то что-то бы сделать, чтоб страничка
> http://packages.altlinux.org/en/p7/home
> не выглядела такой пустой...

Это попадание в кэш. Кэш очистится когда всё импортнётся. Всё это не
только *.src.rpm'ы. Это ещё и *.i586.rpm/*.x86_64.rpm. Сами *.src.rpm
уже в базе, ждём всё остальное.

irb(main):023:0> Branch.last.srpms.count
  Branch Load (7.7ms)  SELECT "branches".* FROM "branches" ORDER BY
"branches"."id" DESC LIMIT 1
   (8.1ms)  SELECT COUNT(*) FROM "srpms" WHERE "srpms"."branch_id" = 10
=> 14083
irb(main):024:0> Branch.last.packages.count
  Branch Load (0.7ms)  SELECT "branches".* FROM "branches" ORDER BY
"branches"."id" DESC LIMIT 1
   (3.4ms)  SELECT COUNT(*) FROM "packages" WHERE "packages"."branch_id" = 10
=> 965
irb(main):025:0>

Пока только 965 бинарных пакетов импортнулось.

Я напишу когда всё будет готово.

-- 
Igor Zubkov
http://hi.im/ice

Re: [devel] Бранчевание

[Igor Zubkov]

2013/4/29 Igor Zubkov:
> Я напишу когда всё будет готово.

Готово. Бранч p7 в базе. Скрипты обновления включены. Всё работает в
штатном режиме.

Чуть позже я напишу разбор полётов, почему так медленно и что сделано
(и ещё надо сделать) что бы было быстро.

-- 
Igor Zubkov
http://hi.im/ice