Re: [devel] Cron <prometheusapp@prometheus> /bin/bash -l -c 'cd /home/prometheusapp/current && RAILS_ENV=production bundle exec rake sisyphus:update p7:update p6:update t6:update p5:update 51:update 50:update 41:update 40:update gear:update'

Re: [devel] Cron <prometheusapp@prometheus> /bin/bash -l -c 'cd /home/prometheusapp/current && RAILS_ENV=production bundle exec rake sisyphus:update p7:update p6:update t6:update p5:update 51:update 50:update 41:update 40:update gear:update'

[Igor Zubkov]

On Wed, Oct 30, 2013 at 12:05 PM, Cron Daemon wrote:
> 2013-10-30 13:05:06 +0300: Update Sisyphus stuff
> 2013-10-30 13:05:06 +0300: update *.src.rpm from Sisyphus to database
> 2013-10-30 13:05:08 +0300: import 'kernel-image-led-vs-3.10.17-alt6.src.rpm'
> 2013-10-30 14:08:55 +0300: import 'kernel-modules-nvidia-led-vs-319.60-alt1.199185.6.src.rpm'
> Error with statement: UPDATE srpm_core SET sphinx_deleted = 1 WHERE id = 630720
> 2013-10-30 14:09:01 +0300: delete 'kernel-headers-led-vs-3.10.17-alt5.x86_64.rpm' from redis cache

<...>

> 2013-10-30 14:09:08 +0300: update *.i586.rpm/*.noarch.rpm/*.x86_64.rpm from Sisyphus to database
> 2013-10-30 14:09:08 +0300: import 'kernel-modules-oprofile-led-vs-3.10.17-alt6.i586.rpm'
> Error with statement: UPDATE srpm_core SET sphinx_deleted = 1 WHERE id = 630718
> 2013-10-30 14:09:10 +0300: import 'kernel-modules-kvm-led-vs-3.10.17-alt6.i586.rpm'
> Error with statement: UPDATE srpm_core SET sphinx_deleted = 1 WHERE id = 630718
> 2013-10-30 14:09:12 +0300: import 'kernel-modules-ipmi-led-vs-3.10.17-alt6.i586.rpm'
> Error with statement: UPDATE srpm_core SET sphinx_deleted = 1 WHERE id = 630718
> 2013-10-30 14:09:14 +0300: import 'kernel-modules-scsi-led-vs-3.10.17-alt6.i586.rpm'
> Error with statement: UPDATE srpm_core SET sphinx_deleted = 1 WHERE id = 630718
> 2013-10-30 14:09:16 +0300: import 'cups-ipptool-1.6.2-alt3.2.i586.rpm'

Может в этой рассылке найдутся люди которые использует sphinx в
production с относительно средними данными (около 500 мегабайт)?
Проблема в том что sphinx иногда начинает сыпать такими ошибками.

Может быть соединение с ним просто отваливается за час?

-- 
Igor Zubkov
http://hi.im/ice

Re: [devel] Cron <prometheusapp@prometheus> /bin/bash -l -c 'cd /home/prometheusapp/current && RAILS_ENV=production bundle exec rake sisyphus:update p7:update p6:update t6:update p5:update 51:update 50:update 41:update 40:update gear:update'

[Igor Zubkov]

2013/10/30 Igor Zubkov:
> On Wed, Oct 30, 2013 at 12:05 PM, Cron Daemon wrote:
>> 2013-10-30 13:05:06 +0300: Update Sisyphus stuff
>> 2013-10-30 13:05:06 +0300: update *.src.rpm from Sisyphus to database
>> 2013-10-30 13:05:08 +0300: import 'kernel-image-led-vs-3.10.17-alt6.src.rpm'
>> 2013-10-30 14:08:55 +0300: import 'kernel-modules-nvidia-led-vs-319.60-alt1.199185.6.src.rpm'
>> Error with statement: UPDATE srpm_core SET sphinx_deleted = 1 WHERE id = 630720
>> 2013-10-30 14:09:01 +0300: delete 'kernel-headers-led-vs-3.10.17-alt5.x86_64.rpm' from redis cache
>
> <...>
>
>> 2013-10-30 14:09:08 +0300: update *.i586.rpm/*.noarch.rpm/*.x86_64.rpm from Sisyphus to database
>> 2013-10-30 14:09:08 +0300: import 'kernel-modules-oprofile-led-vs-3.10.17-alt6.i586.rpm'
>> Error with statement: UPDATE srpm_core SET sphinx_deleted = 1 WHERE id = 630718
>> 2013-10-30 14:09:10 +0300: import 'kernel-modules-kvm-led-vs-3.10.17-alt6.i586.rpm'
>> Error with statement: UPDATE srpm_core SET sphinx_deleted = 1 WHERE id = 630718
>> 2013-10-30 14:09:12 +0300: import 'kernel-modules-ipmi-led-vs-3.10.17-alt6.i586.rpm'
>> Error with statement: UPDATE srpm_core SET sphinx_deleted = 1 WHERE id = 630718
>> 2013-10-30 14:09:14 +0300: import 'kernel-modules-scsi-led-vs-3.10.17-alt6.i586.rpm'
>> Error with statement: UPDATE srpm_core SET sphinx_deleted = 1 WHERE id = 630718
>> 2013-10-30 14:09:16 +0300: import 'cups-ipptool-1.6.2-alt3.2.i586.rpm'
>
> Может в этой рассылке найдутся люди которые использует sphinx в
> production с относительно средними данными (около 500 мегабайт)?
> Проблема в том что sphinx иногда начинает сыпать такими ошибками.
>
> Может быть соединение с ним просто отваливается за час?

Если что, данные я принудительно переиндексировал. Должно работать. Я
буду присматривать за логами лучше, надо поймать и зафиксить.

На будущее, уже скоро будет свежий prometheus2.0 на rails 4. С кучей
обновлений всего и вся. Свежие джемы и всё такое. Я планирую за одно
обновить и софт на сервере до Сизифа. Будет более свежее ruby и
sphinx. Sphinx 2.1.2 правда ещё надо собрать в Сизиф.

-- 
Igor Zubkov
http://hi.im/ice

Re: [devel] Cron <prometheusapp@prometheus> /bin/bash -l -c 'cd /home/prometheusapp/current && RAILS_ENV=production bundle exec rake sisyphus:update p7:update p6:update t6:update p5:update 51:update 50:update 41:update 40:update gear:update'

[Igor Zubkov]

2013/10/30 Igor Zubkov:
> Может быть соединение с ним просто отваливается за час?

Очень на это похоже. Пакеты типа kernel-image-led-* слишком большие и
в них слишком много патчей.

[root@prometheus ~]# ls -la
/ALT/Sisyphus/files/SRPMS/kernel-image-led-vs-3.10.18-alt7.src.rpm
-rw-r--r-- 4 271 271 77827541 ноя  8 12:40
/ALT/Sisyphus/files/SRPMS/kernel-image-led-vs-3.10.18-alt7.src.rpm
[root@prometheus ~]#

Так как патчей очень много, а сторадж сетевой, то это очень медленно.
На каждый патч он выкачивает пакет заново. (С пакетом chromium тоже
самое, только он ещё больше.) Надо сделать кеширование пакетов на
локальной файловой системе, должно стать быстрее. И как побочный
эффект, стабильнее.

-- 
Igor Zubkov
http://hi.im/ice

Re: [devel] Cron <prometheusapp@prometheus> <...>

[Michael Shigorin]

On Fri, Nov 08, 2013 at 01:14:49PM +0200, Igor Zubkov wrote:
> Пакеты типа kernel-image-led-* слишком большие и в них слишком
> много патчей.

Минуту тому подумал: надо бы led@ подыскать падавана для разборки
патчей и отправки в апстрим... :)

> Так как патчей очень много, а сторадж сетевой, то это очень медленно.
> На каждый патч он выкачивает пакет заново.

Ну кто ж так делает?

-- 
 ---- WBR, Michael Shigorin / http://altlinux.org
  ------ http://opennet.ru / http://anna-news.info