ALT Linux Sisyphus discussions
 help / color / mirror / Atom feed
* [sisyphus] E: Sisyphus sync problem
@ 2011-11-07 23:06 Michael Pozhidaev
  2011-11-08  0:21 ` Michael Shigorin
                   ` (2 more replies)
  0 siblings, 3 replies; 27+ messages in thread
From: Michael Pozhidaev @ 2011-11-07 23:06 UTC (permalink / raw)
  To: sisyphus

Привет всем!

Какое-то время назад попытка синхронизации локального зеркала Сизифа
через rsync начала заканчиваться ошибкой всё чаще и чаще. Сообщение
следующего вида:

rsync: read error: Connection reset by peer (104)
rsync error: error in rsync protocol data stream (code 12) at io.c(760) [receiver=3.0.8]
rsync: connection unexpectedly closed (966097 bytes received so far) [generator]
rsync error: error in rsync protocol data stream (code 12) at io.c(601)
[generator=3.0.8]

К текущему моменту удачной синхронизации не получается добиться ни разу уже
несколько дней. Команда запуска rsync такая:

rsync -va --stats --delete-after \
rsync.altlinux.org::ALTLinux/Sisyphus/i586 /alt/Sisyphus/

ping -c 100 -s 512 rsync.altlinux.org показывает 0% потерь.

Наблюдает ещё кто-нибудь? Можно как-нибудь сделать rsync менее
чувствительным к такого рода ошибкам? Спасибо!

-- 
Michael Pozhidaev. Tomsk, Russia.
Russian info page: http://www.marigostra.ru/


^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-07 23:06 [sisyphus] E: Sisyphus sync problem Michael Pozhidaev
@ 2011-11-08  0:21 ` Michael Shigorin
  2011-11-08  5:48   ` Michael Pozhidaev
  2011-11-08  7:14   ` Michael Pozhidaev
  2011-11-08  7:56 ` Andrey Liakhovets
  2011-11-08 14:09 ` Pavel N. Solovyov
  2 siblings, 2 replies; 27+ messages in thread
From: Michael Shigorin @ 2011-11-08  0:21 UTC (permalink / raw)
  To: sisyphus

On Tue, Nov 08, 2011 at 06:06:50AM +0700, Michael Pozhidaev wrote:
> К текущему моменту удачной синхронизации не получается добиться
> ни разу уже несколько дней. Команда запуска rsync такая:
[...]
> Наблюдает ещё кто-нибудь? Можно как-нибудь сделать rsync менее
> чувствительным к такого рода ошибкам? Спасибо!

Попробуй синхронизироваться с mirror.yandex.ru/altlinux/Sisyphus/
и/или --exclude debuginfo.

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/


^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-08  0:21 ` Michael Shigorin
@ 2011-11-08  5:48   ` Michael Pozhidaev
  2011-11-08  7:14   ` Michael Pozhidaev
  1 sibling, 0 replies; 27+ messages in thread
From: Michael Pozhidaev @ 2011-11-08  5:48 UTC (permalink / raw)
  To: shigorin; +Cc: ALT Linux Sisyphus discussions

Hello, Michael Shigorin!

> Попробуй синхронизироваться с mirror.yandex.ru/altlinux/Sisyphus/
> и/или --exclude debuginfo.

Ага, с Яндекса что-то пошло, пока работает. Посмотрим, что получится!

-- 
Michael Pozhidaev. Tomsk, Russia.
Russian info page: http://www.marigostra.ru/


^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-08  0:21 ` Michael Shigorin
  2011-11-08  5:48   ` Michael Pozhidaev
@ 2011-11-08  7:14   ` Michael Pozhidaev
  2011-11-08  7:20     ` Michael Shigorin
  1 sibling, 1 reply; 27+ messages in thread
From: Michael Pozhidaev @ 2011-11-08  7:14 UTC (permalink / raw)
  To: shigorin; +Cc: ALT Linux Sisyphus discussions

Hello, Michael Shigorin!

> Попробуй синхронизироваться с mirror.yandex.ru/altlinux/Sisyphus/
> и/или --exclude debuginfo.

Не-а, на Яндексе всё равно обрывается с похожей ошибкой. ping -s 512 по-прежнему
100-процентный. Пропускать debuginfo пока не хочется. Firewall нет. Ещё
идей не подкинешь? 

-- 
Michael Pozhidaev. Tomsk, Russia.
Russian info page: http://www.marigostra.ru/


^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-08  7:14   ` Michael Pozhidaev
@ 2011-11-08  7:20     ` Michael Shigorin
  2011-11-08  8:16       ` Grigory Milev
  0 siblings, 1 reply; 27+ messages in thread
From: Michael Shigorin @ 2011-11-08  7:20 UTC (permalink / raw)
  To: ALT Linux Sisyphus discussions

On Tue, Nov 08, 2011 at 02:14:04PM +0700, Michael Pozhidaev wrote:
> > Попробуй синхронизироваться с mirror.yandex.ru/altlinux/Sisyphus/
> > и/или --exclude debuginfo.
> Не-а, на Яндексе всё равно обрывается с похожей ошибкой.

Тогда --timeout 120 добавь.

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/


^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-07 23:06 [sisyphus] E: Sisyphus sync problem Michael Pozhidaev
  2011-11-08  0:21 ` Michael Shigorin
@ 2011-11-08  7:56 ` Andrey Liakhovets
  2011-11-08 14:09 ` Pavel N. Solovyov
  2 siblings, 0 replies; 27+ messages in thread
From: Andrey Liakhovets @ 2011-11-08  7:56 UTC (permalink / raw)
  To: sisyphus

On Tue, 08 Nov 2011 06:06:50 +0700 Michael Pozhidaev wrote:
>Привет всем!
>
>Какое-то время назад попытка синхронизации локального зеркала Сизифа
>через rsync начала заканчиваться ошибкой всё чаще и чаще. Сообщение
>следующего вида:
>
>rsync: read error: Connection reset by peer (104)
>rsync error: error in rsync protocol data stream (code 12) at io.c(760) [receiver=3.0.8]
>rsync: connection unexpectedly closed (966097 bytes received so far) [generator]
>rsync error: error in rsync protocol data stream (code 12) at io.c(601)
>[generator=3.0.8]
>
>К текущему моменту удачной синхронизации не получается добиться ни разу уже
>несколько дней. Команда запуска rsync такая:
>
>rsync -va --stats --delete-after \
>rsync.altlinux.org::ALTLinux/Sisyphus/i586 /alt/Sisyphus/
>
>ping -c 100 -s 512 rsync.altlinux.org показывает 0% потерь.
>
>Наблюдает ещё кто-нибудь? Можно как-нибудь сделать rsync менее
>чувствительным к такого рода ошибкам? Спасибо!

Добавить --partial, и если хоть что-то получает, то зациклить rsync ?

Ещё, когда-то давно, был слабенький компьютер, и при синхронизации всего
Сизифа соединение обрывалось из-за очень долгого прохода по локальным
файлам. Тогда решилось путём синхронизации по частям (files/SRPMS, ...).

Андрей Ляховец


^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-08  7:20     ` Michael Shigorin
@ 2011-11-08  8:16       ` Grigory Milev
  2011-11-08  8:53         ` Michael Shigorin
  0 siblings, 1 reply; 27+ messages in thread
From: Grigory Milev @ 2011-11-08  8:16 UTC (permalink / raw)
  To: shigorin, ALT Linux Sisyphus discussions

[-- Attachment #1: Type: text/plain, Size: 342 bytes --]

Michael Shigorin пишет:
> --timeout 120
И чем он поможет? Просто прервет работу :(

-- 
+--------------------------------------------------------+
Grigory Milev	mailto:week@altlinux.ru
ALT Linux Team	http://www.altlinux.ru
+--------------------------------------------------------+
Life too beautiful and interesting. Don't worry, be happy.


[-- Attachment #2: OpenPGP digital signature --]
[-- Type: application/pgp-signature, Size: 254 bytes --]

^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-08  8:16       ` Grigory Milev
@ 2011-11-08  8:53         ` Michael Shigorin
  2011-11-08  9:02           ` Grigory Milev
                             ` (2 more replies)
  0 siblings, 3 replies; 27+ messages in thread
From: Michael Shigorin @ 2011-11-08  8:53 UTC (permalink / raw)
  To: ALT Linux Sisyphus discussions

On Tue, Nov 08, 2011 at 11:16:55AM +0300, Grigory Milev wrote:
> > --timeout 120
> И чем он поможет? Просто прервет работу :(

Хм, ты прав -- мне казалось, что там 60 секунд по умолчанию;
в мане: "The default is 0, which means no timeout."

Тогда идей пока нет, кроме как синхронизировать постадийно
с --exclude...

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/


^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-08  8:53         ` Michael Shigorin
@ 2011-11-08  9:02           ` Grigory Milev
  2011-11-08  9:07           ` Alexey Borisenkov
  2011-11-08  9:29           ` Michael Pozhidaev
  2 siblings, 0 replies; 27+ messages in thread
From: Grigory Milev @ 2011-11-08  9:02 UTC (permalink / raw)
  To: shigorin, ALT Linux Sisyphus discussions

[-- Attachment #1: Type: text/plain, Size: 935 bytes --]

Michael Shigorin пишет:
> On Tue, Nov 08, 2011 at 11:16:55AM +0300, Grigory Milev wrote:
>>> --timeout 120
>> И чем он поможет? Просто прервет работу :(
> Хм, ты прав -- мне казалось, что там 60 секунд по умолчанию;
> в мане: "The default is 0, which means no timeout."
>
> Тогда идей пока нет, кроме как синхронизировать постадийно
> с --exclude...
>
Я уже давно вот так синкаюсь, от данной проблемы спасает:

cat rsync-Sisyphus

#!/bin/sh
RESULT=1
while [ $RESULT -ne 0 ]; do
    rsync -Pva --timeout=0 --delete-before --partial --stats --delete-excluded --exclude
'*-debuginfo-*' rsync://rsync.altlinux.ru:873/ALTLinux/Sisyphus /var/ftp/pub/
    RESULT=$?
    sleep 1
done

-- 
+--------------------------------------------------------+
Grigory Milev	mailto:week@altlinux.ru
ALT Linux Team	http://www.altlinux.ru
+--------------------------------------------------------+
Life too beautiful and interesting. Don't worry, be happy.


[-- Attachment #2: OpenPGP digital signature --]
[-- Type: application/pgp-signature, Size: 254 bytes --]

^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-08  8:53         ` Michael Shigorin
  2011-11-08  9:02           ` Grigory Milev
@ 2011-11-08  9:07           ` Alexey Borisenkov
  2011-11-08  9:31             ` Michael Shigorin
  2011-11-08 11:01             ` Dmitry V. Levin
  2011-11-08  9:29           ` Michael Pozhidaev
  2 siblings, 2 replies; 27+ messages in thread
From: Alexey Borisenkov @ 2011-11-08  9:07 UTC (permalink / raw)
  To: sisyphus

08.11.2011 12:53, Michael Shigorin пишет:
> On Tue, Nov 08, 2011 at 11:16:55AM +0300, Grigory Milev wrote:
>>> --timeout 120
>> И чем он поможет? Просто прервет работу :(
>
> Хм, ты прав -- мне казалось, что там 60 секунд по умолчанию;
> в мане: "The default is 0, which means no timeout."

Там, возможно, и no timeout, но пока я *на стороне сервера* не прописал 
параметр timeout=1200, жизни с локальным зеркалом не было никакой, 
отваливался по таймауту :( А сейчас вроде нормально работает вот уж 
несколько месяцев.



^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-08  8:53         ` Michael Shigorin
  2011-11-08  9:02           ` Grigory Milev
  2011-11-08  9:07           ` Alexey Borisenkov
@ 2011-11-08  9:29           ` Michael Pozhidaev
  2 siblings, 0 replies; 27+ messages in thread
From: Michael Pozhidaev @ 2011-11-08  9:29 UTC (permalink / raw)
  To: shigorin; +Cc: ALT Linux Sisyphus discussions

Hello, Michael Shigorin!

>> И чем он поможет? Просто прервет работу :(
>
> Хм, ты прав -- мне казалось, что там 60 секунд по умолчанию;
> в мане: "The default is 0, which means no timeout."
>
> Тогда идей пока нет, кроме как синхронизировать постадийно
> с --exclude...

Сейчас и есть постадийно, т.е. каждая архитектура отдельно плюс
SRPMS. Разьве только что роль цикла я выполняю сам.

Ну а timeout да, не помогает, но и не должен был бы.

-- 
Michael Pozhidaev. Tomsk, Russia.
Russian info page: http://www.marigostra.ru/


^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-08  9:07           ` Alexey Borisenkov
@ 2011-11-08  9:31             ` Michael Shigorin
  2011-11-08  9:34               ` Alexey Borisenkov
  2011-11-08 10:52               ` Dmitry V. Levin
  2011-11-08 11:01             ` Dmitry V. Levin
  1 sibling, 2 replies; 27+ messages in thread
From: Michael Shigorin @ 2011-11-08  9:31 UTC (permalink / raw)
  To: sisyphus

On Tue, Nov 08, 2011 at 01:07:11PM +0400, Alexey Borisenkov wrote:
> Там, возможно, и no timeout, но пока я *на стороне сервера* не
> прописал параметр timeout=1200, жизни с локальным зеркалом не
> было никакой, отваливался по таймауту :( А сейчас вроде
> нормально работает вот уж несколько месяцев.

На стороне сервера ещё и rlimit_as для сервиса rsync
в конфигурации xinetd хорошо бы выставить в 64M
(не помню точно, ради какого именно дерева, но поднимал
до 128M)...

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/


^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-08  9:31             ` Michael Shigorin
@ 2011-11-08  9:34               ` Alexey Borisenkov
  2011-11-08 10:52               ` Dmitry V. Levin
  1 sibling, 0 replies; 27+ messages in thread
From: Alexey Borisenkov @ 2011-11-08  9:34 UTC (permalink / raw)
  To: sisyphus

08.11.2011 13:31, Michael Shigorin пишет:
> На стороне сервера ещё и rlimit_as для сервиса rsync
> в конфигурации xinetd хорошо бы выставить в 64M
> (не помню точно, ради какого именно дерева, но поднимал
> до 128M)...

Хм, спасибо. На проблему с нехваткой памяти я нарывался в другом месте. 
И что-то мыслей не нашлось в какой стороне крутить. При случае попробую.




^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-08  9:31             ` Michael Shigorin
  2011-11-08  9:34               ` Alexey Borisenkov
@ 2011-11-08 10:52               ` Dmitry V. Levin
  1 sibling, 0 replies; 27+ messages in thread
From: Dmitry V. Levin @ 2011-11-08 10:52 UTC (permalink / raw)
  To: ALT Linux Sisyphus mailing list

[-- Attachment #1: Type: text/plain, Size: 688 bytes --]

On Tue, Nov 08, 2011 at 11:31:13AM +0200, Michael Shigorin wrote:
> On Tue, Nov 08, 2011 at 01:07:11PM +0400, Alexey Borisenkov wrote:
> > Там, возможно, и no timeout, но пока я *на стороне сервера* не
> > прописал параметр timeout=1200, жизни с локальным зеркалом не
> > было никакой, отваливался по таймауту :( А сейчас вроде
> > нормально работает вот уж несколько месяцев.
> 
> На стороне сервера ещё и rlimit_as для сервиса rsync
> в конфигурации xinetd хорошо бы выставить в 64M
> (не помню точно, ради какого именно дерева, но поднимал
> до 128M)...

На rsync.altlinux когда-то пришлось поднять до 256М, потому что
некоторые весь ALTLinux/ зеркалируют.


-- 
ldv

[-- Attachment #2: Type: application/pgp-signature, Size: 198 bytes --]

^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-08  9:07           ` Alexey Borisenkov
  2011-11-08  9:31             ` Michael Shigorin
@ 2011-11-08 11:01             ` Dmitry V. Levin
  2011-11-08 11:08               ` Alexei Takaseev
  2011-11-08 11:08               ` Anton Farygin
  1 sibling, 2 replies; 27+ messages in thread
From: Dmitry V. Levin @ 2011-11-08 11:01 UTC (permalink / raw)
  To: ALT Linux Sisyphus mailing list

[-- Attachment #1: Type: text/plain, Size: 883 bytes --]

On Tue, Nov 08, 2011 at 01:07:11PM +0400, Alexey Borisenkov wrote:
> 08.11.2011 12:53, Michael Shigorin пишет:
> >On Tue, Nov 08, 2011 at 11:16:55AM +0300, Grigory Milev wrote:
> >>>--timeout 120
> >>И чем он поможет? Просто прервет работу :(
> >
> >Хм, ты прав -- мне казалось, что там 60 
> >секунд по умолчанию;
> >в мане: "The default is 0, which means no timeout."
> 
> Там, возможно, и no timeout, но пока я *на 
> стороне сервера* не прописал параметр 
> timeout=1200, жизни с локальным зеркалом не 
> было никакой, отваливался по таймауту :( А 
> сейчас вроде нормально работает вот уж 
> несколько месяцев.

На сервере rsync.altlinux timeout=600, но зеркалирующим это, судя по
логам, не помогает - возникает ошибка вида
rsync error: timeout in data send/receive (code 30) at io.c(137) [sender=3.0.9]
заведомо до истечения этих 600 секунд.


-- 
ldv

[-- Attachment #2: Type: application/pgp-signature, Size: 198 bytes --]

^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-08 11:01             ` Dmitry V. Levin
@ 2011-11-08 11:08               ` Alexei Takaseev
  2011-11-08 11:17                 ` Anton Farygin
  2011-11-08 11:08               ` Anton Farygin
  1 sibling, 1 reply; 27+ messages in thread
From: Alexei Takaseev @ 2011-11-08 11:08 UTC (permalink / raw)
  To: ALT Linux Sisyphus discussions



----- Исходное сообщение -----
> On Tue, Nov 08, 2011 at 01:07:11PM +0400, Alexey Borisenkov wrote:
> > 08.11.2011 12:53, Michael Shigorin пишет:
> > >On Tue, Nov 08, 2011 at 11:16:55AM +0300, Grigory Milev wrote:
> > >>>--timeout 120
> > >>И чем он поможет? Просто прервет работу :(
> > >
> > >Хм, ты прав -- мне казалось, что там 60
> > >секунд по умолчанию;
> > >в мане: "The default is 0, which means no timeout."
> > 
> > Там, возможно, и no timeout, но пока я *на
> > стороне сервера* не прописал параметр
> > timeout=1200, жизни с локальным зеркалом не
> > было никакой, отваливался по таймауту :( А
> > сейчас вроде нормально работает вот уж
> > несколько месяцев.
> 
> На сервере rsync.altlinux timeout=600, но зеркалирующим это, судя по
> логам, не помогает - возникает ошибка вида
> rsync error: timeout in data send/receive (code 30) at io.c(137)
> [sender=3.0.9]
> заведомо до истечения этих 600 секунд.

Все-таки, это похоже на локальную проблему зеркалирующих. У меня на скромной по ресурсам машине с весьма неторопливой дисковой подсистемой (и с которой идет активная раздача файлов по ftp) часто рвется синхронизация репозитария p6 на этапе удаления файлов на локальном диске (delete-after), повторных запуск rsync уже проходит нормально, и файлы доудаляются. на другой машине, с быстрыми дисками, ни описанного мной, ни автором трида не наблюдается даже для всего дерева Сизифа со всеми архитектурами.

^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-08 11:01             ` Dmitry V. Levin
  2011-11-08 11:08               ` Alexei Takaseev
@ 2011-11-08 11:08               ` Anton Farygin
  1 sibling, 0 replies; 27+ messages in thread
From: Anton Farygin @ 2011-11-08 11:08 UTC (permalink / raw)
  To: sisyphus

08.11.2011 15:01, Dmitry V. Levin пишет:
> On Tue, Nov 08, 2011 at 01:07:11PM +0400, Alexey Borisenkov wrote:
>> 08.11.2011 12:53, Michael Shigorin пишет:
>>> On Tue, Nov 08, 2011 at 11:16:55AM +0300, Grigory Milev wrote:
>>>>> --timeout 120
>>>> И чем он поможет? Просто прервет работу :(
>>>
>>> Хм, ты прав -- мне казалось, что там 60
>>> секунд по умолчанию;
>>> в мане: "The default is 0, which means no timeout."
>>
>> Там, возможно, и no timeout, но пока я *на
>> стороне сервера* не прописал параметр
>> timeout=1200, жизни с локальным зеркалом не
>> было никакой, отваливался по таймауту :( А
>> сейчас вроде нормально работает вот уж
>> несколько месяцев.
>
> На сервере rsync.altlinux timeout=600, но зеркалирующим это, судя по
> логам, не помогает - возникает ошибка вида
> rsync error: timeout in data send/receive (code 30) at io.c(137) [sender=3.0.9]
> заведомо до истечения этих 600 секунд.

В итоге мне помогает такое наколенное чудо-юдо, каждый может подправить 
на свой вкус:

#!/bin/sh

PIDFILE="/tmp/`echo $@|md5sum|cut -f1 -d' '`.pid"
if [ -f $PIDFILE ];then
     RSYNC_PID=`cat $PIDFILE`
     if [ -n "$RSYNC_PID" ];then
	ps --ppid `cat $PIDFILE` --no-heading -o pid|while read pid;do [ -n 
"$pid" ] &&  kill -9 $pid ;done
	[ -d "/proc/$RSYNC_PID" ] && exit 0
     fi
fi
echo $$ >$PIDFILE
while ! rsync "$@"; do sleep 5s; done
rm -f /tmp/$PIDFILE.pid



^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-08 11:08               ` Alexei Takaseev
@ 2011-11-08 11:17                 ` Anton Farygin
  0 siblings, 0 replies; 27+ messages in thread
From: Anton Farygin @ 2011-11-08 11:17 UTC (permalink / raw)
  To: sisyphus

08.11.2011 15:08, Alexei Takaseev пишет:
>
>
> ----- Исходное сообщение -----
>> On Tue, Nov 08, 2011 at 01:07:11PM +0400, Alexey Borisenkov wrote:
>>> 08.11.2011 12:53, Michael Shigorin пишет:
>>>> On Tue, Nov 08, 2011 at 11:16:55AM +0300, Grigory Milev wrote:
>>>>>> --timeout 120
>>>>> И чем он поможет? Просто прервет работу :(
>>>>
>>>> Хм, ты прав -- мне казалось, что там 60
>>>> секунд по умолчанию;
>>>> в мане: "The default is 0, which means no timeout."
>>>
>>> Там, возможно, и no timeout, но пока я *на
>>> стороне сервера* не прописал параметр
>>> timeout=1200, жизни с локальным зеркалом не
>>> было никакой, отваливался по таймауту :( А
>>> сейчас вроде нормально работает вот уж
>>> несколько месяцев.
>>
>> На сервере rsync.altlinux timeout=600, но зеркалирующим это, судя по
>> логам, не помогает - возникает ошибка вида
>> rsync error: timeout in data send/receive (code 30) at io.c(137)
>> [sender=3.0.9]
>> заведомо до истечения этих 600 секунд.
>
> Все-таки, это похоже на локальную проблему зеркалирующих. У меня на скромной по ресурсам машине с весьма неторопливой дисковой подсистемой (и с которой идет активная раздача файлов по ftp) часто рвется синхронизация репозитария p6 на этапе удаления файлов на локальном диске (delete-after), повторных запуск rsync уже проходит нормально, и файлы доудаляются. на другой машине, с быстрыми дисками, ни описанного мной, ни автором трида не наблюдается даже для всего дерева Сизифа со всеми архитектурами.
\

Может быть, вся проблема в том, что у меня работает заведомо больше 
одного процесса rsync ?





^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-07 23:06 [sisyphus] E: Sisyphus sync problem Michael Pozhidaev
  2011-11-08  0:21 ` Michael Shigorin
  2011-11-08  7:56 ` Andrey Liakhovets
@ 2011-11-08 14:09 ` Pavel N. Solovyov
  2011-11-18 16:33   ` Vyatcheslav Perevalov
  2 siblings, 1 reply; 27+ messages in thread
From: Pavel N. Solovyov @ 2011-11-08 14:09 UTC (permalink / raw)
  To: sisyphus

On Tue, 08 Nov 2011 06:06:50 +0700
Michael Pozhidaev wrote:

> К текущему моменту удачной синхронизации не получается добиться ни
> разу уже несколько дней. Команда запуска rsync такая:
> 
> rsync -va --stats --delete-after \
> rsync.altlinux.org::ALTLinux/Sisyphus/i586 /alt/Sisyphus/

	У меня синхронизируется с такой командой:
rsync -PavcI --delete-after --timeout=600
rsync://rsync.altlinux.org/ALTLinux/Sisyphus/files/i586 /mnt/sda8/pavel/Sisyphus


 --
	Успехов. Павел.
=====================
Jabber: pavel_solo@jabber.ru
ICQ: 33437660
=====================


^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-08 14:09 ` Pavel N. Solovyov
@ 2011-11-18 16:33   ` Vyatcheslav Perevalov
  2011-11-18 17:07     ` Pavel N. Solovyov
                       ` (2 more replies)
  0 siblings, 3 replies; 27+ messages in thread
From: Vyatcheslav Perevalov @ 2011-11-18 16:33 UTC (permalink / raw)
  To: sisyphus

В Tue, 8 Nov 2011 20:09:30 +0600
"Pavel N. Solovyov" <2182@k66.ru> пишет:

> On Tue, 08 Nov 2011 06:06:50 +0700
> Michael Pozhidaev wrote:
> 
> > К текущему моменту удачной синхронизации не получается добиться ни
> > разу уже несколько дней. Команда запуска rsync такая:
> > 
> > rsync -va --stats --delete-after \
> > rsync.altlinux.org::ALTLinux/Sisyphus/i586 /alt/Sisyphus/
> 
> 	У меня синхронизируется с такой командой:
> rsync -PavcI --delete-after --timeout=600
> rsync://rsync.altlinux.org/ALTLinux/Sisyphus/files/i586 /mnt/sda8/pavel/Sisyphus
> 
> 

Т. е. дистрибутивным sisyphus-mirror никто не пользуется (в котором
вылазит (до сих пор!) та же ошибка)?



^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-18 16:33   ` Vyatcheslav Perevalov
@ 2011-11-18 17:07     ` Pavel N. Solovyov
  2011-11-18 18:00     ` Dubrovskiy Viacheslav
  2011-11-21  8:43     ` Sergei Epiphanov
  2 siblings, 0 replies; 27+ messages in thread
From: Pavel N. Solovyov @ 2011-11-18 17:07 UTC (permalink / raw)
  To: sisyphus

On Fri, 18 Nov 2011 23:33:07 +0700
Vyatcheslav Perevalov wrote:

> > 	У меня синхронизируется с такой командой:
> > rsync -PavcI --delete-after --timeout=600
> > rsync://rsync.altlinux.org/ALTLinux/Sisyphus/files/i586 /mnt/sda8/pavel/Sisyphus
> > 
> >   
> 
> Т. е. дистрибутивным sisyphus-mirror никто не пользуется (в котором
> вылазит (до сих пор!) та же ошибка)?

	Всё собираюсь попробовать, но пока как-то получается быстрее из
истории команду выцепить, чем вспомнить, что хотел. :-) 
В выходные собираюсь попробовать, раз уж Вы напомнили


 --
	Успехов. Павел.
=====================
Jabber: pavel_solo@jabber.ru
ICQ: 33437660
=====================


^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-18 16:33   ` Vyatcheslav Perevalov
  2011-11-18 17:07     ` Pavel N. Solovyov
@ 2011-11-18 18:00     ` Dubrovskiy Viacheslav
  2011-11-18 18:07       ` Vyatcheslav Perevalov
  2011-11-21  8:43     ` Sergei Epiphanov
  2 siblings, 1 reply; 27+ messages in thread
From: Dubrovskiy Viacheslav @ 2011-11-18 18:00 UTC (permalink / raw)
  To: ALT Linux Sisyphus discussions

[-- Attachment #1: Type: text/plain, Size: 856 bytes --]

18.11.2011 11:33, Vyatcheslav Perevalov пишет:
> К текущему моменту удачной синхронизации не получается добиться ни
> разу уже несколько дней. Команда запуска rsync такая:
>
> rsync -va --stats --delete-after \
> rsync.altlinux.org::ALTLinux/Sisyphus/i586 /alt/Sisyphus/
>> 	У меня синхронизируется с такой командой:
>> rsync -PavcI --delete-after --timeout=600
>> rsync://rsync.altlinux.org/ALTLinux/Sisyphus/files/i586 /mnt/sda8/pavel/Sisyphus
>>
>>
> Т. е. дистрибутивным sisyphus-mirror никто не пользуется (в котором
> вылазит (до сих пор!) та же ошибка)?
Я пользуюсь. Не замечал проблем.

-- 
WBR,
Dubrovskiy Viacheslav


[-- Attachment #2: Криптографическая подпись S/MIME --]
[-- Type: application/pkcs7-signature, Size: 4903 bytes --]

^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-18 18:00     ` Dubrovskiy Viacheslav
@ 2011-11-18 18:07       ` Vyatcheslav Perevalov
  2011-11-18 18:11         ` Dubrovskiy Viacheslav
  0 siblings, 1 reply; 27+ messages in thread
From: Vyatcheslav Perevalov @ 2011-11-18 18:07 UTC (permalink / raw)
  To: sisyphus

В Fri, 18 Nov 2011 13:00:49 -0500
Dubrovskiy Viacheslav пишет:

> > Т. е. дистрибутивным sisyphus-mirror никто не пользуется (в котором
> > вылазит (до сих пор!) та же ошибка)?  
> Я пользуюсь. Не замечал проблем.

А с какого сервера синхронизируете?



^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-18 18:07       ` Vyatcheslav Perevalov
@ 2011-11-18 18:11         ` Dubrovskiy Viacheslav
  2011-11-18 18:30           ` Vyatcheslav Perevalov
  0 siblings, 1 reply; 27+ messages in thread
From: Dubrovskiy Viacheslav @ 2011-11-18 18:11 UTC (permalink / raw)
  To: ALT Linux Sisyphus discussions

[-- Attachment #1: Type: text/plain, Size: 424 bytes --]

18.11.2011 13:07, Vyatcheslav Perevalov пишет:
>
>>> Т. е. дистрибутивным sisyphus-mirror никто не пользуется (в котором
>>> вылазит (до сих пор!) та же ошибка)?  
>> Я пользуюсь. Не замечал проблем.
> А с какого сервера синхронизируете?
linux.kiev.ua
altlinux.ru

-- 
WBR,
Dubrovskiy Viacheslav


[-- Attachment #2: Криптографическая подпись S/MIME --]
[-- Type: application/pkcs7-signature, Size: 4903 bytes --]

^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-18 18:11         ` Dubrovskiy Viacheslav
@ 2011-11-18 18:30           ` Vyatcheslav Perevalov
  2011-11-18 18:44             ` Vyatcheslav Perevalov
  0 siblings, 1 reply; 27+ messages in thread
From: Vyatcheslav Perevalov @ 2011-11-18 18:30 UTC (permalink / raw)
  To: sisyphus

В Fri, 18 Nov 2011 13:11:19 -0500
Dubrovskiy Viacheslav <slava@tangramltd.com> пишет:

> 18.11.2011 13:07, Vyatcheslav Perevalov пишет:
> >
> >>> Т. е. дистрибутивным sisyphus-mirror никто не пользуется (в
> >>> котором вылазит (до сих пор!) та же ошибка)?  
> >> Я пользуюсь. Не замечал проблем.
> > А с какого сервера синхронизируете?
> linux.kiev.ua
> altlinux.ru
> 

Хм... с mirror.yandex.ru (внезапно!) синхронизация пошла.



^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-18 18:30           ` Vyatcheslav Perevalov
@ 2011-11-18 18:44             ` Vyatcheslav Perevalov
  0 siblings, 0 replies; 27+ messages in thread
From: Vyatcheslav Perevalov @ 2011-11-18 18:44 UTC (permalink / raw)
  To: sisyphus

В Sat, 19 Nov 2011 01:30:21 +0700
Vyatcheslav Perevalov <vip0@seversk.ru> пишет:

> Хм... с mirror.yandex.ru (внезапно!) синхронизация пошла.
Опять отвалилось с сообщением
[receiver] io timeout after 600 seconds -- exiting
rsync error: timeout in data send/receive (code 30) at io.c(140)
[receiver=3.0.9] rsync: connection unexpectedly closed (4775237 bytes
received so far) [generator] rsync error: error in rsync protocol data
stream (code 12) at io.c(605) [generator=3.0.9]



^ permalink raw reply	[flat|nested] 27+ messages in thread

* Re: [sisyphus] E: Sisyphus sync problem
  2011-11-18 16:33   ` Vyatcheslav Perevalov
  2011-11-18 17:07     ` Pavel N. Solovyov
  2011-11-18 18:00     ` Dubrovskiy Viacheslav
@ 2011-11-21  8:43     ` Sergei Epiphanov
  2 siblings, 0 replies; 27+ messages in thread
From: Sergei Epiphanov @ 2011-11-21  8:43 UTC (permalink / raw)
  To: ALT Linux Sisyphus discussions

On 18 ноября 2011 23:33 Vyatcheslav Perevalov wrote:
> Т. е. дистрибутивным sisyphus-mirror никто не пользуется (в котором
> вылазит (до сих пор!) та же ошибка)?

У меня свой скрипт для скачивания Сизифа через rsync. Проблем с таймаутами 
пока нет.

-- 
С уважением, Епифанов Сергей

^ permalink raw reply	[flat|nested] 27+ messages in thread

end of thread, other threads:[~2011-11-21  8:43 UTC | newest]

Thread overview: 27+ messages (download: mbox.gz / follow: Atom feed)
-- links below jump to the message on this page --
2011-11-07 23:06 [sisyphus] E: Sisyphus sync problem Michael Pozhidaev
2011-11-08  0:21 ` Michael Shigorin
2011-11-08  5:48   ` Michael Pozhidaev
2011-11-08  7:14   ` Michael Pozhidaev
2011-11-08  7:20     ` Michael Shigorin
2011-11-08  8:16       ` Grigory Milev
2011-11-08  8:53         ` Michael Shigorin
2011-11-08  9:02           ` Grigory Milev
2011-11-08  9:07           ` Alexey Borisenkov
2011-11-08  9:31             ` Michael Shigorin
2011-11-08  9:34               ` Alexey Borisenkov
2011-11-08 10:52               ` Dmitry V. Levin
2011-11-08 11:01             ` Dmitry V. Levin
2011-11-08 11:08               ` Alexei Takaseev
2011-11-08 11:17                 ` Anton Farygin
2011-11-08 11:08               ` Anton Farygin
2011-11-08  9:29           ` Michael Pozhidaev
2011-11-08  7:56 ` Andrey Liakhovets
2011-11-08 14:09 ` Pavel N. Solovyov
2011-11-18 16:33   ` Vyatcheslav Perevalov
2011-11-18 17:07     ` Pavel N. Solovyov
2011-11-18 18:00     ` Dubrovskiy Viacheslav
2011-11-18 18:07       ` Vyatcheslav Perevalov
2011-11-18 18:11         ` Dubrovskiy Viacheslav
2011-11-18 18:30           ` Vyatcheslav Perevalov
2011-11-18 18:44             ` Vyatcheslav Perevalov
2011-11-21  8:43     ` Sergei Epiphanov

ALT Linux Sisyphus discussions

This inbox may be cloned and mirrored by anyone:

	git clone --mirror http://lore.altlinux.org/sisyphus/0 sisyphus/git/0.git

	# If you have public-inbox 1.1+ installed, you may
	# initialize and index your mirror using the following commands:
	public-inbox-init -V2 sisyphus sisyphus/ http://lore.altlinux.org/sisyphus \
		sisyphus@altlinux.ru sisyphus@altlinux.org sisyphus@lists.altlinux.org sisyphus@lists.altlinux.ru sisyphus@lists.altlinux.com sisyphus@linuxteam.iplabs.ru sisyphus@list.linux-os.ru
	public-inbox-index sisyphus

Example config snippet for mirrors.
Newsgroup available over NNTP:
	nntp://lore.altlinux.org/org.altlinux.lists.sisyphus


AGPL code for this site: git clone https://public-inbox.org/public-inbox.git