* [Sysadmins] копирование данных 1 сервера на другой.
@ 2013-08-17 19:55 Anton Gorlov
2013-08-19 12:46 ` Kharitonov A. Dmitry
2013-10-18 8:48 ` Anton Farygin
0 siblings, 2 replies; 7+ messages in thread
From: Anton Gorlov @ 2013-08-17 19:55 UTC (permalink / raw)
To: ALT Linux sysadmin discuss, ALT Linux Community
Есть 1 сервер с довольно большим количеством мелких файлов,к тому же
ещё и сильно фрагментированных.
Общий объём данных порядка 600гб. Задача перенести данные на другой сервер.
Пробовал tar+netcat - скорость от 18мбит до 120-200...
rsync даёт примерно теже данные только ещё порой и отваливается.
dd+netcat - порядка 300-600 мбит, но с dd в данном случае плохо то,что
он и фрагментированность сохранит.
А что насчёт этого с dump+restore+netcat
сдерёт ли оно так же фрагментированнсть fs или нет?
^ permalink raw reply [flat|nested] 7+ messages in thread
* Re: [Sysadmins] копирование данных 1 сервера на другой.
2013-08-17 19:55 [Sysadmins] копирование данных 1 сервера на другой Anton Gorlov
@ 2013-08-19 12:46 ` Kharitonov A. Dmitry
2013-08-19 13:40 ` Anton Gorlov
2013-10-18 8:48 ` Anton Farygin
1 sibling, 1 reply; 7+ messages in thread
From: Kharitonov A. Dmitry @ 2013-08-19 12:46 UTC (permalink / raw)
To: ALT Linux sysadmins' discussion
17.08.2013 23:55, Anton Gorlov пишет:
> Есть 1 сервер с довольно большим количеством мелких файлов,к тому же
> ещё и сильно фрагментированных.
> Общий объём данных порядка 600гб. Задача перенести данные на другой
> сервер.
> Пробовал tar+netcat - скорость от 18мбит до 120-200...
> rsync даёт примерно теже данные только ещё порой и отваливается.
> dd+netcat - порядка 300-600 мбит, но с dd в данном случае плохо то,что
> он и фрагментированность сохранит.
>
> А что насчёт этого с dump+restore+netcat
> сдерёт ли оно так же фрагментированнсть fs или нет?
rsync и большие объёмы перекидывал приходилось задавать --timeout= и
--contimeout=
^ permalink raw reply [flat|nested] 7+ messages in thread
* Re: [Sysadmins] копирование данных 1 сервера на другой.
2013-08-19 12:46 ` Kharitonov A. Dmitry
@ 2013-08-19 13:40 ` Anton Gorlov
2013-08-19 14:03 ` Andrey Liakhovets
0 siblings, 1 reply; 7+ messages in thread
From: Anton Gorlov @ 2013-08-19 13:40 UTC (permalink / raw)
To: ALT Linux sysadmins' discussion
19.08.2013 16:46, Kharitonov A. Dmitry пишет:
> rsync и большие объёмы перекидывал приходилось задавать --timeout= и
> --contimeout=
timeout задал фантастический.. не помогло.. да и ждать приходилось по >5
часов...
а нужно хотя бы в 3 уложиться.. Вот думаю попробовтаь dd и следом defrag
прогнать
^ permalink raw reply [flat|nested] 7+ messages in thread
* Re: [Sysadmins] копирование данных 1 сервера на другой.
2013-08-19 13:40 ` Anton Gorlov
@ 2013-08-19 14:03 ` Andrey Liakhovets
0 siblings, 0 replies; 7+ messages in thread
From: Andrey Liakhovets @ 2013-08-19 14:03 UTC (permalink / raw)
To: sysadmins
On Mon, 19 Aug 2013 17:40:42 +0400 Anton Gorlov wrote:
>19.08.2013 16:46, Kharitonov A. Dmitry пишет:
>> rsync и большие объёмы перекидывал приходилось задавать --timeout= и
>> --contimeout=
>timeout задал фантастический.. не помогло.. да и ждать приходилось по >5 часов...
>а нужно хотя бы в 3 уложиться.. Вот думаю попробовтаь dd и следом defrag прогнать
А скопировать большую часть данных заранее не получится?
Если только небольшая часть данных может измениться между предварительным
и окончательным копированием, и если при изменении данных файла меняется
его размер и/или timestamp, то rsync (без --checksum) будет очень хорош.
Андрей Ляховец
^ permalink raw reply [flat|nested] 7+ messages in thread
* Re: [Sysadmins] копирование данных 1 сервера на другой.
2013-08-17 19:55 [Sysadmins] копирование данных 1 сервера на другой Anton Gorlov
2013-08-19 12:46 ` Kharitonov A. Dmitry
@ 2013-10-18 8:48 ` Anton Farygin
2013-10-19 14:32 ` Anton Gorlov
1 sibling, 1 reply; 7+ messages in thread
From: Anton Farygin @ 2013-10-18 8:48 UTC (permalink / raw)
To: sysadmins
17.08.2013 23:55, Anton Gorlov пишет:
> Есть 1 сервер с довольно большим количеством мелких файлов,к тому же
> ещё и сильно фрагментированных.
> Общий объём данных порядка 600гб. Задача перенести данные на другой сервер.
> Пробовал tar+netcat - скорость от 18мбит до 120-200...
> rsync даёт примерно теже данные только ещё порой и отваливается.
> dd+netcat - порядка 300-600 мбит, но с dd в данном случае плохо то,что
> он и фрагментированность сохранит.
>
> А что насчёт этого с dump+restore+netcat
> сдерёт ли оно так же фрагментированнсть fs или нет?
ещё unison есть.
^ permalink raw reply [flat|nested] 7+ messages in thread
end of thread, other threads:[~2013-10-19 18:30 UTC | newest]
Thread overview: 7+ messages (download: mbox.gz / follow: Atom feed)
-- links below jump to the message on this page --
2013-08-17 19:55 [Sysadmins] копирование данных 1 сервера на другой Anton Gorlov
2013-08-19 12:46 ` Kharitonov A. Dmitry
2013-08-19 13:40 ` Anton Gorlov
2013-08-19 14:03 ` Andrey Liakhovets
2013-10-18 8:48 ` Anton Farygin
2013-10-19 14:32 ` Anton Gorlov
2013-10-19 18:30 ` Anton Gorlov
ALT Linux sysadmins discussion
This inbox may be cloned and mirrored by anyone:
git clone --mirror http://lore.altlinux.org/sysadmins/0 sysadmins/git/0.git
# If you have public-inbox 1.1+ installed, you may
# initialize and index your mirror using the following commands:
public-inbox-init -V2 sysadmins sysadmins/ http://lore.altlinux.org/sysadmins \
sysadmins@lists.altlinux.org sysadmins@lists.altlinux.ru sysadmins@lists.altlinux.com
public-inbox-index sysadmins
Example config snippet for mirrors.
Newsgroup available over NNTP:
nntp://lore.altlinux.org/org.altlinux.lists.sysadmins
AGPL code for this site: git clone https://public-inbox.org/public-inbox.git