[Comm] Скорость копирования/переноса файлов на Ext3

[Comm] Скорость копирования/переноса файлов на Ext3

[Mike Shuvalov]

[-- Attachment #1: Type: text/plain, Size: 571 bytes --]

Добый вечер, с Новым годом и с наступающим Рождеством!

Давно замечал медленную скорость копирования/переноса файлов на Ext3, но вот 
дастало, решил спросить кто как барится. ALTLinux, обновленный до 4.1 / 
brunch. Пытаюсь копирваоть с Ext3 -> Ext3 - тормоза: скорость копивароания 
7-8 Мб/в секунду.Ext -> NTFS - примерно тоже самое. NTFS -> NTFS (под Видой 
ХР)- 60-70 Мб/с.
Разница чувствуется, не правда ли? И как с этим бороться? Или это заморочки 
Ext3 и ничего с этим не сделаешь?
Да, забыл сказать, файлы большие, по 1.5 - 2 Гига.
-- 
С уважением,
Михаил Шувалов

[-- Attachment #2: This is a digitally signed message part. --]
[-- Type: application/pgp-signature, Size: 197 bytes --]

Re: [Comm] Скорость копирования/переноса файлов на Ext3

[Motsyo Gennadi aka Drool]

Mike Shuvalov пишет:
> Добый вечер, с Новым годом и с наступающим Рождеством!
> 
> Давно замечал медленную скорость копирования/переноса файлов на Ext3, но вот 
> дастало, решил спросить кто как барится. ALTLinux, обновленный до 4.1 / 
> brunch. Пытаюсь копирваоть с Ext3 -> Ext3 - тормоза: скорость копивароания 
> 7-8 Мб/в секунду.Ext -> NTFS - примерно тоже самое. NTFS -> NTFS (под Видой 
> ХР)- 60-70 Мб/с.
> Разница чувствуется, не правда ли? И как с этим бороться? Или это заморочки 
> Ext3 и ничего с этим не сделаешь?
> Да, забыл сказать, файлы большие, по 1.5 - 2 Гига.

	А DMA не слетел? что говорит hdparm ?

Re: [Comm] Скорость копирования/переноса файлов на Ext3

[Motsyo Gennadi aka Drool]

Motsyo Gennadi aka Drool пишет:
>> Давно замечал медленную скорость копирования/переноса файлов на Ext3, 
>> но вот дастало, решил спросить кто как барится. ALTLinux, обновленный 
>> до 4.1 / brunch. Пытаюсь копирваоть с Ext3 -> Ext3 - тормоза: скорость 
>> копивароания 7-8 Мб/в секунду.Ext -> NTFS - примерно тоже самое. NTFS 
>> -> NTFS (под Видой ХР)- 60-70 Мб/с.
>> Разница чувствуется, не правда ли? И как с этим бороться? Или это 
>> заморочки Ext3 и ничего с этим не сделаешь?
>> Да, забыл сказать, файлы большие, по 1.5 - 2 Гига.
> 
>     А DMA не слетел? что говорит hdparm ?

	Только что попробовал на своей старенькой домашней машинке - с винта на 
винт (ext3) держится на уровне 16-17 метов/сек. Файл копировал 712 метровый.

Re: [Comm] Скорость копирования/переноса файлов на Ext3

[Mike Shuvalov]

[-- Attachment #1: Type: text/plain, Size: 410 bytes --]

В сообщении от Monday 05 January 2009 23:53:20 Motsyo Gennadi aka Drool 
написал(а):
> >
> >     А DMA не слетел? что говорит hdparm ?
>
> 	Только что попробовал на своей старенькой домашней машинке - с винта на
> винт (ext3) держится на уровне 16-17 метов/сек. Файл копировал 712
> метровый.

Ну машинка не такая уж и старая. Винты SATA-II. Может здесь где собоака 
порылась?

-- 
С уважением,
Михаил Шувалов

[-- Attachment #2: This is a digitally signed message part. --]
[-- Type: application/pgp-signature, Size: 197 bytes --]

Re: [Comm] Скорость копирования/переноса файлов на Ext3

[Mike Shuvalov]

[-- Attachment #1: Type: text/plain, Size: 1166 bytes --]

Здравствуйте!
В сообщении от Monday 05 January 2009 23:48:36 Motsyo Gennadi aka Drool 
написал(а):
> Mike Shuvalov пишет:
> > Добый вечер, с Новым годом и с наступающим Рождеством!
> >
> > Давно замечал медленную скорость копирования/переноса файлов на Ext3, но
> > вот дастало, решил спросить кто как барится. ALTLinux, обновленный до 4.1
> > / brunch. Пытаюсь копирваоть с Ext3 -> Ext3 - тормоза: скорость
> > копивароания 7-8 Мб/в секунду.Ext -> NTFS - примерно тоже самое. NTFS ->
> > NTFS (под Видой ХР)- 60-70 Мб/с.
> > Разница чувствуется, не правда ли? И как с этим бороться? Или это
> > заморочки Ext3 и ничего с этим не сделаешь?
> > Да, забыл сказать, файлы большие, по 1.5 - 2 Гига.
>
> 	А DMA не слетел? что говорит hdparm ?

[root@mikes-ws ~]# hdparm /dev/sda

/dev/sda:
 IO_support    =  0 (default 16-bit)
 readonly      =  0 (off)
 readahead     = 256 (on)
 geometry      = 30401/255/63, sectors = 488395055, start = 0

[root@mikes-ws ~]# hdparm /dev/sdb

/dev/sdb:
 IO_support    =  0 (default 16-bit)
 readonly      =  0 (off)
 readahead     = 256 (on)
 geometry      = 9729/255/63, sectors = 156301488, start = 0

-- 
С уважением,
Михаил Шувалов

[-- Attachment #2: This is a digitally signed message part. --]
[-- Type: application/pgp-signature, Size: 197 bytes --]

Re: [Comm] Скорость копирования/переноса файлов на Ext3

[Alexei V. Mezin]

Mike Shuvalov пишет:

> [root@mikes-ws ~]# hdparm /dev/sda
> 

Покажите лучше
hdparm -i /dev/sda | grep UDMA

Re: [Comm] Скорость копирования/переноса файлов на Ext3

[Mike Shuvalov]

[-- Attachment #1: Type: text/plain, Size: 226 bytes --]

В сообщении от Tuesday 06 January 2009 00:39:51 Alexei V. Mezin написал(а):
> hdparm -i /dev/sda | grep UDMA

# hdparm -i /dev/sda | grep UDMA
 UDMA modes: udma0 udma1 udma2 udma3 udma4 udma5


-- 
С уважением,
Михаил Шувалов

[-- Attachment #2: This is a digitally signed message part. --]
[-- Type: application/pgp-signature, Size: 197 bytes --]

Re: [Comm] Скорость копирования/переноса файлов на Ext3

[Alexey I. Froloff]

[-- Attachment #1: Type: text/plain, Size: 303 bytes --]

* Mike Shuvalov <shuvalov.mv@> [090106 19:14]:
> # hdparm -i /dev/sda | grep UDMA
>  UDMA modes: udma0 udma1 udma2 udma3 udma4 udma5
Выключен (слетел).  Что в dmesg есть интересного на эту тему?

P.S. hdparm -d1 /dev/sda, ждать когда опять слетит и смотреть в
dmesg.

-- 
Regards,
Sir Raorn.

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 189 bytes --]

Re: [Comm] Скорость копирования/переноса файлов на Ext3

[Mike Shuvalov]

[-- Attachment #1: Type: text/plain, Size: 998 bytes --]

В сообщении от Tuesday 06 January 2009 19:16:37 Alexey I. Froloff написал(а):
> * Mike Shuvalov <shuvalov.mv@> [090106 19:14]:
> > # hdparm -i /dev/sda | grep UDMA
> >  UDMA modes: udma0 udma1 udma2 udma3 udma4 udma5
>
> Выключен (слетел).  Что в dmesg есть интересного на эту тему?
>
# dmesg | grep UDMA
hda: UDMA/66 mode selected
ata1: SATA max UDMA/133 cmd 0xd000 ctl 0xd400 bmdma 0xe000 irq 19
ata2: SATA max UDMA/133 cmd 0xd800 ctl 0xdc00 bmdma 0xe008 irq 19
ata1.00: ATA-7: ST3250310AS, 3.AAA, max UDMA/133
ata1.01: ATA-7: SAMSUNG HD080HJ, ZH100-41, max UDMA7
ata1.00: configured for UDMA/133
ata1.01: configured for UDMA/133

> P.S. hdparm -d1 /dev/sda, ждать когда опять слетит и смотреть в
> dmesg.

# hdparm -d1 /dev/sda
/dev/sda:
 setting using_dma to 1 (on)
 HDIO_SET_DMA failed: Inappropriate ioctl for device

Вроде как говорит что нет смысла для данного устройства. И, к стати, вывод

hdparm -tT /dev/sdb

не изменился.

Как еще можно включить UDMA?

-- 
С уважением,
Михаил Шувалов

[-- Attachment #2: This is a digitally signed message part. --]
[-- Type: application/pgp-signature, Size: 197 bytes --]

Re: [Comm] Скорость копирования/переноса файлов на Ext3

[Alexey I. Froloff]

[-- Attachment #1: Type: text/plain, Size: 362 bytes --]

* Mike Shuvalov <shuvalov.mv@> [090106 19:49]:
> ata1: SATA max UDMA/133 cmd 0xd000 ctl 0xd400 bmdma 0xe000 irq 19
А что в dmesg про ata и sd в районе этой строчки?

> Вроде как говорит что нет смысла для данного устройства. И, к стати, вывод
Покажите полный вывод hdparm -iI /dev/sda

В биосе что на счёт винтов выставлено?

-- 
Regards,
Sir Raorn.

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 189 bytes --]

Re: [Comm] Скорость копирования/переноса файлов на Ext3

[Mike Shuvalov]

[-- Attachment #1: Type: text/plain, Size: 3325 bytes --]

Здравствуйте!
В сообщении от Tuesday 06 January 2009 19:57:40 Alexey I. Froloff написал(а):
> * Mike Shuvalov <shuvalov.mv@> [090106 19:49]:
> > ata1: SATA max UDMA/133 cmd 0xd000 ctl 0xd400 bmdma 0xe000 irq 19
>
> А что в dmesg про ata и sd в районе этой строчки?
>
> > Вроде как говорит что нет смысла для данного устройства. И, к стати,
> > вывод
>
> Покажите полный вывод hdparm -iI /dev/sda
>

/dev/sda:

 Model=ST3250310AS                             , FwRev=3.AAA   , SerialNo=            
5RY056JR
 Config={ HardSect NotMFM HdSw>15uSec Fixed DTR>10Mbs RotSpdTol>.5% }
 RawCHS=16383/16/63, TrkSize=0, SectSize=0, ECCbytes=4
 BuffType=unknown, BuffSize=8192kB, MaxMultSect=16, MultSect=?16?
 CurCHS=16383/16/63, CurSects=16514064, LBA=yes, LBAsects=268435455
 IORDY=on/off, tPIO={min:120,w/IORDY:120}, tDMA={min:120,rec:120}
 PIO modes:  pio0 pio1 pio2 pio3 pio4 
 DMA modes:  mdma0 mdma1 mdma2 
 UDMA modes: udma0 udma1 udma2 udma3 udma4 udma5 
 AdvancedPM=no WriteCache=enabled
 Drive conforms to: Unspecified:  ATA/ATAPI-1,2,3,4,5,6,7

 * signifies the current active mode


ATA device, with non-removable media
	Model Number:       ST3250310AS                             
	Serial Number:      5RY056JR
	Firmware Revision:  3.AAA   
Standards:
	Supported: 7 6 5 4 
	Likely used: 7
Configuration:
	Logical		max	current
	cylinders	16383	16383
	heads		16	16
	sectors/track	63	63
	--
	CHS current addressable sectors:   16514064
	LBA    user addressable sectors:  268435455
	LBA48  user addressable sectors:  488395055
	device size with M = 1024*1024:      238474 MBytes
	device size with M = 1000*1000:      250058 MBytes (250 GB)
Capabilities:
	LBA, IORDY(can be disabled)
	Queue depth: 32
	Standby timer values: spec'd by Standard, no device specific minimum
	R/W multiple sector transfer: Max = 16	Current = 16
	Recommended acoustic management value: 208, current value: 0
	DMA: mdma0 mdma1 mdma2 udma0 udma1 udma2 udma3 udma4 udma5 *udma6 
	     Cycle time: min=120ns recommended=120ns
	PIO: pio0 pio1 pio2 pio3 pio4 
	     Cycle time: no flow control=120ns  IORDY flow control=120ns
Commands/features:
	Enabled	Supported:
	   *	SMART feature set
	    	Security Mode feature set
	   *	Power Management feature set
	   *	Write cache
	   *	Look-ahead
	   *	Host Protected Area feature set
	   *	WRITE_BUFFER command
	   *	READ_BUFFER command
	   *	DOWNLOAD_MICROCODE
	    	SET_MAX security extension
	   *	48-bit Address feature set
	   *	Device Configuration Overlay feature set
	   *	Mandatory FLUSH_CACHE
	   *	FLUSH_CACHE_EXT
	   *	SMART error logging
	   *	SMART self-test
	   *	General Purpose Logging feature set
	   *	SATA-I signaling speed (1.5Gb/s)
	   *	SATA-II signaling speed (3.0Gb/s)
	   *	Native Command Queueing (NCQ)
	   *	Phy event counters
	    	Device-initiated interface power management
	   *	Software settings preservation
Security: 
	Master password revision code = 65534
		supported
	not	enabled
	not	locked
		frozen
	not	expired: security count
	not	supported: enhanced erase
Checksum: correct

> В биосе что на счёт винтов выставлено?

Первым делом туда заглянул, но там особо ничего не выставишь :( 
Автоопределение и все :( (либо чего-то недосмотрел)

-- 
С уважением,
Михаил Шувалов

[-- Attachment #2: This is a digitally signed message part. --]
[-- Type: application/pgp-signature, Size: 197 bytes --]

Re: [Comm] Скорость копирования/переноса файлов на Ext3

[Alexey I. Froloff]

[-- Attachment #1: Type: text/plain, Size: 472 bytes --]

* Mike Shuvalov <shuvalov.mv@> [090106 20:25]:
>  PIO modes:  pio0 pio1 pio2 pio3 pio4 
>  DMA modes:  mdma0 mdma1 mdma2 
>  UDMA modes: udma0 udma1 udma2 udma3 udma4 udma5 
...
> 	DMA: mdma0 mdma1 mdma2 udma0 udma1 udma2 udma3 udma4 udma5 *udma6 
> 	     Cycle time: min=120ns recommended=120ns
> 	PIO: pio0 pio1 pio2 pio3 pio4 
> 	     Cycle time: no flow control=120ns  IORDY flow control=120ns
В выводе -I видно включеный UDMA6.

-- 
Regards,
Sir Raorn.

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 189 bytes --]

Re: [Comm] Скорость копирования/переноса файлов на Ext3

[Mike Shuvalov]

[-- Attachment #1: Type: text/plain, Size: 690 bytes --]

В сообщении от Tuesday 06 January 2009 20:37:57 Alexey I. Froloff написал(а):
> * Mike Shuvalov <shuvalov.mv@> [090106 20:25]:
> >  PIO modes:  pio0 pio1 pio2 pio3 pio4
> >  DMA modes:  mdma0 mdma1 mdma2
> >  UDMA modes: udma0 udma1 udma2 udma3 udma4 udma5
>
> ...
>
> > 	DMA: mdma0 mdma1 mdma2 udma0 udma1 udma2 udma3 udma4 udma5 *udma6
> > 	     Cycle time: min=120ns recommended=120ns
> > 	PIO: pio0 pio1 pio2 pio3 pio4
> > 	     Cycle time: no flow control=120ns  IORDY flow control=120ns
>
> В выводе -I видно включеный UDMA6.

И как всетаки поднять скорость копирования/переноса файлов? потеря скорости 
относительно офтопика все таки значительная :(

-- 
С уважением,
Михаил Шувалов

[-- Attachment #2: This is a digitally signed message part. --]
[-- Type: application/pgp-signature, Size: 197 bytes --]

Re: [Comm] Скорость копирования/переноса файлов на Ext3

[Michael Shigorin]

On Mon, Jan 05, 2009 at 11:15:47PM +0300, Mike Shuvalov wrote:
> Давно замечал медленную скорость копирования/переноса файлов на
> Ext3, но вот дастало, решил спросить кто как барится.

hdparm -tT /dev/sda покажите.

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/

Re: [Comm] Скорость копирования/переноса файлов на Ext3

[Mike Shuvalov]

[-- Attachment #1: Type: text/plain, Size: 799 bytes --]

Здравствуйте!
В сообщении от Tuesday 06 January 2009 00:51:11 Michael Shigorin написал(а):
> On Mon, Jan 05, 2009 at 11:15:47PM +0300, Mike Shuvalov wrote:
> > Давно замечал медленную скорость копирования/переноса файлов на
> > Ext3, но вот дастало, решил спросить кто как барится.
>
> hdparm -tT /dev/sda покажите.

# hdparm -tT /dev/sda
/dev/sda:
 Timing cached reads:   1594 MB in  2.00 seconds = 796.69 MB/sec
 Timing buffered disk reads:  258 MB in  3.00 seconds =  85.86 MB/sec

# hdparm -tT /dev/sdb
/dev/sdb:
 Timing cached reads:   1588 MB in  2.00 seconds = 794.07 MB/sec
 Timing buffered disk reads:  176 MB in  3.02 seconds =  58.32 MB/sec

Вот примерно эти 85 и 58 МБ/с и имеем при копировании в офтопике. Почему же в 
линуксе такая маленькая скорость?

-- 
С уважением,
Михаил Шувалов

[-- Attachment #2: This is a digitally signed message part. --]
[-- Type: application/pgp-signature, Size: 197 bytes --]

Re: [Comm] Скорость копирования/переноса файлов на Ext3

[Ivan Fedorov]

[-- Attachment #1: Type: text/plain, Size: 1022 bytes --]

Mike Shuvalov <shuvalov.mv-Re5JQEeQqe8AvxtiuMwx3w@public.gmane.org>
writes:

> Здравствуйте!
> В сообщении от Tuesday 06 January 2009 00:51:11 Michael Shigorin написал(а):
>> On Mon, Jan 05, 2009 at 11:15:47PM +0300, Mike Shuvalov wrote:
>> > Давно замечал медленную скорость копирования/переноса файлов на
>> > Ext3, но вот дастало, решил спросить кто как барится.
>>
>> hdparm -tT /dev/sda покажите.
>
> # hdparm -tT /dev/sda
> /dev/sda:
>  Timing buffered disk reads:  258 MB in  3.00 seconds =  85.86 MB/sec
> /dev/sdb:
>  Timing buffered disk reads:  176 MB in  3.02 seconds =  58.32 MB/sec
>
> Вот примерно эти 85 и 58 МБ/с и имеем при копировании в офтопике. Почему же в 
> линуксе такая маленькая скорость?

А что говорит:
cat /proc/mounts | grep /dev/sd[ab]
?

[-- Attachment #2: Type: application/pgp-signature, Size: 196 bytes --]

Re: [Comm] Скорость копирования/переноса файлов на Ext3

[Mike Shuvalov]

[-- Attachment #1: Type: text/plain, Size: 1621 bytes --]

В сообщении от Thursday 08 January 2009 01:44:57 Ivan Fedorov написал(а):
> cat /proc/mounts | grep /dev/sd[ab]

$ cat /proc/mounts | grep /dev/sda
/dev/sda2 /usr ext3 rw,errors=continue,data=ordered 0 0
/dev/sda1 /mnt/disk fuseblk rw,nosuid,nodev,user_id=0,group_id=0,allow_other,blksize=4096 0 0

на /dev/sda1 стоит NTFS

$ cat /proc/mounts | grep /dev/sdb
/dev/sdb5 /home ext3 rw,nosuid,errors=continue,data=ordered 0 0

$ cat /etc/fstab
proc                    /proc                   proc            nosuid,noexec,gid=proc          0 0
devpts          /dev/pts                devpts  nosuid,noexec,gid=tty,mode=620  0 0
tmpfs           /tmp                    tmpfs   nosuid                          0 0
UUID=4d242a33-2c41-4790-8574-5f44ef4f6c5d       /       ext3    defaults        1       1
UUID=2de6f694-aaaf-418e-8fea-0ad9e02047d9       /home   ext3    nosuid  1       2
/dev/sda2               /usr                    ext3    defaults        1       2
/dev/sda1               /mnt/disk               ntfs-3g umask=0,locale=ru_RU.utf8       1       0
UUID=84376477-283e-4808-83ed-49f86bee0ed3       swap    swap    defaults        0       0
/dev/hda                /media/cdrom    udf,iso9660     ro,noauto,user,utf8     0 0
#192.168.1.100:/var/ftp/pub     /mnt/ftp        nfs     rw,soft,intr,users      0       0
#192.168.1.100:/home/sharedoc /home/sharedoc    nfs     rw,soft,intr,users      0       0

Появилась бредовая мысль (я уже не знаю на грешить :( ). А смесь UUID и символьных имен разделов не может какм-то образом влиять на скорость?

-- 
С уважением,
Михаил Шувалов

[-- Attachment #2: This is a digitally signed message part. --]
[-- Type: application/pgp-signature, Size: 197 bytes --]