[Sysadmins] bacula slow Dir inserting Attributes

[Sysadmins] bacula slow Dir inserting Attributes

[Anton Gorlov]

Знатоки бакулы и postgresql подскажите  как решить такую проблему - с
некоторых пор крайне долго стал выполняться
"Dir inserting Attributes"  после непосредственно бекапа. Более 5 часов  аж.
Бекапится конечно много данных, но так долго всё равно не было. База  с
тех пор конечно выросла, но не на столько.
Текущий размер базы 81 гиг. postgresql


Вырезка из конфигурации postgresql

max_connections = 100
shared_buffers = 128MB
temp_buffers = 512MB
work_mem = 64MB
maintenance_work_mem = 32MB
fsync = off
checkpoint_segments = 90


При этом особой нагрузки на дисковую подсистему в этот момент нет.LA 
1.4-2.2
В atop в 1 строке маячит postgres - bacula INSERT
При этом чтение с диска не превышает по данным iotop 5 M/s и запись
килобайты.

hdparm -tT /dev/mapper/main-pgsql

/dev/mapper/main-pgsql:
 Timing cached reads:   14626 MB in  2.00 seconds = 7321.24 MB/sec
 Timing buffered disk reads: 918 MB in  3.03 seconds = 302.72 MB/sec

Re: [Sysadmins] bacula slow Dir inserting Attributes

[Anton Gorlov]

Да в  запросах при этом много локов

postgres=# SELECT current_query from pg_stat_activity ;
                                                                 
current_query                                                                 

-------------------------------------------------------------------------------------------------------------------------------------------------
 <IDLE>
 autovacuum: VACUUM public.file
 BEGIN; LOCK TABLE Path IN SHARE ROW EXCLUSIVE MODE
 BEGIN; LOCK TABLE Path IN SHARE ROW EXCLUSIVE MODE
 INSERT INTO Path (Path) SELECT a.Path FROM (SELECT DISTINCT Path FROM
batch) AS a WHERE NOT EXISTS (SELECT Path FROM Path WHERE Path = a.Path)
 BEGIN; LOCK TABLE Path IN SHARE ROW EXCLUSIVE MODE
 SELECT current_query from pg_stat_activity ;
 BEGIN; LOCK TABLE Path IN SHARE ROW EXCLUSIVE MODE
 BEGIN; LOCK TABLE Path IN SHARE ROW EXCLUSIVE MODE
(9 строк)


20.10.2014 00:45, Anton Gorlov пишет:
> Знатоки бакулы и postgresql подскажите  как решить такую проблему - с
> некоторых пор крайне долго стал выполняться
> "Dir inserting Attributes"  после непосредственно бекапа. Более 5 часов  аж.
> Бекапится конечно много данных, но так долго всё равно не было. База  с
> тех пор конечно выросла, но не на столько.
> Текущий размер базы 81 гиг. postgresql
>
>
> Вырезка из конфигурации postgresql
>
> max_connections = 100
> shared_buffers = 128MB
> temp_buffers = 512MB
> work_mem = 64MB
> maintenance_work_mem = 32MB
> fsync = off
> checkpoint_segments = 90
>
>
> При этом особой нагрузки на дисковую подсистему в этот момент нет.LA 
> 1.4-2.2
> В atop в 1 строке маячит postgres - bacula INSERT
> При этом чтение с диска не превышает по данным iotop 5 M/s и запись
> килобайты.
>
> hdparm -tT /dev/mapper/main-pgsql
>
> /dev/mapper/main-pgsql:
>  Timing cached reads:   14626 MB in  2.00 seconds = 7321.24 MB/sec
>  Timing buffered disk reads: 918 MB in  3.03 seconds = 302.72 MB/sec
>
>
> _______________________________________________
> Sysadmins mailing list
> Sysadmins@lists.altlinux.org
> https://lists.altlinux.org/mailman/listinfo/sysadmins