[Sysadmins] cacti part #2

[Sysadmins] cacti part #2

[Anton Gorlov]

После недавнего обновления php ( вернее php-libs) наконец-то дело 
сдвинулось с мёртвой точки.. cacti стало рисовать графики, Но опять же 
до счастья далеко..

1) Под графиками нету подписей.. Вообще
2) grep -i mem /etc/php/5.2.7/apache2-mod_php/php.ini
memory_limit = 500M       ; Maximum amount of memory a script may 
consume (8MB)


Если ставить меньше -то php у нас весело срубает скрипты с сообщением 
что те весело вышли за границы дозволенного.


При всём этом -  таже cacti вот прям сейчас без шаманств поднялась на 2 
соседних тазиках под более другим линуксом и под фрёй...


По 1 пункту -пробывал прпоисать фонт в настройках cacti -  результатов 
0. В логах никаких варнингов не наблюдается.. а вот со 2 - вообще. o_0

Есть идеи как лечить?

Re: [Sysadmins] cacti part #2

[Slava Dubrovskiy]

[-- Attachment #1: Type: text/plain, Size: 1410 bytes --]

On 19.04.2009 21:00, Anton Gorlov wrote:
> После недавнего обновления php ( вернее php-libs) наконец-то дело
> сдвинулось с мёртвой точки.. cacti стало рисовать графики, Но опять же
> до счастья далеко..
>
> 1) Под графиками нету подписей.. Вообще
За это отвечает rrd-utils. Там ищи.
> 2) grep -i mem /etc/php/5.2.7/apache2-mod_php/php.ini
> memory_limit = 500M       ; Maximum amount of memory a script may
> consume (8MB)
>
> Если ставить меньше -то php у нас весело срубает скрипты с сообщением
> что те весело вышли за границы дозволенного.
suhosin отключал?
>
> При всём этом -  таже cacti вот прям сейчас без шаманств поднялась на
> 2 соседних тазиках под более другим линуксом и под фрёй...
Версии бы хоть дал...
>
> По 1 пункту -пробывал прпоисать фонт в настройках cacti -  результатов
> 0. В логах никаких варнингов не наблюдается.. а вот со 2 - вообще. o_0
>
> Есть идеи как лечить?

-- 
WBR,
Dubrovskiy Vyacheslav


[-- Attachment #2: S/MIME Cryptographic Signature --]
[-- Type: application/pkcs7-signature, Size: 3262 bytes --]

Re: [Sysadmins] cacti part #2

[Konstantin A. Lepikhov]

Hi Slava!

Tuesday 21, at 05:53:53 PM you wrote:

> On 19.04.2009 21:00, Anton Gorlov wrote:
> > После недавнего обновления php ( вернее php-libs) наконец-то дело
> > сдвинулось с мёртвой точки.. cacti стало рисовать графики, Но опять же
> > до счастья далеко..
> >
> > 1) Под графиками нету подписей.. Вообще
> За это отвечает rrd-utils. Там ищи.
> > 2) grep -i mem /etc/php/5.2.7/apache2-mod_php/php.ini
> > memory_limit = 500M       ; Maximum amount of memory a script may
> > consume (8MB)
> >
> > Если ставить меньше -то php у нас весело срубает скрипты с сообщением
> > что те весело вышли за границы дозволенного.
> suhosin отключал?
Лечить головную боль отрубанием головы? :) Если программа течет, то
suhosin тут ни при чем. 

> >
> > При всём этом -  таже cacti вот прям сейчас без шаманств поднялась на
> > 2 соседних тазиках под более другим линуксом и под фрёй...
> Версии бы хоть дал...
> >
> > По 1 пункту -пробывал прпоисать фонт в настройках cacti -  результатов
> > 0. В логах никаких варнингов не наблюдается.. а вот со 2 - вообще. o_0
> >
> > Есть идеи как лечить?
> 



> _______________________________________________
> Sysadmins mailing list
> Sysadmins@lists.altlinux.org
> https://lists.altlinux.org/mailman/listinfo/sysadmins


-- 
WBR et al.

Re: [Sysadmins] cacti part #2

[Anton Gorlov]

Slava Dubrovskiy пишет:

>> 1) Под графиками нету подписей.. Вообще
> За это отвечает rrd-utils. Там ищи.
Искал... пока так и не понял откуда ноги именно растут.

>> Если ставить меньше -то php у нас весело срубает скрипты с сообщением
>> что те весело вышли за границы дозволенного.
> suhosin отключал?
Да. Но повторю - на соседних тазиках оно работает с тем же suhoshin и 
всё красиво.

>> При всём этом -  таже cacti вот прям сейчас без шаманств поднялась на
>> 2 соседних тазиках под более другим линуксом и под фрёй...
> Версии бы хоть дал...
На рабочем тазике
==
$ pkg_info | egrep "php|cacti|rrd"
cacti-0.8.7d        Web-driven graphing interface for RRDTool
php5-5.2.9          PHP Scripting Language
php5-mcrypt-5.2.9   The mcrypt shared extension for php
php5-mysql-5.2.9    The mysql shared extension for php
php5-pcre-5.2.9     The pcre shared extension for php
php5-session-5.2.9  The session shared extension for php
php5-simplexml-5.2.9 The simplexml shared extension for php
php5-snmp-5.2.9     The snmp shared extension for php
php5-sockets-5.2.9  The sockets shared extension for php
php5-spl-5.2.9      The spl shared extension for php
php5-xml-5.2.9      The xml shared extension for php
rrdtool-1.3.5_1     Round Robin Database Tools


У нас
[root@atomic ~]# rpm -qa | egrep "php|cacti|rrd"
librrd-1.2.28-alt1
php5-5.2.7.20080920-alt1.M50.1
rrd-utils-1.2.28-alt1
cacti-doc-0.8.7b-alt4
php5-gd2-5.2.7.20080920-alt1
php5-sockets-5.2.7.20080920-alt1
php-base-2.4-alt1
php5-suhosin-0.9.27-alt1
php5-rrdtool-5.2.7.20080920-alt1
php5-snmp-5.2.7.20080920-alt1
php5-mcrypt-5.2.7.20080920-alt1
php5-libs-5.2.7.20080920-alt1.M50.1
php5-simplexml-5.2.7.20080920-alt1
php5-mbstring-5.2.7.20080920-alt1
apache2-mod_php5-5.2.7.20080920-alt1.M50.1.1
php5-mysql-5.2.7.20080920-alt1

Re: [Sysadmins] cacti part #2

[Anton Gorlov]

Konstantin A. Lepikhov пишет:

>>> Если ставить меньше -то php у нас весело срубает скрипты с сообщением
>>> что те весело вышли за границы дозволенного.
>> suhosin отключал?
> Лечить головную боль отрубанием головы? :) Если программа течет, то
> suhosin тут ни при чем. 

А почему она течёт только у нас? Вот только что глянул тазик с этим же 
кактусом... который  более чем пол года не перезагружался - никаких 
утечек нету..при том что там всего гиг памяти.

Re: [Sysadmins] cacti part #2

[Dmitry Lebkov]

Anton Gorlov пишет:
> Slava Dubrovskiy пишет:
> 
>>> 1) Под графиками нету подписей.. Вообще
>> За это отвечает rrd-utils. Там ищи.
> Искал... пока так и не понял откуда ноги именно растут.
> 
>>> Если ставить меньше -то php у нас весело срубает скрипты с сообщением
>>> что те весело вышли за границы дозволенного.
>> suhosin отключал?
> Да. Но повторю - на соседних тазиках оно работает с тем же suhoshin и
> всё красиво.
> 
>>> При всём этом -  таже cacti вот прям сейчас без шаманств поднялась на
>>> 2 соседних тазиках под более другим линуксом и под фрёй...
>> Версии бы хоть дал...
> На рабочем тазике
> ==
> $ pkg_info | egrep "php|cacti|rrd"
> cacti-0.8.7d        Web-driven graphing interface for RRDTool
> php5-5.2.9          PHP Scripting Language
> php5-mcrypt-5.2.9   The mcrypt shared extension for php
> php5-mysql-5.2.9    The mysql shared extension for php
> php5-pcre-5.2.9     The pcre shared extension for php
> php5-session-5.2.9  The session shared extension for php
> php5-simplexml-5.2.9 The simplexml shared extension for php
> php5-snmp-5.2.9     The snmp shared extension for php
> php5-sockets-5.2.9  The sockets shared extension for php
> php5-spl-5.2.9      The spl shared extension for php
> php5-xml-5.2.9      The xml shared extension for php
> rrdtool-1.3.5_1     Round Robin Database Tools
> 
> 
> У нас
> [root@atomic ~]# rpm -qa | egrep "php|cacti|rrd"
> librrd-1.2.28-alt1
> php5-5.2.7.20080920-alt1.M50.1
> rrd-utils-1.2.28-alt1
> cacti-doc-0.8.7b-alt4
> php5-gd2-5.2.7.20080920-alt1
> php5-sockets-5.2.7.20080920-alt1
> php-base-2.4-alt1
> php5-suhosin-0.9.27-alt1
> php5-rrdtool-5.2.7.20080920-alt1
> php5-snmp-5.2.7.20080920-alt1
> php5-mcrypt-5.2.7.20080920-alt1
> php5-libs-5.2.7.20080920-alt1.M50.1
> php5-simplexml-5.2.7.20080920-alt1
> php5-mbstring-5.2.7.20080920-alt1
> apache2-mod_php5-5.2.7.20080920-alt1.M50.1.1
> php5-mysql-5.2.7.20080920-alt1


[root@nmc ~]# rpm -qa | egrep "php|cacti|rrd" |sort
apache2-mod_php5-5.2.7.20080920-alt1
cacti-0.8.7b-alt4
cacti-config-php5-0.8.7b-alt4
cacti-spine-0.8.7a-alt2.1
librrd-1.2.29-alt1
php-base-2.4-alt1
php5-5.2.7.20080920-alt1
php5-gd2-5.2.7.20080920-alt1
php5-gmp-5.2.7.20080920-alt1
php5-ldap-5.2.7.20080920-alt1
php5-libs-5.2.7.20080920-alt1
php5-mbstring-5.2.7.20080920-alt1
php5-mcrypt-5.2.7.20080920-alt1
php5-mhash-5.2.7.20080920-alt1
php5-mysql-5.2.7.20080920-alt1
php5-openssl-5.2.7.20080920-alt1
php5-pcntl-5.2.7.20080920-alt1
php5-pgsql-5.2.7.20080920-alt1
php5-rrdtool-5.2.7.20080920-alt1
php5-snmp-5.2.7.20080920-alt1
php5-suhosin-0.9.27-alt1
rrd-perl-1.2.29-alt1
rrd-utils-1.2.29-alt1

Сизиф. Всё работает.

-- 
WBR, Dmitry Lebkov

Re: [Sysadmins] cacti part #2

[Anton Gorlov]

Dmitry Lebkov пишет:

>>>> 1) Под графиками нету подписей.. Вообще
>>> За это отвечает rrd-utils. Там ищи.
>> Искал... пока так и не понял откуда ноги именно растут.

>> [root@atomic ~]# rpm -qa | egrep "php|cacti|rrd"
>> librrd-1.2.28-alt1
>> rrd-utils-1.2.28-alt1
...
> [root@nmc ~]# rpm -qa | egrep "php|cacti|rrd" |sort
...
> rrd-perl-1.2.29-alt1
> rrd-utils-1.2.29-alt1
> Сизиф. Всё работает.

Спортировал rrd из сизифа.. - подписи появились.
Вешать багу на rrd из бранча ?

Re: [Sysadmins] cacti part #2

[Slava Dubrovskiy]

[-- Attachment #1: Type: text/plain, Size: 1192 bytes --]

On 23.04.2009 08:03, Anton Gorlov wrote:
> Konstantin A. Lepikhov пишет:
>
>>>> Если ставить меньше -то php у нас весело срубает скрипты с сообщением
>>>> что те весело вышли за границы дозволенного.
>>> suhosin отключал?
>> Лечить головную боль отрубанием головы? :) Если программа течет, то
>> suhosin тут ни при чем. 
>
> А почему она течёт только у нас? Вот только что глянул тазик с этим же
> кактусом... который  более чем пол года не перезагружался - никаких
> утечек нету..при том что там всего гиг памяти.
Тут бы хорошо понять какой скрипт вызывает проблемы. Опиши детальнее,
что значит "весело срубает скрипты". На какой-то конкретной ссылке? Или
без разницы? или как? Что в логе при этом?

-- 
WBR,
Dubrovskiy Vyacheslav


[-- Attachment #2: S/MIME Cryptographic Signature --]
[-- Type: application/pkcs7-signature, Size: 3262 bytes --]

Re: [Sysadmins] cacti part #2

[Anton Gorlov]

Slava Dubrovskiy пишет:

>> А почему она течёт только у нас? Вот только что глянул тазик с этим же
>> кактусом... который  более чем пол года не перезагружался - никаких
>> утечек нету..при том что там всего гиг памяти.
> Тут бы хорошо понять какой скрипт вызывает проблемы. Опиши детальнее,
> что значит "весело срубает скрипты". На какой-то конкретной ссылке? Или
> без разницы? или как? Что в логе при этом?

В основном срубало на запуске пуллера. В логах сообщение о том что 
скрипт затребовал памяти свех того что  указано в лимите.

Re: [Sysadmins] cacti part #2

[Александр Леутин]

Anton Gorlov пишет:
> Slava Dubrovskiy пишет:
> 
>>> А почему она течёт только у нас? Вот только что глянул тазик с этим же
>>> кактусом... который  более чем пол года не перезагружался - никаких
>>> утечек нету..при том что там всего гиг памяти.
>> Тут бы хорошо понять какой скрипт вызывает проблемы. Опиши детальнее,
>> что значит "весело срубает скрипты". На какой-то конкретной ссылке? Или
>> без разницы? или как? Что в логе при этом?
> 
> В основном срубало на запуске пуллера. В логах сообщение о том что 
> скрипт затребовал памяти свех того что  указано в лимите.
Скажите, а сколько у вас хостов в Cacti? Сколько источников данных? Как 
часто запускается поллер и с какой периодичностью происходит сбор данных?

-- 
Александр Леутин | Registered Linux user #295797
Жизнь -- смертельно интересная штука!

Re: [Sysadmins] cacti part #2

[Anton Gorlov]

Александр Леутин пишет:

>> В основном срубало на запуске пуллера. В логах сообщение о том что 
>> скрипт затребовал памяти свех того что  указано в лимите.
> Скажите, а сколько у вас хостов в Cacti? Сколько источников данных? Как 
> часто запускается поллер и с какой периодичностью происходит сбор данных?
На старой работе  под BSD cacti опрашивало  в общей сложности 260+ 
хостов...
(cisco,dlink, ну и простые тазики на базе bsd,linux и десятка 2 на windows).
на всё хваьтало ксеончика с 512 МБ ОЗУ...  потом до  гига дорасло.

Re: [Sysadmins] cacti part #2

[Slava Dubrovskiy]

[-- Attachment #1: Type: text/plain, Size: 1027 bytes --]

On 27.04.2009 22:34, Anton Gorlov wrote:
>>> В основном срубало на запуске пуллера. В логах сообщение о том что
>>> скрипт затребовал памяти свех того что  указано в лимите.
>> Скажите, а сколько у вас хостов в Cacti? Сколько источников данных?
>> Как часто запускается поллер и с какой периодичностью происходит сбор
>> данных?
> На старой работе  под BSD cacti опрашивало  в общей сложности 260+
> хостов...
> (cisco,dlink, ну и простые тазики на базе bsd,linux и десятка 2 на
> windows).
> на всё хваьтало ксеончика с 512 МБ ОЗУ...  потом до  гига дорасло.
Ну не мало. Может нужно spine использовать?
Пробовал?

-- 
WBR,
Dubrovskiy Vyacheslav


[-- Attachment #2: S/MIME Cryptographic Signature --]
[-- Type: application/pkcs7-signature, Size: 3262 bytes --]

Re: [Sysadmins] cacti part #2

[Anton Gorlov]

Slava Dubrovskiy пишет:
>> На старой работе  под BSD cacti опрашивало  в общей сложности 260+
>> хостов...
>> (cisco,dlink, ну и простые тазики на базе bsd,linux и десятка 2 на
>> windows).
>> на всё хваьтало ксеончика с 512 МБ ОЗУ...  потом до  гига дорасло.
> Ну не мало. Может нужно spine использовать?
> Пробовал?
spine не подходит так как не умеет чаще чем раз в 5 минут опрашивать. К 
тому же -  тот же пуллер работаетвезде, кроме как у нас.. да и не поверю 
что ему на опрос всего 1 тестового хоста понадобилось 512МБ ОЗУ. Не верю!

Re: [Sysadmins] cacti part #2

[Slava Dubrovskiy]

[-- Attachment #1: Type: text/plain, Size: 959 bytes --]

On 28.04.2009 18:37, Anton Gorlov wrote:
> Slava Dubrovskiy пишет:
>>> На старой работе  под BSD cacti опрашивало  в общей сложности 260+
>>> хостов...
>>> (cisco,dlink, ну и простые тазики на базе bsd,linux и десятка 2 на
>>> windows).
>>> на всё хваьтало ксеончика с 512 МБ ОЗУ...  потом до  гига дорасло.
>> Ну не мало. Может нужно spine использовать?
>> Пробовал?
> spine не подходит так как не умеет чаще чем раз в 5 минут опрашивать. 
Что-то не верится что не умеет. Когда-то делал и работал каждую минуту.
> К тому же -  тот же пуллер работаетвезде, кроме как у нас.. 
Не у нас, а у вас :)

-- 

WBR,
Dubrovskiy Vyacheslav


[-- Attachment #2: S/MIME Cryptographic Signature --]
[-- Type: application/pkcs7-signature, Size: 3262 bytes --]

Re: [Sysadmins] cacti part #2

[Anton Gorlov]

Slava Dubrovskiy пишет:

>>>> на всё хваьтало ксеончика с 512 МБ ОЗУ...  потом до  гига дорасло.
>>> Ну не мало. Может нужно spine использовать?
>>> Пробовал?
>> spine не подходит так как не умеет чаще чем раз в 5 минут опрашивать. 
> Что-то не верится что не умеет. Когда-то делал и работал каждую минуту.
Может всё таки чеорез кронтаб? Хотя может быть когда в последний раз 
смотрел - оно на тот момент не умело  раз в минуту.

>> К тому же -  тот же пуллер работаетвезде, кроме как у нас.. 
> Не у нас, а у вас :)

Ага -  заработал когда rrdtool взял из сизифа. И то работает как-то 
странно - не верю что на опрос 1 хоста требуется 512 МБ памяти.

Re: [Sysadmins] cacti part #2

[Slava Dubrovskiy]

[-- Attachment #1: Type: text/plain, Size: 1663 bytes --]

On 28.04.2009 21:25, Anton Gorlov wrote:
> Slava Dubrovskiy пишет:
>
>>>>> на всё хваьтало ксеончика с 512 МБ ОЗУ...  потом до  гига дорасло.
>>>> Ну не мало. Может нужно spine использовать?
>>>> Пробовал?
>>> spine не подходит так как не умеет чаще чем раз в 5 минут опрашивать. 
>> Что-то не верится что не умеет. Когда-то делал и работал каждую минуту.
> Может всё таки чеорез кронтаб? Хотя может быть когда в последний раз
> смотрел - оно на тот момент не умело  раз в минуту.
Так он всегда через крон запускался
>>> К тому же -  тот же пуллер работаетвезде, кроме как у нас.. 
>> Не у нас, а у вас :)
>
> Ага -  заработал когда rrdtool взял из сизифа. И то работает как-то
> странно - не верю что на опрос 1 хоста требуется 512 МБ памяти.
Ну если на хосте нужно много ресурсов опросить... А вообще там в самой
какти есть лог. Включи в дебаг режиме и посмотри что пишет. Может что
увидишь.
А еще вопрос: То что память жрет это понятно. А с какой скоростью
опрашивает? Успевает?

-- 
WBR,
Dubrovskiy Vyacheslav


[-- Attachment #2: S/MIME Cryptographic Signature --]
[-- Type: application/pkcs7-signature, Size: 3262 bytes --]

Re: [Sysadmins] cacti part #2

[Anton Gorlov]

ради чистоты эксперимента сейчас  на ещё 1 тестовом тазике поднял cacti.
Cacti ломится по snmp на эотот же тазик и снимает статистку с 2 
интерфейсов смотрящих в локалку +  и pppoe
  cat /etc/altlinux-release
ALT Linux 5.0 branch (Ziziphora)
grep  memory_lim /etc/php/5.2.7/cli/php.ini
memory_limit = 60M
[root@atomic /]# cat /etc/crontab | grep poller
*/1 * * * * stalker  /usr/bin/php /var/www/html/cacti/poller.php >> 
/tmp/cacti.log 2>&1


04/28/2009 10:32:00 PM - SYSTEM STATS: Time:0.2211 Method:cmd.php 
Processes:1 Threads:N/A Hosts:2 HostsPerProcess:2 DataSources:6 
RRDsProcessed:3
ALERT - script tried to increase memory_limit to 268435456 bytes which 
is above the allowed value (attacker 'REMOTE_ADDR not set', file 
'/var/www/html/cacti/poller.php', line 171)
ALERT - script tried to increase memory_limit to 268435456 bytes which 
is above the allowed value (attacker 'REMOTE_ADDR not set', file 
'/var/www/html/cacti/cmd.php', line 33)
ALERT - script tried to increase memory_limit to 268435456 bytes which 
is above the allowed value (attacker 'REMOTE_ADDR not set', file 
'/var/www/html/cacti/cmd.php', line 33)
OK u:0.00 s:0.01 r:0.00
OK u:0.00 s:0.01 r:0.00
OK u:0.00 s:0.01 r:0.00
04/28/2009 10:33:01 PM - SYSTEM STATS: Time:0.2635 Method:cmd.php 
Processes:1 Threads:N/A Hosts:2 HostsPerProcess:2 DataSources:6 
RRDsProcessed:3

Re: [Sysadmins] cacti part #2

[Anton Gorlov]

Slava Dubrovskiy пишет:

>> странно - не верю что на опрос 1 хоста требуется 512 МБ памяти.
> Ну если на хосте нужно много ресурсов опросить... А вообще там в самой
> какти есть лог. Включи в дебаг режиме и посмотри что пишет. Может что
> увидишь.

Та ничего не пишет... Все логи уже излазил. ругается тлоько сам php 
(cli). Слав - я сейчасв тестке гоняю..  единственное, что оно сейчас 
опрашивает - это на 1 тесте - интерфейс смотрящий в сторону провайдера - 
8 мбит,а на 2 тестовом тазике - сам этот же тазик.
> А еще вопрос: То что память жрет это понятно. А с какой скоростью
> опрашивает? Успевает?
раз в минуту. Там нечему не успевать... :(

Re: [Sysadmins] cacti part #2

[Anton Gorlov]

А вот почему в 4 бранче cacti не запускалось
https://bugzilla.altlinux.org/show_bug.cgi?id=19888

Re: [Sysadmins] cacti part #2

[Anton Gorlov]

Удалось сегодня запустить cacti под бранчем 4.1 - там вполне хватило
[root@f37 /]# grep -i mem /etc/php.ini
memory_limit = 10M
rpm -q php5
php5-5.2.5-alt1.M41.3

Нагрузка на обе железки одинаковая - опрашивают друг друга...

При этом оба тестовых сервера живут под x86_64:
на одном 5 бранч,куда пришлось сбекпортить только rrd и фактически 
убрать лимитирование по памяти (php5-5.2.7.20080920-alt1.M50.1), а на 
втором branch4.1 где проблема оказалась лишь с конфигом от php