[Sysadmins] collectd 5.4.1, некоторые проблемы...

[Sysadmins] collectd 5.4.1, некоторые проблемы...

[Sergey]

Раз уж речь зашла, в соседней ветке, надо про него написать.

1. Что-то у меня обновление не сильно удачное вышло (собрал,
правда, для t7). Описал сразу в рассылку collectd на verplant.org.
Локальные данные пишутся с пропусками, при этом, это collectd-сервер,
что на него прилетает через планины network и snmp, пишется нормально.

Ошибка такая:

Jun 26 17:12:37 collectd: rrdcached plugin: rrdc_update (/var/lib/collectd/rrd/my-localhost/load/load.rrd, [1403788357:0.480000:0.600000:0.650000], 1) failed with status -1.
Jun 26 17:13:37 collectd: rrdcached plugin: rrdc_update (/var/lib/collectd/rrd/my-localhost/load/load.rrd, [1403788417:0.360000:0.540000:0.620000], 1) failed with status -1.

Есть идеи ?

2. Плагин bind так и не работает с 9.9.3. Наверное, тоже надо на
verplant.org вопрос поднимать...

3. Плагины interfaces и snmp несовместимы с точки зрения collection3,
исправление "no instance" чинит одно, ломает другое... Надо, видимо, 
тоже выносить обсуждение на verplant.org...

4. Для плагина apcups не плохо бы добавить

<Type charge>
  DataSources value
  DSName value Percent
  RRDTitle "Charge of battery"
  RRDVerticalLabel "Percent"
  RRDFormat "%4.1lf%%"
  Color percent 0000ff
</Type>
<Type timeleft>
  DataSources value
  DSName value Time
  RRDTitle "Time Left"
  RRDVerticalLabel "Minutes"
  RRDFormat "%6.1lfm"
</Type>

-- 
С уважением, Сергей
a_s_y@sama.ru

Re: [Sysadmins] collectd 5.4.1, некоторые проблемы...

[Anton Farygin]

On 26.06.2014 18:21, Sergey wrote:
> Раз уж речь зашла, в соседней ветке, надо про него написать.
>
> 1. Что-то у меня обновление не сильно удачное вышло (собрал,
> правда, для t7). Описал сразу в рассылку collectd на verplant.org.
> Локальные данные пишутся с пропусками, при этом, это collectd-сервер,
> что на него прилетает через планины network и snmp, пишется нормально.
>
> Ошибка такая:
>
> Jun 26 17:12:37 collectd: rrdcached plugin: rrdc_update (/var/lib/collectd/rrd/my-localhost/load/load.rrd, [1403788357:0.480000:0.600000:0.650000], 1) failed with status -1.
> Jun 26 17:13:37 collectd: rrdcached plugin: rrdc_update (/var/lib/collectd/rrd/my-localhost/load/load.rrd, [1403788417:0.360000:0.540000:0.620000], 1) failed with status -1.
>
> Есть идеи ?

Вроде как сталкивался давным давно, но как чинил уже не помню. 
Пересоздание не помогает ?

>
> 2. Плагин bind так и не работает с 9.9.3. Наверное, тоже надо на
> verplant.org вопрос поднимать...

Видимо так.

>
> 3. Плагины interfaces и snmp несовместимы с точки зрения collection3,
> исправление "no instance" чинит одно, ломает другое... Надо, видимо,
> тоже выносить обсуждение на verplant.org...

Мда. Мне то как раз interfaces важнее - для snmp есть zabbix

>
> 4. Для плагина apcups не плохо бы добавить
>
> <Type charge>
>    DataSources value
>    DSName value Percent
>    RRDTitle "Charge of battery"
>    RRDVerticalLabel "Percent"
>    RRDFormat "%4.1lf%%"
>    Color percent 0000ff
> </Type>
> <Type timeleft>
>    DataSources value
>    DSName value Time
>    RRDTitle "Time Left"
>    RRDVerticalLabel "Minutes"
>    RRDFormat "%6.1lfm"
> </Type>
>

В collection3 ? Добавлю.

Re: [Sysadmins] collectd 5.4.1, некоторые проблемы...

[Sergey]

On Thursday 26 June 2014, Anton Farygin wrote:

> > Ошибка такая:
> >
> > Jun 26 17:12:37 collectd: rrdcached plugin: rrdc_update (/var/lib/collectd/rrd/my-localhost/load/load.rrd, [1403788357:0.480000:0.600000:0.650000], 1) failed with status -1.
> > Jun 26 17:13:37 collectd: rrdcached plugin: rrdc_update (/var/lib/collectd/rrd/my-localhost/load/load.rrd, [1403788417:0.360000:0.540000:0.620000], 1) failed with status -1.
> >
> > Есть идеи ?
> 
> Вроде как сталкивался давным давно, но как чинил уже не помню. 

Бывает похожая ошибка, когда два процесса запускается. Но там ругается на время,
и на графиках пропусков нет...

> Пересоздание не помогает ?

Пробовал, не помогает.

> > 3. Плагины interfaces и snmp несовместимы с точки зрения collection3,
> > исправление "no instance" чинит одно, ломает другое... Надо, видимо,
> > тоже выносить обсуждение на verplant.org...
> 
> Мда. Мне то как раз interfaces важнее - для snmp есть zabbix

Интересно, на сколько сложно логику "или" реализовать в этом месте...
В самом collection3 в смысле. Мне и то, и другое надо. Напишу в их
рассылку и в коде сам попробую посмотреть тоже.

> > 4. Для плагина apcups не плохо бы добавить
> 
> В collection3 ? Добавлю.

Да, в конфиг.

-- 
С уважением, Сергей
a_s_y@sama.ru

Re: [Sysadmins] collectd 5.4.1, некоторые проблемы...

[Anton Farygin]

On 26.06.2014 19:27, Sergey wrote:
> On Thursday 26 June 2014, Anton Farygin wrote:
>
>>> Ошибка такая:
>>>
>>> Jun 26 17:12:37 collectd: rrdcached plugin: rrdc_update (/var/lib/collectd/rrd/my-localhost/load/load.rrd, [1403788357:0.480000:0.600000:0.650000], 1) failed with status -1.
>>> Jun 26 17:13:37 collectd: rrdcached plugin: rrdc_update (/var/lib/collectd/rrd/my-localhost/load/load.rrd, [1403788417:0.360000:0.540000:0.620000], 1) failed with status -1.
>>>
>>> Есть идеи ?
>>
>> Вроде как сталкивался давным давно, но как чинил уже не помню.
>
> Бывает похожая ошибка, когда два процесса запускается. Но там ругается на время,
> и на графиках пропусков нет...

Точно. Это у меня и было. Сейчас специально проверил - локальный load 
пишет у меня нормально. Правда, на Sisyphus.

>
>> Пересоздание не помогает ?
>
> Пробовал, не помогает.
>
>>> 3. Плагины interfaces и snmp несовместимы с точки зрения collection3,
>>> исправление "no instance" чинит одно, ломает другое... Надо, видимо,
>>> тоже выносить обсуждение на verplant.org...
>>
>> Мда. Мне то как раз interfaces важнее - для snmp есть zabbix
>
> Интересно, на сколько сложно логику "или" реализовать в этом месте...
> В самом collection3 в смысле. Мне и то, и другое надо. Напишу в их
> рассылку и в коде сам попробую посмотреть тоже.

collection3, как мне показалось, уже давно никем не сопровождается.

>
>>> 4. Для плагина apcups не плохо бы добавить
>>
>> В collection3 ? Добавлю.
>
> Да, в конфиг.
>

ok

Re: [Sysadmins] collectd 5.4.1, некоторые проблемы...

[Sergey]

On Thursday 26 June 2014, Anton Farygin wrote:

> >> Мда. Мне то как раз interfaces важнее - для snmp есть zabbix
> >
> > Интересно, на сколько сложно логику "или" реализовать в этом месте...
> > В самом collection3 в смысле. Мне и то, и другое надо. Напишу в их
> > рассылку и в коде сам попробую посмотреть тоже.
> 
> collection3, как мне показалось, уже давно никем не сопровождается.
 
Есть такое... Но кто-то пользуется, может, кто-то что-то знает.
А по данной проблеме решение есть, оказывается. if_octets навёл:
в обоих случаях показывается. Надо просто {instance} написать
у if_errors и if_packets.

-- 
С уважением, Сергей
a_s_y@sama.ru

Re: [Sysadmins] collectd 5.4.1, некоторые проблемы...

[Sergey]

On Thursday 26 June 2014, Anton Farygin wrote:

> >>> Jun 26 17:13:37 collectd: rrdcached plugin: rrdc_update <...> failed with status -1.
> >>>
> >>> Есть идеи ?
> >>
> >> Вроде как сталкивался давным давно, но как чинил уже не помню.
> >
> > Бывает похожая ошибка, когда два процесса запускается. Но там
> > ругается на время, и на графиках пропусков нет...
> 
> Точно. Это у меня и было. Сейчас специально проверил - локальный
> load пишет у меня нормально. Правда, на Sisyphus.

В общем, это, всё же, она. Только когда работает через rrdcached,
сообщение другое. А переход с rrdcached на rrdtool привёл к замене
сообщения на 

rrdtool plugin: rrd_update_r <...>: illegal attempt to update using time 1403869343 when last update time is 1403869343 (minimum one second step)

Связано это с параметром ReadThreads как-то, у меня стояло значение
20 в конфиге 5.2.1. В 5.4.1 обнаружился ещё и WriteThreads, который,
видимо, по-умолчанию 5 (как и ReadThreads). И где-то тут засада и вышла.
Сделал поровну, с плагином rrdtool пишет вроде. А вот с rrdcached,
по-прежнему, работать не хочет что-то, ещё даже хуже стало - теперь
ещё и остальные данные тоже с ошибками пишутся, по крайней мере те,
что через плагин network поступают. Хотя пропусков нет вроде, как с
данными самого collectd-сервера. Попытка сделать значения по-умолчанию
для ReadThreads/WriteThreads приводит к полному пропаданию данных от
сервера.

-- 
С уважением, Сергей
a_s_y@sama.ru

Re: [Sysadmins] collectd 5.4.1, некоторые проблемы...

[Sergey]

On Monday 30 June 2014, Sergey wrote:

> Сделал поровну

Нет, не так. WriteThreads, всё же, не влияет: помогло просто
увелиечение ReadThreads раза в два. Но только для rrdtool, а
что с rrdcached делать - непонятно.

-- 
С уважением, Сергей
a_s_y@sama.ru

Re: [Sysadmins] collectd 5.4.1, некоторые проблемы...

[Sergey]

On Thursday 26 June 2014, Sergey wrote:

5. Что-то ещё течёт (это где-то за полтора дня):
  PID USER      PR  NI    VIRT    RES    SHR S  %CPU  %MEM     TIME+ COMMAND
 6859 root      20   0 3756144 1.058g   3068 S 7.979 54.95 225:28.54 collectd

Это вот после рестарта:

  PID USER      PR  NI    VIRT    RES    SHR S  %CPU  %MEM     TIME+ COMMAND
13175 root      20   0 3756144  58020   5352 S 2.992 2.873   0:09.96 collectd

Про "течёт" есть баг http://collectd.org/bugs/661, но это про неиспользуемый
у меня rrdcached.

-- 
С уважением, Сергей
a_s_y@sama.ru

Re: [Sysadmins] collectd 5.4.1, некоторые проблемы...

[Anton Farygin]

On 02.07.2014 14:45, Sergey wrote:
> On Thursday 26 June 2014, Sergey wrote:
>
> 5. Что-то ещё течёт (это где-то за полтора дня):
>    PID USER      PR  NI    VIRT    RES    SHR S  %CPU  %MEM     TIME+ COMMAND
>   6859 root      20   0 3756144 1.058g   3068 S 7.979 54.95 225:28.54 collectd
>
> Это вот после рестарта:
>
>    PID USER      PR  NI    VIRT    RES    SHR S  %CPU  %MEM     TIME+ COMMAND
> 13175 root      20   0 3756144  58020   5352 S 2.992 2.873   0:09.96 collectd
>
> Про "течёт" есть баг http://collectd.org/bugs/661, но это про неиспользуемый
> у меня rrdcached.
>

Странно, но у меня опять же не воспроизводится ;(

Re: [Sysadmins] collectd 5.4.1, некоторые проблемы...

[Sergey]

On Thursday 26 June 2014, Sergey wrote:

> 2. Плагин bind так и не работает с 9.9.3. Наверное,
> тоже надо на verplant.org вопрос поднимать...

Без меня спросили. Там дали ссылку на
https://github.com/collectd/collectd/pull/742

Но, как пишут, это для будущего 5.5. Для 5.4 надо смотреть,
как применится.

-- 
С уважением, Сергей
a_s_y@sama.ru

Re: [Sysadmins] collectd 5.4.1, некоторые проблемы...

[Sergey]

On Monday 30 June 2014, Sergey wrote:

> > Сделал поровну
> 
> Нет, не так. WriteThreads, всё же, не влияет: помогло просто
> увелиечение ReadThreads раза в два. Но только для rrdtool, а
> что с rrdcached делать - непонятно.

Чтобы не потерялось... У rrdcached есть ключик -j, можно писать
журнал:

update /var/lib/collectd/rrd/hostname/apcups/temperature.rrd 1429693516:32.800000
update /var/lib/collectd/rrd/hostname/apcups/temperature.rrd 1429693536:32.800000
update /var/lib/collectd/rrd/hostname/apcups/temperature.rrd 1429693527:32.800000 <--
update /var/lib/collectd/rrd/hostname/apcups/temperature.rrd 1429693546:32.800000
update /var/lib/collectd/rrd/hostname/apcups/temperature.rrd 1429693556:32.800000

Apr 22 13:05:41 collectd[14593]: rrdcached plugin: rrdc_update (/var/lib/collectd/rrd/hostname/apcups/temperature.rrd, [1429693527:32.800000], 1) failed with status -1.

То есть, на самом деле, была попытка записать данные не в свою
очередь. А вот кто виноват, и что делать...

rrd-cached-1.4.7-alt3.1
collectd-rrdcached-5.4.2-alt1.M70P.1

Запостил сюда ещё:
http://mailman.verplant.org/pipermail/collectd/2015-April/006517.html

Попробовал увеличить интервал по-умолчанию до 60 сек, вообще писаться
перестало.

-- 
С уважением, Сергей.

[Sysadmins] Настройка yabeda

[Васюк Максим Анатольевич]

Привет, Всем!

# uname -r
2.6.32-ovz-el-alt130

В лог постоянно сыпется

Jun  9 16:05:01 sh02 crond[8149]: (root) MAIL (mailed 174 bytes of 
output but got status 0xffffffff )
Jun  9 16:10:01 sh02 crond[8208]: (root) CMD (/usr/sbin/yabeda)
Jun  9 16:10:02 sh02 crond[8206]: (root) MAIL (mailed 174 bytes of 
output but got status 0xffffffff )
Jun  9 16:15:01 sh02 crond[8236]: (root) CMD (/usr/sbin/yabeda)
Jun  9 16:15:01 sh02 crond[8234]: (root) MAIL (mailed 174 bytes of 
output but got status 0xffffffff )

Контейнеры еще не создал.

Вики автора не открывается https://www.assembla.com/wiki/show/yabeda

Увидел /etc/yabeda/yabeda.conf, но без доку что-то не совсем все понятно.

Я так понимаю она должна слать на почту статистику о сработанных 
лимитах? Дело нужное, хотелось бы настроить!

-- 
С уважением,
Васюк Максим

Re: [Sysadmins] Настройка yabeda

[Michael Shigorin]

On Tue, Jun 09, 2015 at 04:25:37PM +0600, Васюк Максим Анатольевич wrote:
> В лог постоянно сыпется
> 
> Jun  9 16:10:01 sh02 crond[8208]: (root) CMD (/usr/sbin/yabeda)
> Jun  9 16:10:02 sh02 crond[8206]: (root) MAIL (mailed 174 bytes of 
> output but got status 0xffffffff )

1) что говорит запущенная "с руки" yabeda?
2) запущен ли postfix или иной MTA?

> Вики автора не открывается 

Да, проект давно осиротел, а страничка есть в архиве:
http://web.archive.org/web/20110219003240/http://www.assembla.com/wiki/show/yabeda
...и там интересного негусто:

---
Yabeda is an OpenVZ failcnt complainer which tends to be
lightweight, flexible and easily extendable.

Should be used on host machines (via some cron-job) to generate
alerts when failcnt gets increased. Failcnt is the counter used
in openvz kernels to tell whether the needed parameter reached
its limit.

The program is being written using Ruby aiming to have as little
dependancies as possible.
---

> Увидел /etc/yabeda/yabeda.conf, но без доку что-то не 
> совсем все понятно.
> 
> Я так понимаю она должна слать на почту статистику о
> сработанных лимитах? Дело нужное, хотелось бы настроить!

Да; умеет и жабером стучать, но там надо чинить, что-то
около xmpp4r разваливалось.  Если у кого есть желание,
посмотрите ещё у меня в гите ветки, отличные от master:
http://git.altlinux.org/people/mike/packages/?p=yabeda.git

-- 
 ---- WBR, Michael Shigorin / http://altlinux.org
  ------ http://opennet.ru / http://anna-news.info

Re: [Sysadmins] Настройка yabeda

[Konstantin Lepikhov]

Hi Michael!

On 06/09/15, at 02:39:54 PM you wrote:

> > Увидел /etc/yabeda/yabeda.conf, но без доку что-то не 
> > совсем все понятно.
> > 
> > Я так понимаю она должна слать на почту статистику о
> > сработанных лимитах? Дело нужное, хотелось бы настроить!
> 
> Да; умеет и жабером стучать, но там надо чинить, что-то
> около xmpp4r разваливалось.  Если у кого есть желание,
> посмотрите ещё у меня в гите ветки, отличные от master:
> http://git.altlinux.org/people/mike/packages/?p=yabeda.git
> 
А есть ли вообще в ней смысл? Ведь как в vz появились --ram и --swap
параметры, счетчики особо не нужны. Т.е. контейнеры можно мониторить как
обычные машины.

-- 
WBR et al.

Re: [Sysadmins] Настройка yabeda

[Michael Shigorin]

On Tue, Jun 09, 2015 at 03:18:15PM +0100, Konstantin Lepikhov wrote:
> А есть ли вообще в ней смысл? Ведь как в vz появились --ram и
> --swap параметры, счетчики особо не нужны. Т.е. контейнеры
> можно мониторить как обычные машины.

Если что-то резко утекло в промежутке между проверками,
для внешнего по отношению к HN мониторинга такой VE
может стать неотзывчивым (а внутренний стоит колом).

-- 
 ---- WBR, Michael Shigorin / http://altlinux.org
  ------ http://opennet.ru / http://anna-news.info

Re: [Sysadmins] Настройка yabeda

[Konstantin Lepikhov]

Hi Michael!

On 06/09/15, at 06:26:55 PM you wrote:

> On Tue, Jun 09, 2015 at 03:18:15PM +0100, Konstantin Lepikhov wrote:
> > А есть ли вообще в ней смысл? Ведь как в vz появились --ram и
> > --swap параметры, счетчики особо не нужны. Т.е. контейнеры
> > можно мониторить как обычные машины.
> 
> Если что-то резко утекло в промежутке между проверками,
> для внешнего по отношению к HN мониторинга такой VE
> может стать неотзывчивым (а внутренний стоит колом).
no data от контейнера ставить critical, не?

-- 
WBR et al.

Re: [Sysadmins] Настройка yabeda

[Michael Shigorin]

On Tue, Jun 09, 2015 at 04:25:37PM +0600, Васюк Максим Анатольевич wrote:
> Я так понимаю она должна слать на почту статистику о
> сработанных лимитах? Дело нужное, хотелось бы настроить!

На https://openvz.org/Virtuozzo_ecosystem#Useful_scripts
обнаружилась ещё такая штука:
https://github.com/DmitryKoterov/vzfailcnt/tree/master

-- 
 ---- WBR, Michael Shigorin / http://altlinux.org
  ------ http://opennet.ru / http://anna-news.info