что не так сделал?

у заказчика когда увидел конфиги алёртов глаза чуть не лопнули

В хорошем или плохом смысле? :D

что не так сделал?

так попробуй https://paste.fedoraproject.org/paste/2K6jCkC4ai7vWri-WkaQ-F5M1UNdIGYhyRLivL9gydE=

т.е. моя изначальная идея была вычесть кеш и свободную из общей памяти

При определенном способе сборки ядра, вычитание кешированной надо отменять (встретил такое на генте доставшейся от других админов). Поэтому вычитание не всегда правильно.

А вот например еще один прикол. На тачке со 192ГБ рамы только одна виртуалка размером 8ГБ http://dl4.joxi.net/drive/2017/03/21/0007/2721/490145/45/45a2b5263e.jpg Сортировка по MEM по убыванию. $ free -g total used free shared buff/cache avail Mem: 188 176 10 0 2 10 Swap: 0 0 0

Так что на каждой схеме сетапа мониторить память надо совсем по-разному

Кто-нибудь пользуется аннотациями в графане по триггерам из zabbix? Не могу понять это баг или фича при использовании 1 триггера но в котором используется макрос item.value на графике всегда отображается последнее значение во всех аннотациях (разнесенных по времени).

Item.value это и должен показывать

Item.value это и должен показывать

item.value на момент срабатывания - а он показывает item.lastvalue

item.value на момент срабатывания - а он показывает item.lastvalue

Да, сорри, я уже перегрелся сегодня

item.value на момент срабатывания - а он показывает item.lastvalue

Сейчас гляну в коде, что там может быть

Сейчас гляну в коде, что там может быть

Спасибо!

Спасибо!

отображается trigger.description (данные беруться из API). Посмотрите, что в ответе от API приходит. Думаю, это заббикс так возвращает.

отображается trigger.description (данные беруться из API). Посмотрите, что в ответе от API приходит. Думаю, это заббикс так возвращает.

Ок буду смотреть

а как называется имплеменатция сервера графита на голанге?

из головы вылетело :(

go-carbon

не, та которая дает выборки

клиент получается

go-carbon я нагуглил

а вот замену питоновскому апи найти не могу

https://github.com/robyoung/go-whisper

спасибо)

не, еще было

но виспер формат такой, тут особенно не улучшишь показаели сменой языка

фичастее

graphite-ng

зиппер

zypper?

zipper чтонибудь

https://github.com/dgryski/carbonapi

оно!!

спасибо!

а вот замену питоновскому апи найти не могу

carbonapi

а, уже ответили

@pavel_odintsov там в общем 4 компонента - carbonapi для рендеринга, carbonzipper для кластеризации (чтение), go-carbon (нужно включить carbonserver) чтоб читать, carbonsearch чтобы было некоторое подобие тэгов

carbonapi требует обязательного наличие go-carbon'а со включенным carbonserver

@Civiloid спасибо за пояснение!

а если уперся в графит-апи куда копать ?

а если уперся в графит-апи куда копать ?

carbonapi + go-carbon и вообще масштабирование графита

я помоему предлагал graphite-api @ pypy гонять.

эх у меня еще и cers (

да уже на pypy

эх у меня еще и cers (

ну можно поддержку цереса написать для go-carbon'а. Я думаю базовая имплементация займет пару дней

падает

да уже думал об этом )

я вот не помню, в графит-апи не добавили кластеризации аля графит-веб?

если добавили, то можно 2-3-4 сервера с ним поставить и натравить на центральный раздающий данные

В prom чтобы делать экспортеры практика на го писать, или на питоне извращаются?

на всем пишут

я на java видел

точнее на jruby

я на питоне писал

https://grafana.com/blog/2017/03/13/we-are-now-grafana-labs/

Как автоваз не обзови, всё равно автоваз на выходе

вот эта интереснее новость https://grafana.com/blog/2017/03/22/grafana-4.2-release/

Опять всё сломали небось

Помимо нотификаций в мессенджеры - ничего хорошего

не обновлялся пока, завтра попробую )

@alexanderzobnin а новых панелей не завезли туда?

@alexanderzobnin а новых панелей не завезли туда?

Нет пока. На этой неделе буду переносить heatmap в репозиторий графаны, так что скоро в nightly-builds можно будет попробовать.

> We also have a really awesome Heatmap panel in the works. Ага слышали

ERROR: S client not available

Нет пока. На этой неделе буду переносить heatmap в репозиторий графаны, так что скоро в nightly-builds можно будет попробовать.

?

Надеюсь, в следующем релизе уже можно будет пользоваться.

быстрый гонзалес

извините, был взволнован

Помимо нотификаций в мессенджеры - ничего хорошего

главное не понятно - зачем

а как можно для связк графана + прометеус добавить аннотации, например, событий (деплоя)?

насколько я знаю, прометей не поддерживает аннотации вовсе

а что здесь тогда имели в виду? http://docs.grafana.org/reference/annotations/

Prometheus supports two ways to query annotations. A regular metric query A Prometheus query for pending and firing alerts (for details see Inspecting alerts during runtime)

а что здесь тогда имели в виду? http://docs.grafana.org/reference/annotations/

это alert. и выглядит он ужасно - пока алерт жив - каждые N секунд (по-моему 30) графана будет рисовать риску аннотации

ну там баллет лист, где алерт – второй

первый – A regular metric query

для прометея alert - это тоже query

только специфичный. называется ALERT

как вариант сейчас подумал - можно сделать "фальшивую метрику" и отправлять ее через push gateway

но это даже не идея, так - наметка. Надо пробовать

ну понятно, это под вторым баллетом идет: A Prometheus query for pending and firing alerts

под первым – A regular metric query, не похоже что это про алерты

да, вероятно как раз имелась виду такая специальная метрика

а аннотация появляется на графике когда такая метрика не равна нулю – так?

еще раз - алерты в прометее считаются метриками и их можно дергать именно как метрики, через ALERT(query). У них, по-моему, 3 состояния - clear, pending, firing

первый - там порог настроить можно

типа node_load1 > 7 - как только LA cтанет выше 7 - появится риска

ну для бинарного события (деплой) он будет 0/1 (ну может 2 для фейла)

но она не исчезает, пока LA не упадет

надо попробовать фейковую метрику, ага спасибо

не делайте АЛЕРТ :) сделайте метрику и повестье на нее, скажем, дельту

не, алерты в аннотациях мне не нужны

но это, опять же, пробовать надо.

а как в графане сделать таблицу по текущим значениям лейбелов из прометеуса?