CPU в это время на хостах за ELB - ровная линия

естественно - первый кандидат - сетка

но это на стороне заказчика, они спят, попросили их проверить не было ли у них затупов

ну то есть мы сейчас в ситуации, когда "у нас есть охуенные метрики, можно в них смотреть" превратилось в "ну и что ваши охуенные метрики могут сказать про вот этот затуп?"

забавно, накопали High CPU на базке;)

дашбордики наверное надо понаделать.

от простого к сложному наверное

глубокая мысль

очевидные вариант в первую очередь же

ну там есть;) не всё правда, пока хватало

вот еще пару досочек приделали теперь по пути

и алерт на CPU базки вниз подвинули

А grafana ещё не умеет выставлять алерты , если в формулах используются переменные для хостов?

alerting не поддерживается с темплейтингом одновременно

в 4.1.1 точно

я наступил на эти грабли - настряпал везде алертинга, а потом попросили срочно впилить темплейтинг :)

А ведь должны же сделать в ближайшее время, если сделают можно алертинг на графану повесить )

https://github.com/grafana/grafana/issues/6557 no milestone (

гг. подозреваю что этот ишью страшный сон девелопера

это не просто сон, это ж кошмар. вот ты сделал алерт, потом тебе добавилось в метриках хостов всяких, там новые instance.

и че, по каждой instance создать алерт?

ога да.

и ладно только интсанс

там ведь хитрые датасорсы есть

кешировать лукапы в базу ? *кешепроблемы

я увидел что графана ошибку выдала "alerting is not supported with templating" и сразу осознал какое я тупое действие совершил ))))

не кешировать *датабейспроблемы

гайс, а кто чем собирает метрики по *процессам* ?

смотрю на телеграф, он у меня аутирует и не меняет циферки, хотя приложение там постоянно разную нагрузку даёт

есть что ещё дельное?

вот у меня тож с телеграфом проблема, скрещивает между собой процессы, показывает космос

@strukov, @lastsky a новый телеграф уже пробовали? который 0.12

там, судя по чейнжлогу, это пофиксили

мм нет. у меня не было релиз нотифая что выкатили 0.12... хмм

да даже я в этом канале нотифаил уже :D

прям вчера брал и тестил

он собирает, в логе и с стрейса я вижу что он реально сходил в прок и собрал инфу

чиорд :) спасибо, ща закатаю 0.12 что ж я что ж я пропустил такое

https://github.com/influxdata/telegraf/releases/tag/1.2.0 вроде да

но когда пихает в свой вебсервер для сгрёбывания прометеусом, там всё ломается и ничего не работает

циферки замерли и не меняются :(

у меня тож ситуация в связках с прометеусом.

ii telegraf 1.2.0-1 amd64 Plugin-driven server agent for reporting metrics into InfluxDB.

вот говно :(

(но я ещё 0.12 даж не видел release notes, пошёл вот читать)

только не 0.12, а 1.2.0

точечки у меня в памяти перепутались

но на самом-то деле это 0.12, конечно :D

мм нет. у меня не было релиз нотифая что выкатили 0.12... хмм

а как ты за этим следишь?

слежу с помощью специального сервиса, всё что зазвездил на github - присылает нотифаи, один момент

он называется https://sibbell.com/

только не 0.12, а 1.2.0

у меня тоже отложилось так. 1.1.1 стоит

точечки у меня в памяти перепутались

почему я тоже не заметил подвоха? ?

хм, кстати кто не знал

можн подписаться на релизы прям с гитхаба в рссочку

https://github.com/hashicorp/consul/releases.atom например

https://github.com/grafana/grafana/releases/tag/v9.9.9-test1

лол

огонь. Add minimal documentation to the diskio plugin https://github.com/influxdata/telegraf/compare/1.2.0...master

Кстати, а графики на digital ocean уже обсуждали?

м?

ну там надо запустить do-agent и тогда он будет в панельке метрики какие-то визуализировать. халявно

Господа у меня для вас новость

ура!

monday, january 30th, 2017 - 12:38 am Cacti 1.0.0 released!Свершилось ! можно юзать !

нет. юзать низя. но это победа да

они просто хотели переплюнуть wine, но толку?

ERROR: S client not available

2017 / cacti: "После 16 лет разработки состоялся релиз системы мониторинга 1.0.0, отображающей изменения отслеживаемых параметров в виде наглядных графиков." 2008/ wine: The Wine team is proud to announce that Wine 1.0 is now available. This is the first stable release of Wine after 15 years of development and beta testing.

никогда бы не подумал, что кактусу 16 лет.

кактус был молод и загорел в 2005-ом

в 2010 он всё еще был неплох

а потом пыщ пыщ. ололо.

А чо, мажорным чем-то в ченжлоге они хвастаются или как?

Да мы ж некомпетентны, мы так, порофлить.

вот говно :(

telegraf 1.2.1 published Feb. 1, 2017 on GitHub

у меня не крашится на связке с прометеем, но я снизил число процессов до двух штук.

чат, а что из jmx овских метрик стоит мониторить?

треды?

heap_memory

коллеги, использующие графану, подскажите пжлст, как правильно настроить аннотацию об аварии. Сейчас выглядит вот так: ALERTS{instance="$node:9100", alertstate="firing"} графана повторят аннотацию каждую минуту.

не могу понять, почему она повторяет раз за разом

а подскажите нет ли в эластике некой ручки на подобии прометеевского -storage.local.retention

/_stats/ смотрели?

404 там

вот так попробуйте - /_nodes/stats?pretty=true

ну ок и какая из них? Не сочтите за наглость, но я задавал вопрос мало ли кому начётно известно есть или нет и её название. Тратить время на изучение всего выхлопа сейчас как-то не сподручно. Но спасибо и на том...

не скажу - так как не знаю, но как минимум там можно попытаться ее там найти.

такой рычажок отсутствует, как выяснилось ) не elastic way

чат, а что из jmx овских метрик стоит мониторить?

heap, old gen, new gen, gc cpu usage, gc time spent, survivor space, мб eden space ну и по бинам интересным тебе

такой рычажок отсутствует, как выяснилось ) не elastic way

https://www.elastic.co/guide/en/elasticsearch/guide/current/retiring-data.html

всем привет!

подскажите, есть ли какая-нибудь замена Графиту?

желательно мегабыстрая

prometheus

спасибо

WOWZA

Всё так просто?

а как же все альтернативы, или сообщество пришло к консенсусу?