бггг

я же говорю.

нужно чтобы фон алертов ложных от мониторинга в день был на одном уровне

отклонения от него является указанием на проблему

садист

зато это проверенно

вообще посылать алерты для мониторинга мониторинга это хреновая идея

тоже ватант да

я думал про него

раз в час посылать алерт "В Багдаде всё спокойно" — это же ад

но он сработает когда алерты первого порядка будет кт то сомтреть

а алерты второго ктото другой

ну то есть да

так можно

не

это стремная затея

но это мало чем отличается от специально обученные люди смотрят в монитор

"фоновый шум" от мониторинга хорош тем, что он срабатывает в разных метсах как бы

и т.о. проверяет не один пойнт

но ведь каждый раз, когда мониторинг генерирует фолс-алерт умирает котёнок!

да

согласен, что вариант ебанутый.

с другой стороны с таким подходом я лучше понимаю общее "состояние" системы вцелом

все эти предикшены настроить сильно сложно

а низкие пороги и "размер фона" работают лучше

с другой стороны с таким подходом я лучше понимаю общее "состояние" системы вцелом

что то у меня давно место не кончалось. видимо что то случилось

так да ?

не, место как раз один из немногих вариантов где предикшены хорошо работают

я скорее про алерты связанные с ио \ цпу \ респонс кодами\ отклонениями в очередях

если конечно вы классные пацаны, у вас там автоскейлы и вверх и вниз и еще раз в день отчет по результатам скелйинга отсылается и стоимость там написана сразу. ну вы классные.

у меня все гораздо уже ))

*хуже

ня ?

как вы мониторите, что ваша система мониторинга работает?

Перекрестный мониторинг мониторинга мониторингом

В смысле что у нас их две (по графиту и нагиос)

И нагиоса более 1. Вот нагиосы друг друга смотрят

И по графиту тоже смотрим

И графитный нагиосом до кучи

Mexican standoff

У меня тут мониторинг один, я пока склоняюсь к deadman switch

Elasticsearch + Prometheus, какой экспортер используете?

мля - а я верно понимаю что influxdb кластерный йок?

ога да

хулишитхэппенс прирключился ;( хорошо что вовремя и я на нее присесть не успел

ну они лочгино хотят жрать чо

односерврная конфа вполне работает

мне надо регион дистрибутед

а я тут наверное самый главный хейтер инфлюкса

мне надо регион дистрибутед

дублировать чо...

а что с ним?

циклические ребуты

выходы за границы массива

долгий старт

я его так и не попробовал, жил на графите трогать нельзя было

отвертительная обвязка

косяки со сменой размера шарда

мне продолжать ?

горшочек не вари

лучше посоветуй на что взглянуть

лучше посоветуй на что взглянуть

opentsdb )

Пром

пром - сингл нодная ? как быть когда регионы - пусть там стоит свой пром, а кверить по набору регионов как ?

ERROR: S client not available

opentsdb - нексолко оверхед ;)

а расскажите за opentsdb

почему все улыбаются, когда про неё говорят?

Потому что жаба жи

и чево?

а

Runs on Hadoop and HBase

понятно

пром - сингл нодная ? как быть когда регионы - пусть там стоит свой пром, а кверить по набору регионов как ?

federation https://prometheus.io/docs/operating/federation/

opentsdb - нексолко оверхед ;)

разве ? вам нужно на несколько регионов же. это уже предполагает большУю инсталяцию. В иных случааях достаточно релеев всяких.

понятно

да брось, это лучше чем многое что есть.

хотя я не пробовал)

и чево?

да "жаба" уже достаточно, чтобы к продукту относиться крайне осторожно

в клаудере сертифицировался по слонам и с хадуп лайком все время имею дело, просто не хочу, вот не поверишь достало стопятьсот точек отказа

да "жаба" уже достаточно, чтобы к продукту относиться крайне осторожно

разве ?

помоему это из разряда баек школьничков )

помоему это из разряда баек школьничков )

this

в клаудере сертифицировался по слонам и с хадуп лайком все время имею дело, просто не хочу, вот не поверишь достало стопятьсот точек отказа

у меня совершенно обратные ощущения. 100500 компонент, дебаг в случае проблем не самый простой, но чтобы это упало прям упало, нужно постараться, в случае корректно настроеных HA

и 99.99% проблема решаются тупым рестартом, что не самое худшее.

https://github.com/prometheus/prometheus/releases/tag/v1.2.1

я его так и не попробовал, жил на графите трогать нельзя было

Ну графит мачштабируется хорошо

И скорость приема данных на ноду высокая.

Разве что тэгов нет

Ну и жестко требует ссд

И скорость приема данных на ноду высокая.

А я и не спорю, он хорош, но хочется свежего мяса

А я и не спорю, он хорош, но хочется свежего мяса

Тогда стоит начать с того что не устраивает

Господа, всем привет! У кого-то есть положительный опыт с datadog?

Кто-то его использует для чего-то некоробочного?

он жеж дорогой

Мне на ЛинуксКон понравились демки sysdig-cloud

Кстати