коварно как :)

а чей бот GitHub Releases? оно умеет личные кастомные подписки?

а чей бот GitHub Releases? оно умеет личные кастомные подписки?

@Civiloid

а чей бот GitHub Releases? оно умеет личные кастомные подписки?

Я пока отключил

Ибо нет времени доделать

4.5.1 графана немножко косячит с внутренними метриками: https://github.com/grafana/grafana/issues/9279

чот косячнй релиз получился

странно что в описании к релизу они нигде не упомянули что хотят перепилить внутренний сбор метрик

у меня так то к нему были претензии к именованию (у метрик которые rate просится окончание mean, а оно у них везде count), но времени все метрики посмотреть и красиво оформить (или переписать) пока небыло

Ибо нет времени доделать

выложить на гитхаб?

выложить на гитхаб?

Да давно, но там говнокод. https://github.com/Civil/github2telegram

Народ, а есть экспортер который юзает inotify ? Чтобы тупо мониторить изменился файл или нет

кто мониторит нжинкс vts-exporter'ом? Как вы решаете, что каждый запрос метрик он считает как 200 и пишет в стату?

В телеграфе есть файлстат, но он вряд ли inotify юзает

кто мониторит нжинкс vts-exporter'ом? Как вы решаете, что каждый запрос метрик он считает как 200 и пишет в стату?

Не пользовался втс, но может там прост можно в отдельный вхост это вынести?

В плюсе так сделал

Не пользовался втс, но может там прост можно в отдельный вхост это вынести?

так и сделано

ладно, посмотрю опции, может как то можно разделить

кто мониторит нжинкс vts-exporter'ом? Как вы решаете, что каждый запрос метрик он считает как 200 и пишет в стату?

А что за втс?

о, нашел

в доке

Server Requests nginx_server_requests{code="1xx",host="test.domain.com"} 0

А что за втс?

https://github.com/vozlt/nginx-module-vts

В телеграфе есть файлстат, но он вряд ли inotify юзает

Надо глянуть, спасибо

Понял, спасиб

кто мониторит нжинкс vts-exporter'ом? Как вы решаете, что каждый запрос метрик он считает как 200 и пишет в стату?

Только собираюсь заюзать. Не понял проблемы, расскажи суть плиз

Только собираюсь заюзать. Не понял проблемы, расскажи суть плиз

не, все там хорошо

Server Requests nginx_server_requests{code="1xx",host="test.domain.com"} 0

А другой host для экспорта ему можно?

это я протупил

да, я так понял он смотрит server {} директивы

и сам раскладывает

у меня просто тестовая конфа - поэтому там так тупо

Аа, ясно

nginx_server_requests{code="1xx",host="*"} 0 nginx_server_requests{code="1xx",host="localhost"} 0 nginx_server_requests{code="2xx",host="*"} 28 nginx_server_requests{code="2xx",host="localhost"} 28 nginx_server_requests{code="3xx",host="*"} 0 nginx_server_requests{code="3xx",host="localhost"} 0 nginx_server_requests{code="4xx",host="*"} 0 nginx_server_requests{code="4xx",host="localhost"} 0 nginx_server_requests{code="5xx",host="*"} 0 nginx_server_requests{code="5xx",host="localhost"} 0 nginx_server_requests{code="total",host="*"} 28 nginx_server_requests{code="total",host="localhost"} 28

будут другие server - будет по другому

привет. есть, кто не спит?

Адепты никогда не спят

нас озарил своим светом сам падре... но адепты не смогли постигнуть свет... дрыхли потому что :)

Если есть вопросы по nginx-vts-exporter - пишите! Могу не увидеть в чате, пинганите в личку. Использую его уже давно.

Всем привет! Есть, наверное, банальная задача по prometheus, но вот уже час читаю документацию по prometheus и до сих пор не понимаю, как мне написать запрос Дано: есть SummaryVec называемый rpc_server_full_duration_seconds У него есть несколько label "call_name", "http_status_code", "http_content_type" Задача: написать запрос для алерта на все коды >= 500 http_status_code пишет исходное значение, т.е. там не 5xx, а 503, 500 и так далее

Писать 5xx или там 4xx можно, но нежелательно, в метриках и на графиках хочется исходные коды видеть

+ часть кодов, типа 401, не являются ошибкой, это просто проэкспайренные сессии

tradeoff'ы от числа timeseries'ев я понимаю, это приемлимо для нашего проекта

может быть {http_status_code=~"5.*"} ?

Да, так тоже можно. А есть ли какой-нибудь способ именно бинарные операции подключить? Простейший пример - ловить все запросы, что выполняются дольше threshold

Для алертов это вряд ли пригодится, но вот для графиков всяких вполне актуальная задача

some_metric_duration{...} > 30

Хорошая идея. Да, действительно, label'ы оно про другое

Спасибо!

Ребята, а watcher в x-pack платный что ли? Через 30 дней часть функционала пропадёт?

Насколько я знаю, весь x-pack платный

А есть какие-то альтернативы? Чтобы алерты из кибаны слать?

из кибаны не знаю, я использую эту https://github.com/Yelp/elastalert вполне адекватная штука Только к заббиксу с костылями прикручивается

есть ещё https://github.com/sirensolutions/sentinl/wiki

но они обе говно неюзабельное

GUI для elastalert https://bitsensor.io/blog/elastalert-kibana-plugin-centralized-logging-with-integrated-alerting

вот про GUI не знал, спасибо

GUI для elastalert https://bitsensor.io/blog/elastalert-kibana-plugin-centralized-logging-with-integrated-alerting

спасибо добрый человек

А кто нибудь elastalert к zabbix прикручивал?

да, не за что. Говорю же, что то говно, что это говно.

Елы - палы. Это не GUI. Это runner.

или редактор.

А кто нибудь elastalert к zabbix прикручивал?

кокойто кадавр

да, не за что. Говорю же, что то говно, что это говно.

Может альтернативу предложишь?

писать логи в заббикс :)

Может альтернативу предложишь?

Мне кажется,вариант один. Ждать когда алерты по эластику добавят в графане.

...по этому вопросу вам @alexanderzobnin ответит

Мне кажется,вариант один. Ждать когда алерты по эластику добавят в графане.

Так в графане алерты тоже не очень юзабельные там, насколько я понял алерт только на статический график создать можно, если у тебя в графике используется переменная (выбираешь из выпадающего списка например), то уже не получится алерт создать. Или я не прав?

В тему платности x-pack https://www.elastic.co/subscriptions

Всем привет. Мне нужно на серверах (баре метал) собирать метрики с jvm, tomcat, os rhel, oracle db что бы рисовать их в графане. Предварительно выбрал прометеус. Есть ли что то более подходящее что то?

у графаны скоро появится поддержка алертов для эластика, скорее бы

скорее бы бекенд апи был, тот алертинг что их вынудили сделать... лучше чем ничего

Так в графане алерты тоже не очень юзабельные там, насколько я понял алерт только на статический график создать можно, если у тебя в графике используется переменная (выбираешь из выпадающего списка например), то уже не получится алерт создать. Или я не прав?

Я не знаю как там сейчас дела в графане, я просто знаю, что особо других вариантов нету))

Всем привет. Мне нужно на серверах (баре метал) собирать метрики с jvm, tomcat, os rhel, oracle db что бы рисовать их в графане. Предварительно выбрал прометеус. Есть ли что то более подходящее что то?

Хороший выбор. Прометеус это новый заббикс.

@tetramin Расскажи про опыт использования x-pack. У меня 30 дней кончилось, а я так и не посмотрел как оно работает.

@tetramin Расскажи про опыт использования x-pack. У меня 30 дней кончилось, а я так и не посмотрел как оно работает.

Я вот только в пятницу установил плагин, а сегодня узнал, что платный. Хотел использовать Watcher. Выглядит неплохо). Настроить можно всё, что нужно. Особого опыта пока нет) Мне на самом деле нужно, чтобы он уведомления присылал, при появлении определённых логов.

А это всё по людски настривается, мыхой в кибане? или как?

А это всё по людски настривается, мыхой в кибане? или как?

Там надо код писать. Примерно 30 строк, чтобы уведомление в слак отправить.

Да. Прямо в кибане.

прикольно

звучит как "хуяк-хуяк и в продакшн без гита и бэкапов"

звучит как "хуяк-хуяк и в продакшн без гита и бэкапов"

чё как не дивапс

звучит как "хуяк-хуяк и в продакшн без гита и бэкапов"

За такое, занаете, бьют. Бывает ногами.

В реальности за такое премии выписывают, а потом это говно падает на поддержку инженером и уже их бьют, если что-то там ломается

из кибаны не знаю, я использую эту https://github.com/Yelp/elastalert вполне адекватная штука Только к заббиксу с костылями прикручивается

А почему не официальный от bitsensor?

Ой, или Yelp и есть официальный?

из кибаны не знаю, я использую эту https://github.com/Yelp/elastalert вполне адекватная штука Только к заббиксу с костылями прикручивается

лучше elastalert хуже нет

В яндекс метрике можно запросить данные вида Россия 300 чел. Москва 150 чел женщин 75 мужчин 75 Питер 100 Женщин 50 мужчин 50 ? Не въехал в их дрилл даун