проблема в том, что у ноды есть таймаут перед выключением, и если в очереди появились тесты, они уйдут на ноду на которой уже были тесты до этого

и будет либо мусор, либо сохранять таймштампы

ну запускай в докере и стреляй в контейнеры

так, идеи и направления для копания Я уже понял, спасибо большое, а то просить делать работу за меня дальше придется

я уже посмотрел апи нетдаты, она умеет графики экспортировать

эм, а линку можно?

http://editor.swagger.io/#/?import=https://raw.githubusercontent.com/firehol/netdata/master/web/netdata-swagger.yaml

https://github.com/firehol/netdata

http://editor.swagger.io/#/?import=https://raw.githubusercontent.com/firehol/netdata/master/web/netdata-swagger.yaml

это нашел, экспорта не нашел :(

там же можно svg забрать не ?

о

спасибо

в телекоме есть более разумное деление

fault management и performance management

метрики - pm

аварии и их корреляция - fm

fault management и performance management

это простл другая плоскость рассмотрения.

более четко формализованая

более четко формализованая

нет, просто это те же яйца вид в профиль. они. не отрицают моей модели и вписываются в нее

https://github.com/prometheus/alertmanager/releases/tag/v0.5.0-alpha.0 https://github.com/prometheus/alertmanager#high-availability

HA-alertmanager

Омг

а по-моему - ништяк

По хорошему сделать бы обзор по всем популярным системам из области мониторинга и рефрешить его

Было бы очень круто такое в гуглодоках запилить, и неофитам давать, чтобы клавиатурку не топтать по пол-дня каждый раз

да ладнныы

Было бы очень круто такое в гуглодоках запилить, и неофитам давать, чтобы клавиатурку не топтать по пол-дня каждый раз

только это всё обновлять надо

сделали жже уже ребята из далматинера

сделали жже уже ребята из далматинера

Тока там скоростные характеристики ояень странные :)

а расскажите, у кого сделан звонок по телефону админу по факту наличия критических проблем в мониторинге - через что и как сделан этот звонок? функционально - я хочу примерно такое: по факту наличия проблемы N минут спустя после возникновения - чтобы через сип делался звонок и по кругу что-то говорилось с номером проблемы. Код до момента «звонить» у меня уже есть, нужно собственно звонить и нужно что-то говорить (текст ту спич? Или сборка заранее надиктованных фраз? Или есть готовый сервис?)

а расскажите, у кого сделан звонок по телефону админу по факту наличия критических проблем в мониторинге - через что и как сделан этот звонок? функционально - я хочу примерно такое: по факту наличия проблемы N минут спустя после возникновения - чтобы через сип делался звонок и по кругу что-то говорилось с номером проблемы. Код до момента «звонить» у меня уже есть, нужно собственно звонить и нужно что-то говорить (текст ту спич? Или сборка заранее надиктованных фраз? Или есть готовый сервис?)

Pagerduty

Туда заносишь бабло, они дают rest api

цены не нравятся

Тогда боюсь только самому писать

а полуготовое что-то есть, чтобы поменьше самому писать? (или - тут есть чатики про воип?)

https://tech.yandex.com/speechkit/

Вроде там можно текст в голос переделывать

А дальше курить то что умеет телефония

Календари с тем кому когда звонит можно на базе гугл календарей сделать

А pagerduty стоит же 9 баксов на юзера в месяц. Разве это дорого?

А... Там звонки стоят дорого, да

и только US

В варианте за 29-49-99$ по всему миру

по всему миру - 25 в месяц и 49 за юзера вроде, закрыл уже страницу

49 за юзера за анлим

не вариант, в общем. Случается такое крайне редко

25 звонков за 29

Ну хз. Если юзеров в пределах 10, то дешевле чем свое делать

есть @ru_voip вроде

юзеров в пределах пяти, но они почти всегда замечают наличие проблемы сразу и исправляют её. Но небольшое количество раз в год случается так, что все отвлеклись и не прочитали алерты по всем каналам уведомлений.

25 или 49 баксов в месяц за юзера для пяти инцедентов в год - слегка перебор

Ну кажется что в таком режиме выгоднее pagerduty

Даже в 9$ вараинте есть пуш уведомления в приложении

Дык можно 9ку платить и всех на телефоны заставить поставить приложение

И звонок

толку от него, если человек прилег поспать на работе или в танчики поиграть и не увидел?

Или платить 25 пока не сделаешь свою

То что по кругу люди его получат

И хоть 1 из 5 да проснется

И оправданность трат она зависит от того сколько это все сэкономит денег компании

нюанс в том, что кггда в пределях пяти человек - ночью дежурный максимум один, а остальные штатно спят. сделать свое не кажется сложной проблемой. Как сделаю, если получится оторвать от остального кода - выложу на гитхаб )

толку от него, если человек прилег поспать на работе или в танчики поиграть и не увидел?

А, и эт, у них есть вроде бы триал, пока пилите свою систему можете попытаться триал взять и отказаться потом

а расскажите, у кого сделан звонок по телефону админу по факту наличия критических проблем в мониторинге - через что и как сделан этот звонок? функционально - я хочу примерно такое: по факту наличия проблемы N минут спустя после возникновения - чтобы через сип делался звонок и по кругу что-то говорилось с номером проблемы. Код до момента «звонить» у меня уже есть, нужно собственно звонить и нужно что-то говорить (текст ту спич? Или сборка заранее надиктованных фраз? Или есть готовый сервис?)

Как показывает практика, ни СМС, не телеграм, не телефон их не будет. Мы пробовали sipp он и тестит сервис телефонный и звонит (сигнализация + запись чего сказать, но это не тривиально)

Будит* eveb

нюанс в том, что кггда в пределях пяти человек - ночью дежурный максимум один, а остальные штатно спят. сделать свое не кажется сложной проблемой. Как сделаю, если получится оторвать от остального кода - выложу на гитхаб )

Сделав свое встает задача того как мониторить свое

И вот упал воип

Чо тогда делать?

Как показывает практика, ни СМС, не телеграм, не телефон их не будет. Мы пробовали sipp он и тестит сервис телефонный и звонит (сигнализация + запись чего сказать, но это не тривиально)

ну вот в конце - будят меня клиенты ) будет уже хорошо, даже если будить будут по прежнему меня, но мониторинг, а не клиенты.

И вот упал воип

это, на первый взгляд, легко решается двумя вдс в разных дц

это, на первый взгляд, легко решается двумя вдс в разных дц

И проблемами синхронизации сервиса

это всё решаемые до какого-то предела проблемы

И вот упал воип

Мы ставили модемы gsm на такой случай

говорилку можно на asterisk сделать

это всё решаемые до какого-то предела проблемы

Думаю, что с такими вопросами вам лучше с аплинками пообщаться, у них частенько есть переадресации условные и мониторинговые разные сигнализации, это собственного монитора не отменяет, по клиентам, конечно

дешево и сердито

а его уже sip'ом цеплять

сделали жже уже ребята из далматинера

Ой дай Линк пожалуйста

сделали жже уже ребята из далматинера

мммм?

https://blog.dataloop.io/top10-open-source-time-series-databases

Но перформанс они не меняли а брали из документации и ишьюз на гитхабе

Без учета паттернов нагрузки, настроек и разницы в железе

Дак это не то

Это только про метрики

Ну т.е. вообще не то о чем я

Я на хую простите уже ваши метрики вертел. Метрики ради метрик Богу метрик. Кроме нахуй никому не нужных метрик, есть ещё чекалки и алерты

Я на хую простите уже ваши метрики вертел. Метрики ради метрик Богу метрик. Кроме нахуй никому не нужных метрик, есть ещё чекалки и алерты

Нужно все

И метрики и алерты

И чекалки и коллекторы

Но проблем почекать нет особых

Есть ицинга-нагиос и они good enough

А вот с методиками проблема

А без метрик не сделать anomaly detection например

Но проблем почекать нет особых

я говорил об общем описании, чтобы было примерно понятно кто что. суть была - общая картина, а не сравнение зранилок

А без метрик не сделать anomaly detection например

да и хер с ним

это, на первый взгляд, легко решается двумя вдс в разных дц

Тремя.. Нужен еще арбитр

я говорил об общем описании, чтобы было примерно понятно кто что. суть была - общая картина, а не сравнение зранилок

Алертинг и метрики они параллельно, поэтому я не думаю что можно сделать прям очень общее описание

да и хер с ним

Ну как сказать... Не очень то и хер