у меня сейчас так сделано

но у меня пока очень мало кода в римане

Кстати, уважаемые девопсы

тут кто-то ещё риманом пользуется?

Неа. Но арт оф мониторинг про него

Уверен ты его уже читал

читал

просто риман настолько шикарен, что я не понимаю, почему про него никто не говорит

нагиос вон вспомнили

заббикс этот постоянно

а чо у римана есть граифиеский интерфейс конфигурирования через браузер ?

нит

а нафига он?

Он нужен для решения проблемы синтаксиса.

алертинга от имадж вьювера не хочешь ты. зачем бар в пылесосе ты спрашиваешь?

ты не прав.

нет. и неправильно это. это везде отдельный сервис. даже где он якобы встроенный. поставь ты нагиос и не мучай попу

и ты говоришь нагиос это не мучать жопу ? когда нужно чтобы девелоперы алерты создавали.

Пчел, у него нет ресурса в виде девелопера

Хостинг же

Все приведенные примеры "как захуярить свои алерты" плохи очень многими вещами

во первых, ты через неделю захочишь на графиках видеть когда у тебя срабатывали алерты, тебе придется еще куда то складывать эвенты и тащить их на графики

во вторых у тебя уже есть сервис, который ходит в дата сорс и кешит дату

если у нас алертинг простой, по трешолду и функции а не по окну, почему бы это не делать той же хери что и графики рисует

в очередных не стоит недооценивать конфигурацию через клики мышек.

в очередных не стоит недооценивать конфигурацию через клики мышек.

Ога да

как бы мы за это ненавидили заббикс, обратное тоже плохо работает. У меня есть опыт скармливания Bosun девелоперам, и не полетело

в четвертых, в девлопменте есть одна постоянная большая жопа тестами

рано или поздно их становится дохуя они не работают. И здесь вступает в работу подход change it - graph it

кгда ты приучиваешь девелопера к тому, что каждое изменение свое он обрисовывает метричкой, он накидывает это сам в графане, и ему удобней там же 5 сек потратить и накинуть алерт, чем пиздовать куда то и писать описание алерта

в пятых - нету человеческого алертинга для графита до сих пор )))

и ты говоришь нагиос это не мучать жопу ? когда нужно чтобы девелоперы алерты создавали.

девелоперы алерты? нахера?

Хм, потому что девелопер за сервис отвечает

во первых, ты через неделю захочишь на графиках видеть когда у тебя срабатывали алерты, тебе придется еще куда то складывать эвенты и тащить их на графики

это алертеры сами умеют обычно

Хм, потому что девелопер за сервис отвечает

это в каком мире?

В нормальном, который в 2016м а не в 2001м )

это в каком мире?

в том где девелоперы пишут код который они же ломают

в пятых - нету человеческого алертинга для графита до сих пор )))

что такое "алертинг для графита"?

Мы форсим все алерты сначала девелоперам, а эскалация уже админам

Он нужен для решения проблемы синтаксиса.

У меня профдеформация, я на Лиспе много писал, проблемы синтаксиса не понимаю :)

в том где девелоперы пишут код который они же ломают

окей. если они отвечают за сервис, не вижу проблемы с нагиосом

тулза для алертинга по графиту

тулза для алертинга по графиту

что такое алертинг по графиту? графит это вообще спецификация

окей. если они отвечают за сервис, не вижу проблемы с нагиосом

им в 2 места ходить надо, и там воркфлоу длинный получается

что такое алертинг по графиту? графит это вообще спецификация

http://graphiteapp.org/ Graphite is an enterprise-ready monitoring tool that runs equally well on cheap hardware or Cloud infrastructure.

им в 2 места ходить надо, и там воркфлоу длинный получается

да хоть в три. не получается там никакого длинного воркфлоу. ну и вообще - нарисуй морду к нагиосу, интегруруй ей с гарфаной и всё. мы опять в виде срача вернулись прости к дашборду. один хер у всех харвестеров алертинг отдельным сервисом

И зачем ?

зачем мне писать отдельный сервис, а потом его обратно интегрировать ?

в чем плюсы данного решения ?

Воркфлоу длинный получается потому что после того как ты накидал график, тебе нужно написать чек, закоммитить его, его должен кто то аппрувнуть, а потом запустить деплой новой конфигурации.

Да потому что у всех это всё равно отдельный сервис. Ни один мониторинг это не намащзывает. Ну может кроме заббикса. Другой вопрос, что как девелопер ты этого не видишь. Плюсы а том, что они полноценные алертеры

ну и после этого обнаружить что тебе нужен movingavg а не last5 )

Воркфлоу длинный получается потому что после того как ты накидал график, тебе нужно написать чек, закоммитить его, его должен кто то аппрувнуть, а потом запустить деплой новой конфигурации.

а причем тут график вообще?

а причем тут график вообще?

при то что, обычно сначала собирают метрику, смотрят на нее (визуализируют) и понимают как ее алертить лучше чтобы было меньше фолзпозитив \ негатив

или ты алерт создаешь еще до того как метрика собралась ? )

при то что, обычно сначала собирают метрику, смотрят на нее (визуализируют) и понимают как ее алертить лучше чтобы было меньше фолзпозитив \ негатив

О! Именно так. Ты понимаешь какой какой евент создавть и её кто-то алертит. и отличе якобы разных подходов только в том - заебошил ты свой скрипт с этой же морды, или с соседней

ну и логичнее что удобно с одной нет ?

зачем мне переключение контекста, когда у меня алерт привязан вот к этой метрике которую я тока что нарисовал

или ты алерт создаешь еще до того как метрика собралась ? )

Я алерчу по событию. Которое наступает или по цепочке каких=то подсобытий (но честно я так не делаю никогда) или по превышению/уменьшению какого-то параметра. Кои я беру из какой-то базы. Как-то так. Хотя обычно я по прямым параметрам смотрю превышения, но это я не прав и это мои проблемы

нам сюда жизненно необходимо затащить Чистякова и Машу

Я тут

зачем мне переключение контекста, когда у меня алерт привязан вот к этой метрике которую я тока что нарисовал

Затем что в итоге сейчас никто не умеет делать это вместе по-человечески. Пойми меня правильно, если бы в дашборде графаны бал интеграция с icinga2 и можно было бы создавать события для алертинга прямо по значению на грфике, а ещё круче как следящую (вот ткой вот шаблон) - это было бы круто.

Но в 2016 году этого нет. И бегать вокруг полусервисов странновато. Это прости как брать пример с меня, который в 2016 году перлом по rrd графики строит

смотри. вот стандартный алерт у меня http://hastebin.com/ocagizajow.py

И/

мне чтобы понять что тут все ок, полюбому приходится это дело визуалайзить,а потом копипастить в нагиос (по факту сейчас в босун) это геморой лишний и ненужный

Ну так скажем, в идеальном мире можно было бы избежать

как ?

вы мне скажите как мне дата локалити у хбейза со дна поднять

Сделай мейджор компакшн всех таблиц

when you run major compaction, the data locality is restored. Run major compactions on a busy system in off-peak hours. говорили они. Но это почему то не работает =(

А у тебя locality сейчас везде 0, да?

ERROR: S client not available

Сделай мейджор компакшн всех таблиц

не срабатывает, пробовал конечно

А у тебя locality сейчас везде 0, да?

да, я думал может как то 2 мастера на такое поведение влияет

может на это как то HA негавтивно влияет...

Нет Скорее всего, mismatch длинных/коротких имен в DFS и на region servers

Нет Скорее всего, mismatch длинных/коротких имен в DFS и на region servers

да, я тоже уже в hosts все зафорсил

А у тебя native libs есть и подхвачены? Unix socket включен в конфиге?

да, нет.

а второе зачем ?

Слушай) я ща заглянул там 44% ))

вероятно правка имен помогла )

да норм. у него просто хайлат на заббикс стоит

Заббикс кал

и линукс тихо умрет на десктопе

Десктоп уже умер

лично я рад, что появилась единая система логирования

Это какая?

тут кто-то ещё риманом пользуется?

@prepor

тулза для алертинга по графиту

А? Чо? Мойра?

А? Чо? Мойра?

Если у них бусун не взлетел, то мойра и подавно не взлетит

Десктоп уже умер

Жиф же, с чего умер? Вот только линукс на десктопе даже не рождался

Если у них бусун не взлетел, то мойра и подавно не взлетит

Вот вот...

у нас кстати народ матерится, но использует...

народ материться и за них все делаю я .

но это тупиковый путь

минус в том что в графите метаданных для мониторинга катастрофически не хватает

поэтому как в мастер вмерджат, буду тестировать

минус в том что в графите метаданных для мониторинга катастрофически не хватает

я сейчас прошу всех в эластик эвенты формализованные хоть как то кидать.

минус в том что в графите метаданных для мониторинга катастрофически не хватает

ога да

я сейчас прошу всех в эластик эвенты формализованные хоть как то кидать.

эластик быстро загибается если его начать под алертинг брать )

а для метаданных не сильно спасает

Посоны

эластик быстро загибается если его начать под алертинг брать )

не не не, чисто эвенты, чтобы не в графите хранить, и болше данных с эвентом нести

А инициатива metrics 2.0 заглохла, да?

Да вроде нет.

А инициатива metrics 2.0 заглохла, да?

нет мало-мальски быстрой базы которая бы это умела хранить и юзать

но все хотят