@ru_devops
Jack of22.08.2016
23:43:56
23:43:56
А десктопный линуксовый жрет память как не в себя
Он у меня сегодня *опять* был убит оом киллером
Александр
Phil23.08.2016
06:58:39
06:58:39
Вобщем в графане алертилка работает, умеет слать в слэк(вебхук\почту не проверял), дашборд вполне се человечный, есть примтивный фильтр(ок\критикал\пендинг), можно из него сразу перейти в редактирование алерта, пока нет хистри по алертам, пока нет возможности сказать OR в одном алерте, только AND.
Пока тока 2 статуса ворнинг\критикал.
test alert просто рисует джейсончик с результатом и смотреть чо как почему алерт сработа приходится всматриваясь в него.
Для начала вполне ок.
может я старомолден, но я не понимаю что такое "умеет слать". ну есть же отработанные API. пусть отдаёт тому кто сам пошлёт
Google
ptchol23.08.2016
07:01:33
07:01:33
умеет слать, это значит от из коробки может дергать slack inconming hook и рисовать красивенький алерт в слеке
тоже самое с почтой
если тебе этого недостаточно есть вебхук
Vladimir23.08.2016
07:04:26
07:04:26
Exec это слишком олдскульно
Vladimir23.08.2016
07:05:03
07:05:03
Ага. Балансер для exec, в виде баш скрипта входящего по ссш на ноды
ptchol23.08.2016
07:05:19
07:05:19
ну можно конечно в очередь укладывать
Vladimir23.08.2016
07:06:21
07:06:21
Тогда смысл в exec теряется
ptchol23.08.2016
07:06:40
07:06:40
чойта
Googleptchol23.08.2016
07:07:01
07:07:01
очередь можно и на smtp хошь сказать ? ) а обработчик свой нахерачить ? )))
Vladimir23.08.2016
07:07:13
07:07:13
А это идея
Надо как нибудь когда ояень скучно будет нафигчить примеры того как делать не надо
А еще можно one to many через shared mailbox или даже через мэил листы сделать
ptchol23.08.2016
07:09:33
07:09:33
чесн говоря на smtp обработчик туго писать
лучше доставлять на локальный ейлбокс и взять deovecot там вот можно как угодно куда угодно подлезть
хотя медленно наверно будет )
Vladimir23.08.2016
07:10:50
07:10:50
Если речь об антипаттернах, то это даже плюс
Phil23.08.2016
07:11:43
07:11:43
и парсить в баше входные аргументы ?
И? Ну можно и не ыв баше и входящий поток. Но это обеспечивает отличную гибкость способов алертаptchol23.08.2016
07:12:09
07:12:09
такую же, какую и http
Phil23.08.2016
07:12:17
07:12:17
ну можно конечно в очередь укладывать
Если у тебя алертов столько, что надо укладывать в очередь, то что-то не так с твоим алертеромptchol23.08.2016
07:13:12
07:13:12
если ты про "гибкость" то у тя там очень длинный однострочник )
Phil23.08.2016
07:13:34
07:13:34
если ты про "гибкость" то у тя там очень длинный однострочник )
мммм... ну там какой-нибулдь отсыл в жаббер или телегу - они очень простыеptchol23.08.2016
07:13:58
07:13:58
который парсит все, создает форматированное сообщение, а потом передает клиенту который засылает
Phil23.08.2016
07:14:47
07:14:47
Коллеги. Туплю не могу мир рушится. gitolite. У меня нет логического доступа туда. Но есть физический к основной репе. Надо ключ удалить. Как?
Vladimir23.08.2016
07:17:04
07:17:04
И? Ну можно и не ыв баше и входящий поток. Но это обеспечивает отличную гибкость способов алерта
Нвлабать оберику реализующая rest-api делов на 15 минутptchol23.08.2016
07:17:09
07:17:09
@Civiloid а вы stackstorm не пробовали ?
Phil23.08.2016
07:17:41
07:17:41
Нвлабать оберику реализующая rest-api делов на 15 минут
ну так скажем это сильно сложнее просто скрипта. плюс надо подымать сервис. за которым тоже бы следить и снимать с него метрики )))))GoogleVladimir23.08.2016
07:17:59
07:17:59
Неа
Phil23.08.2016
07:18:07
07:18:07
Нвлабать оберику реализующая rest-api делов на 15 минут
кстати, я наверное за 15 минут REST не наклепаюVladimir23.08.2016
07:18:14
07:18:14
За скриптом тоже надо следить
Phil23.08.2016
07:18:35
07:18:35
За скриптом тоже надо следить
нет. не надо. его не надо подымать, держать подымалку и вот это вот всеу меня минут 30 уёдет только на понимание как его вообще поднять. я сходу даже не скажу
вопрос на самом деле простой - графана может это наоборот состоянием наружу отдать?
Vladimir23.08.2016
07:23:50
07:23:50
которая библиотечная
нет. не надо. его не надо подымать, держать подымалку и вот это вот все
его не надо подымать и держать подымалку, но нужно собирать статистику работы, мониторить работу (успех-неуспех) и пр.в этом плане разница ничтожно мала
Phil23.08.2016
07:25:12
07:25:12
Vladimir23.08.2016
07:25:50
07:25:50
и более того, скрипт мониторить сложнее
Semyon23.08.2016
07:50:30
07:50:30
Я чего-то не понял про кластеризацию инфлюкса
Я так понимаю они её предлагают купить вместе с клаудом
но у них есть InfluxDB Relay
оно живо вообще?
GoogleVladimir23.08.2016
07:51:55
07:51:55
и оповещать об этом
Semyon23.08.2016
07:52:12
07:52:12
в лог писать :)
Semyon23.08.2016
07:52:21
07:52:21
лог потом логстэш сожрёт
Phil23.08.2016
07:52:47
07:52:47
Semyon23.08.2016
07:52:51
07:52:51
У меня есть ровно вот такая система. Есть куча скриптов с exit кодами и stderr
они пишут в логи, которые потом уезжают в ELK
палковато
AdminERROR: S client not available
Vladimir23.08.2016
07:53:17
07:53:17
в смысле exit code + stdout/stderr это хорошо, но когда это дергает абстрактный софт то сложно предсказать что дальше
Phil23.08.2016
07:53:34
07:53:34
а как потом софт это обрабатывать будет?
а собственно он серсис понимает? мен собственно парит не факт реста, а факт содержания сервисаVladimir23.08.2016
07:54:12
07:54:12
а собственно он серсис понимает? мен собственно парит не факт реста, а факт содержания сервиса
сервис полностью независим и самодостаточен, ты можешь поднять nginx и мониторинг по 500-кам от него делать дажеесли хочешь
и тебе будет плевать на то что о 500ке думает сторонняя штука которая сгенерировала событие
Vladimir23.08.2016
07:55:05
07:55:05
а что плохого в содержании сервиса?
у них есть ынтерпрайз версия с кластеризацией
Google
Ilya23.08.2016
07:55:59
07:55:59
Elastic + Logstash + Kibana, ёба для анализа логов
У нас для этого есть пара специально обученных людей >____>Качество не в пример выше
Semyon23.08.2016
07:56:26
07:56:26
в смысле они руками логи анализируют 8/5? :)
Ilya23.08.2016
07:56:47
07:56:47
Зачем руками? grep/sed/awk
Phil23.08.2016
07:56:48
07:56:48
Vladimir23.08.2016
07:56:55
07:56:55
но у них есть InfluxDB Relay
ну оно типа не дает возможности делать распределенные запросы по кластеру. Т.е. это просто штука которая пишет копию потока в другой серверSemyon23.08.2016
07:57:12
07:57:12
ну уже хлеб
Ilya23.08.2016
07:57:14
07:57:14
Люди научились работать с текстовой информацией вроде. По крайней мере проходил слух, что можно не читать всё, а выбирать только нужное
Vladimir23.08.2016
07:57:22
07:57:22
простой способ сделать HA, умеющий инфлюксовый протокол, но не более того
Semyon23.08.2016
07:57:42
07:57:42
Люди научились работать с текстовой информацией вроде. По крайней мере проходил слух, что можно не читать всё, а выбирать только нужное
тогда я тебя не понял, ELK делает вот ровно это самоеVladimir23.08.2016
07:57:48
07:57:48
веб-инфраструктура достаточно стандартна чтобы не париться о ее поднятии
Phil23.08.2016
07:57:49
07:57:49
веб-инфраструктура достаточно стандартна чтобы не париться о ее поднятии
причем тут стандартно или нет. это не очень просто. я вот сходу не могу прижумать как бесплатно поднять 5 сервисов и не потерять ихSemyon23.08.2016
07:58:44
07:58:44
в докере! :)
Phil23.08.2016
07:58:48
07:58:48
Наверное я за час придумаю и опишу. Но это не то чтобы бесплатно
А да, ещё и этой абстракции не хватало
Vladimir23.08.2016
08:02:10
08:02:10
причем тут стандартно или нет. это не очень просто. я вот сходу не могу прижумать как бесплатно поднять 5 сервисов и не потерять их
отчасти хороший конфигурейшн менеджмент решает эту задачу - описал в папете класс и он будет и в мониторинге и доступен
Открыть в Telegram