cardvisor более не обязателен

метрики можно снимать напрямую с докера с 17,06 кажется

Всем привет. Юзаю influxdb+grafana для визуализации всяких-разных метрик с телеграм-бота. Живу радостно и счастливо и вдруг появляется у меня желание посылать раз в день уведомление с набором метрик куда-нибудь У grafana удачно есть возможность alert'а в тот же телеграм: я набросал график, куда впихнул все нужные мне метрики, спрятал его подальше и поставил алерт - проверка раз в 24 часа и условие, которое заведомо всегда true. Но grafana оказалась сильно умнее меня и решила, что посылать алерт дважды, если условие всё ещё true - не надо Вопрос: как мне хитро побороть графану с её излишне умными алертами / как иначе делать ежедневные отчеты?

свеженький доклад про то как готовят пром в cloudflare https://www.youtube.com/watch?v=lHtY7TUsLzk

метрики можно снимать напрямую с докера с 17,06 кажется

Метрики контейнеров туда тоже добавили? Потому что там были только метрики самого докер демона, но не контейнеров

Всем привет. Юзаю influxdb+grafana для визуализации всяких-разных метрик с телеграм-бота. Живу радостно и счастливо и вдруг появляется у меня желание посылать раз в день уведомление с набором метрик куда-нибудь У grafana удачно есть возможность alert'а в тот же телеграм: я набросал график, куда впихнул все нужные мне метрики, спрятал его подальше и поставил алерт - проверка раз в 24 часа и условие, которое заведомо всегда true. Но grafana оказалась сильно умнее меня и решила, что посылать алерт дважды, если условие всё ещё true - не надо Вопрос: как мне хитро побороть графану с её излишне умными алертами / как иначе делать ежедневные отчеты?

не использовать алерты графаны

они там для галочки

не использовать Influx он не база.

А графану-то можно использовать? :)

но если у вас всё хорошо. то ладно

алертинг в графане сыр. но не торт :)

графана - отличная. но алерты у нее не нужны

что автоматом ведет вас к алертам через капаситор.

чего вы очевижно хотите избежать.

понимаю да.

Оффтопный вопрос - почему инфлукс говно Неоффтопный вопрос - как тогда мне прикрутить туда daily report?

тут люди мечтают о бекенд апи к графане, что бы напилить нормальный алертинг

туда - это куда-нибудь, вы мне можете слов наговорить, я их нагуглю

К графане я привязан, но не прям сильно-сильно

погугли инфлюкс в этой теме.

отчет это скорее про redash/metabase

графана оперативный мониторинг да

Напоминаю, что у меня объемы небольшие: до 30 событий в секунду

https://www.influxdata.com/time-series-platform/kapacitor/

вот алертилка

но больше всех с инфлюксм работал @freeseacher

от графаны очень нравятся красивенькие графики и возможность их херачить iframe'ом куда мне нужно

так что, я бы доверял его мнению про не база

30 событий в секунду можно писать в блокнот. при помощи бабушен с подъезда.

там справится всё что угодно

так что довольны стеком - ок.

берите капаситор.

ради daily report?

дайли репорт ! = алерт

согласен полностью

для репортов есть редаш. он умеет с инфлюксом

Ага

но он толстый. очень.

:(

Чет как-то всё грустно :(

не

всё ровно

В принципе, ничто не мешает мне на коленке нахерачить скрипт, который сходит, соберет и раз в сутки всё отправит, но графана была так близка

девопс ворлд

не проще для дейли репортов на таких обьемах написать скрипт и в крон его?

да

скрипт проще

Как вариант по крону снимать с графаны скриншот в пдф каким-нибудь хедлесс хромом

да не, мне графики не нужны

у графаны он встроен

к тому же там есть png генератор

так что там директ имидж вполнес ебе есть

просто оно так красиво мне высрало алерт, но один раз... и мне стало так невообразимо грустно, что захотелось закостылить

Пдф? Ну-ну.... ))

Пдф? Ну-ну.... ))

кажись есть

не пробовал конечно

для пдфки есть плагин какой-то

но это только флаг

нее. позырил в js захардкожено Png

Если прямо очень хочется, можно найти в коде графаны это условие и закоментить

да

/usr/share/grafana/vendor/phantomjs/render.js

тут вот

метрики можно снимать напрямую с докера с 17,06 кажется

метрики контейнеров?

вот вы сейчас эти вопросы задаете и я чот засомневался.

ибо прям не заюзал еще

я так вобще нуб

начал копать отсюда - https://grafana.com/dashboards/893 там есть линк на гит репу с конфами. подстроил под свою лабу. и в общем в этом дашборде хочу, чтобы показывало кол-во гостей на ноде.

в смысле контейнеров. дурацко-длинное слово привык к гостям

кто там спрашивал почему инлюкс гавно? вот поэтому:

тупо с нифига ушел в 100% CPU

кто там спрашивал почему инлюкс гавно? вот поэтому:

неужели кто-то этого не знал? Тут выше был человек, у которого, ЕМНИП, как раз influx страртовал 6 часов

тупо на старт ушло 6 часов

тупо с нифига ушел в 100% CPU

Compaction пришел вероятно

Compaction пришел вероятно

Он самый, только в этот раз он решил показать на что он способен ))

Ну так данных много, компактить надо тоже много

а ретеншен какой ?

Ну так данных много, компактить надо тоже много

Данных кот наплакал - 18Гиг/ 14к метрик в секунду, если он на такой мелочи сдыхает то что дальше будет (а будет раз в 5 больше минимум)

а ретеншен какой ?

30 дней с суточными шардами

тогда твой инфлюкс на мой вглязд делал полную хрень. :)

там правда хост хиленький (4 ядра, 8 гиг оперативы) и пока есть возможность залить проблему железом, но, пойду ка я завтра все-таки ныть руководству по поводу переезда на кликхауз ))

нельзя взять и перехать на кликхаус. надо всё прееделывать увы :(

вопрос про метрики в графане count(rate(container_last_seen{name=~".+"}[$interval])) этот query вычисляет количество контейнеров. но в это кол-во попадают ВСЕ контейнеры которые размещены на всех нодах в swarm. мне надо добавить в этот query еще один параметр - instance - чтобы выбирая имя нода в дропдаун на дашборде, мне отображалось кол-во контенейров именно на этой ноде. как это сделать?

Грусть в кликхауса это при конвертации типов string int ну и сложность с транспонированием в широкую таблицу из узкой...

Пытаемся тут кластер большой собрать ~100GB день метрик, ротация раз в год, и похоже лучшее что нам подходит это именно ch но есть с ним сложности :(

Ну и собственно вопрос - верный ли выбор или есть что лучше?

Грусть в кликхауса это при конвертации типов string int ну и сложность с транспонированием в широкую таблицу из узкой...

Что там грустного? Только буковок много. Тогда большинство языков со строгой типизацией - грустные. Зато без сюрпризов, а может и помочь собственные косяки отловить. Грусть скорее в фиксированных месячных партициях и удалением только таблицы целиком или по партициям. Если мусорные данные попали - вычистить трудно.

Что там грустного? Только буковок много. Тогда большинство языков со строгой типизацией - грустные. Зато без сюрпризов, а может и помочь собственные косяки отловить. Грусть скорее в фиксированных месячных партициях и удалением только таблицы целиком или по партициям. Если мусорные данные попали - вычистить трудно.

Как минимум невозможность преобразовать string с NULL в int

toIntOrZero() не подходит?

toIntOrZero() не подходит?

Нет, мне нужны и числа и 0 и NULL

Ну тогда только через case или if. Длинно конечно.

Ну тогда только через case или if. Длинно конечно.

Не подходит, мне нужно сделать широкую таблицу и уже в ней далее делать вычисления, сейчас пока думаю насчёт замены типа string на int для колонки, тогда все работает, но там ещё лежат массивы которые придётся переносить...

Int по скорости выигрыш почти наверняка даст. Может и стоит заморочиться.

Int по скорости выигрыш почти наверняка даст. Может и стоит заморочиться.

вот я даже не знаю с одной стороны удобность и единообразие, с другой - скорость... свой вопрос про типы я в основной чат КХ закинул посмотрю что там скажут баг это или фича, по мне так баг, насчет инта буду думать и наверно стоит провести бенчмарк

вопрос про метрики в графане count(rate(container_last_seen{name=~".+"}[$interval])) этот query вычисляет количество контейнеров. но в это кол-во попадают ВСЕ контейнеры которые размещены на всех нодах в swarm. мне надо добавить в этот query еще один параметр - instance - чтобы выбирая имя нода в дропдаун на дашборде, мне отображалось кол-во контенейров именно на этой ноде. как это сделать?

ну так добавь метку instance

Не подходит, мне нужно сделать широкую таблицу и уже в ней далее делать вычисления, сейчас пока думаю насчёт замены типа string на int для колонки, тогда все работает, но там ещё лежат массивы которые придётся переносить...

Написать приложение, которое будет стоять перед базой и делать как надо и слать данные уже в бинарном виде?