можете по пунктам вкратце перечислить дефективность такой конфигурации?

не. я просто ассоциации сказал

Что-то тут не подсказывают(

а должны?

не. я просто ассоциации сказал

На основании чего? Много общего мусора в одном графике?

а должны?

Желательно чтобы подсказывали)

На основании чего? Много общего мусора в одном графике?

Пробирки

Пробирки

такие комментарии, думаю, можно смело вычищать.

Кто-нибудь в telegraf настраивал мониториг софтового или железного рэйда?

а там только через exec можно

а там только через exec можно

спс

ну по крайней мере так было во времена когда мне это было нужно. это в районе 1,0 версии

А по алертингу ещё подскажите, у telegraf есть родной механизм через Kapacitor, есть вариант через алерты в графане. Может какие-то ещё варианты есть?

да. можно еще через alerta

или телеграф собирать промом и через пром

эта алерта? https://github.com/alerta/alerta

эта алерта? https://github.com/alerta/alerta

да она

так, а какой способ лучше то?)

который вам подойдет

тот который вам покажется легче собрать и обслуживать

Господа, я пытаюсь приспособить прометей под мониторинг snmp и blackbox через соответствующие плагины, проблем с написанием конфигов, в общем-то, нет, вопрос: есть ли готовые интерфейсы к генерации конфигов, чтобы можно было пользователям раздать возможность добавлять узлы самостоятельно? Наваять интерфейс на том же фласке - дело нехитрое, просто может уже есть что готовое? Сходу не нагуглилось.

Ну и второй вопрос сразу: в чем лучше всего хранить time series - influx, opentsdb, может быть какие-то рсубд?

Хочу уйти от zabbix и nagios, вот тестирую пока

Пока заббикс собирает какие-то сложные метрики, а нагиос просто пингует то, что достаточно просто пинговать, а хотелось бы чего-нибудь няшного и свежего, и чтобы можно было всякие интересные алерты по корреляциям настроить. Вот взял на тестирование прометей. Область деятельности - аеспи.

Ребята а как прочитать target через remote_read

Пока заббикс собирает какие-то сложные метрики, а нагиос просто пингует то, что достаточно просто пинговать, а хотелось бы чего-нибудь няшного и свежего, и чтобы можно было всякие интересные алерты по корреляциям настроить. Вот взял на тестирование прометей. Область деятельности - аеспи.

ну вот я тут примерно такой стек накидал telegraf -> infuxdb -> {grafana, alerta}

ну вот я тут примерно такой стек накидал telegraf -> infuxdb -> {grafana, alerta}

если у вас есть возможность исключите из стека инфлюкс. в топике есть описание почему

если у вас есть возможность исключите из стека инфлюкс. в топике есть описание почему

А что вместо него лучше?

даже текстовые файлы лучше него

даже Z?

Ну и второй вопрос сразу: в чем лучше всего хранить time series - influx, opentsdb, может быть какие-то рсубд?

Сколько метрик и сколько данных нужно записывать в секунду?

Сколько метрик и сколько данных нужно записывать в секунду?

хм. а есть шансы что можно будет одну малоизвестную субд рекомендовать под связку telegraf -> малоизвестная -> алерты

Сколько метрик и сколько данных нужно записывать в секунду?

Хммм, не очень много, можно, наверное где-то 10-15 обойтись. К тому же у меня филиалы, я буду туда инстансы ставить, а оттуда только какие-то агрегированные показатели снимать

Помимо чисто сетевых вещей типа загрузки портов и т.п. хотелось бы вкрутить и всякое разное оборудование и сервисы

Те же базы данных, биллинг и т.д.

Ребят подскажите как можно по http забрать конфиг таргетов для прометоус или нет такого ?

Но это в перспективе

Сколько метрик и сколько данных нужно записывать в секунду?

или может быть использовать малоизвестную субд под remote storage ?

Прямо сейчас у меня одна железка раз в пару минут опрашивается, обычно где-то не больше 1500-2000 железяк на город

Прямо сейчас у меня одна железка раз в пару минут опрашивается, обычно где-то не больше 1500-2000 железяк на город

Практически что угодно тогда.

Практически что угодно тогда.

"что угодно" это по поводу СУБД?

или может быть использовать малоизвестную субд под remote storage ?

Можно наверное, но для этого нужно сделать интеграцию с промом.

"что угодно" это по поводу СУБД?

Ага.

Ребят подскажите как можно по http забрать конфиг таргетов для прометоус или нет такого ?

Что?

Ок, ладно, а что по поводу морды с управлением? Велосипед написать смогу, но не хотелось бы, может уже есть готовое

хм. а есть шансы что можно будет одну малоизвестную субд рекомендовать под связку telegraf -> малоизвестная -> алерты

А что нужно для алертов? Текстовые поля?

Вполне частая задача - стоял себе коммутатор, достаточно было мониторить, что он живой, а потом на него повесили эндпоинт mpls vpn, и теперь его уже надо мониторить по полной (а в идеале и транзитные узлы тоже). Конечно, база конфигурации у нас есть, но далеко не все оборудование настраивается из базы, есть места, где все ручками сделано. И вот для таких мест хотелось бы...

даже текстовые файлы лучше него

Судя по таблице в тпике, нужно ElasticSearch прикручивать?)

А что нужно для алертов? Текстовые поля?

думаю расчет факта аларма и понимание что с этим делать.

Сейчас это делается некрасивым образом - свитч заносится в заббикс и мониторится там, а в том же Прометее достаточно просто включить его в группу узлов - и с него начнут собираться какие-то доп. метрики

Ребят ну помогите нужто 5000 хостов как то забирать

я думал remote_read это делает а оказалось это не то

А что нужно для алертов? Текстовые поля?

я просто довольно давно наблюдаю что база есть. но автор не активно пиарит поделие. или я не понимаю где его юзать.

Кто-нибудь в telegraf настраивал мониториг софтового или железного рэйда?

делал для софтварного через парсинг /proc/mdstat есть скрипты на Perl и Bash всё выводится в json, который скармливается telegraf'у -> тот отдаёт Prometheus'у -> ну и Grafana

делал для софтварного через парсинг /proc/mdstat есть скрипты на Perl и Bash всё выводится в json, который скармливается telegraf'у -> тот отдаёт Prometheus'у -> ну и Grafana

Перл! Как много в этом звуке... :)

ну мопед был не мой - я его просто взял для примера

а потом уже переписал под bash - потому что попросили

сейчас поищу скрин с dashboard'a

миленько

давно хотел запулить в репку телеграфа - но всё-никак руки не дойдут

ну просто переписать надо не на баш а на го

а механику оставить туже

Оно у вас на выходе json отдает?

я просто довольно давно наблюдаю что база есть. но автор не активно пиарит поделие. или я не понимаю где его юзать.

у автора просто экспертиза в области СУБД а не мониторинга, поэтому ему непонятно как это все продавать людям из мониторинга

ERROR: S client not available

делал для софтварного через парсинг /proc/mdstat есть скрипты на Perl и Bash всё выводится в json, который скармливается telegraf'у -> тот отдаёт Prometheus'у -> ну и Grafana

Спс, я примерно так и думал сделать

для алертов, кмк, нужно что-то вроде rules engine. но вообще это какая-то отдельная сложная задача

не думаю что БД должна это уметь, скорее сама система мониторинга

у автора просто экспертиза в области СУБД а не мониторинга, поэтому ему непонятно как это все продавать людям из мониторинга

самый дешевый способ видимо реализовать endpoint для прома и объявить что умеем с ним рабоать

БД возможно должна уметь эти алерты хранить

ну просто переписать надо не на баш а на го

я perl для этой фигни 3 дня учил ... go ещё неделю буду )) но нет времени

самый дешевый способ видимо реализовать endpoint для прома и объявить что умеем с ним рабоать

они уже финализировали спеку?

Оно у вас на выходе json отдает?

да

они уже финализировали спеку?

ах даже так вот да ? я не знал что она у них не финальна

Спс, я примерно так и думал сделать

если нужен пример моего скрипта - могу отдать. Я уже не работаю там, где его писал и NDA прошло

была не финальная какое-то время назад

Никак походу нет у прометеуса динамики такой к сожалению

думаете нельзя ?

если нужен пример моего скрипта - могу отдать. Я уже не работаю там, где его писал и NDA прошло

да не, спасибо. У меня таких скриптов пачка)

Смог только хосты с DNS собирать через SRV запись Все еще веду расследование как прометеус может забрать таргеры по http://example.com/targets Надеюсь на помощь тоже вашу

а потом уже переписал под bash - потому что попросили

Переписали с перла на баш и сэкономили -1000% форков и -300% памяти

Perl был в изначальном примере, bash просто идеалогически попросили сделать ... чтобы все могли прочитать скрипт в будущем ))

...но никто не стал...

если у вас есть возможность исключите из стека инфлюкс. в топике есть описание почему

telegraf -> opentsdb -> grafana -> grafana-alerting

это конечно удивительно что prometheus умеет забирать даже с dns SRV записи но блин по http не может фантастика

telegraf -> opentsdb -> grafana -> grafana-alerting

с ограничениями графана алертинга знакомы ? устраивают ?

с ограничениями графана алертинга знакомы ? устраивают ?

неа не знаком, но в алерте не нашел интергации с opentsdb

Походу нашел наконецто

через костыль конечно но есть

неа не знаком, но в алерте не нашел интергации с opentsdb

bosun умеет с opentsdb

если упретесь в то что графана плохо умеет в темплейтизированные алерты

bosun умеет с opentsdb

спасибо

еще он умеет в графит и ES

но гуй надо будет скорее всего под себя допиливать (есть плагин в графану и своя мордочка)

вопрос что мониторите и насколько структура того что мониторите упихиваемая в какие то рамки

но гуй надо будет скорее всего под себя допиливать (есть плагин в графану и своя мордочка)

о, там даже гуй есть?

есть, но не такой красивый как в алерте