щас файлами только

С файлами не торт

исинга не занется от >200 хостов > 100 метрик с каждого хоста ,это все опрашивать ? и эти метрики надо снимать как минимум раз в минуту ?

Еще в snmp можно будет суффикс отрезать. Жду, потестирую

исинга не занется от >200 хостов > 100 метрик с каждого хоста ,это все опрашивать ? и эти метрики надо снимать как минимум раз в минуту ?

333 точки в секунду

или будет бытсрее исингой снимать метрики и записывать их в postgres ну а уже потом попытаться к нему прилепить графики

333 точки в секунду

так там метрик более 100 и за одни запрос snmp эти метрики не обработаеш (( приходится на 100 метрик слать 50 запросов

вот я и думаю не занется ли это все дело

snmp / 2018 ?

а почемубы нет , невижу проблемы

мне м железа снитьма надо (передача данных и тому подобное)

Других вариантов не придумалось?

а почемубы нет , невижу проблемы

oook. тогда зачем вы вопросы по нагрузке задаете в чат а не в тесты ?

ожидаете благославение ?

oook. тогда зачем вы вопросы по нагрузке задаете в чат а не в тесты ?

намек понял

или индульгенцию что стек норм ?

Ребята подскажите в grafana есть Status Panel там можно на каждую метрику этот квадратик чтобы автоматически добавлялся?

рипит панели видимо

опеределяете переменную и репитете панель для переменной

опеределяете переменную и репитете панель для переменной

да наверное репит а где репит задается? это для всех панелей можно?

либо в панеле либо в ряду

напомните плиз как в проме удалить метрику

curl -X DELETE -g 'http://localhost:9090/api/v1/series?match[]={instance="sdf"}' curl -XDELETE -g 'http://localhost:9090/api/v2/admin/tsdb/delete_series?match[]={instance="sdf"}'

оба раза не работает

--web.enable-admin-api --web.enable-lifecycle включил

а чо говорит-то хоть?

v2 - Method Not Allowed

v1 - {"status":"error","errorType":"internal","error":"not implemented"}

точно включил флаги?

в v2 там вроде пост, а не делит

в v2 там вроде пост, а не делит

{"error":"EOF","code":3}

вообще супер)

просветить ошибку чтения во внешнее api

отключенное по-умолчанию

а код-то какой возвращает хотя бы?

http код?

* About to connect() to localhost port 9090 (#0) * Trying 127.0.0.1... * Connected to localhost (127.0.0.1) port 9090 (#0) > POST /api/v2/admin/tsdb/delete_series?match[]={instance="sdf"} HTTP/1.1 > User-Agent: curl/7.29.0 > Host: localhost:9090 > Accept: */* > < HTTP/1.1 400 Bad Request < Access-Control-Allow-Headers: Accept, Authorization, Content-Type, Origin < Access-Control-Allow-Methods: GET, OPTIONS < Access-Control-Allow-Origin: * < Access-Control-Expose-Headers: Date < Content-Type: application/json < Date: Thu, 07 Jun 2018 16:49:20 GMT < Content-Length: 24 < * Connection #0 to host localhost left intact {"error":"EOF","code”:3}

а может GET

405 Method Not Allowed

(

в доке пост на v1

POST /api/v1/admin/tsdb/delete_series

о

получилось

curl -v -X POST -g 'http://localhost:9090/api/v1/admin/tsdb/delete_series?match[]={instance="sdf"}'

Подскажите правильно я понимаю что один сервис равен одной метрике в исинге,тсингой мониторю параметры упса в перфдата видно данные в одну строку-полагаю при засовыыании в фдуксдб будет одна метрика

если один сервис шлет одну метрику с одной точкой, то, конечно, правильно

Ребята а ктото настраивал Status Panel в Grafana и метрику из Prometheus , а то кажется не работает этот плагин с prometheus

Работает

так есть какая то магия в этой статус панели и прометеус ? там простая метрика 0 или 1

Еще в snmp можно будет суффикс отрезать. Жду, потестирую

А вы snmp telegraf'ом собираете?

А вы snmp telegraf'ом собираете?

это боль

надо его дописывать

это боль

Ну да, вот рекомендовали https://github.com/toni-moreno/snmpcollector но нет времени протестировать.

Dependencies Go 1.5 NodeJS >=6.2.1 и influxdb

чо ток не придумают, лишь бы librenms не использовать

а что есть кто-то кто не удали infulx ?

influxdata/telegraf was tagged: 1.7.0-rc2 Link: https://github.com/influxdata/telegraf/releases/tag/1.7.0-rc2 Release notes: Telegraf 1.7.0-rc2

ребята а можно ли передать list instance="1,2,3" ? prom

instance=~"1|2|3"

спасибо

можно использовать регулярные выражения для фильтрования лейблов

ERROR: S client not available

а какую правильную переменную использовать в grafana

я имею ввиду вот я настроил и grafana вытаскивает значения и теперь мне для repeat в grafana надо как то их по очереди использовать

а иначе получается ошибка происходит

influxdata/telegraf was tagged: 1.7.0-rc2 Link: https://github.com/influxdata/telegraf/releases/tag/1.7.0-rc2 Release notes: Arch Platform Package SHA256 amd64 Debian [`telegraf_1.7.0~rc2-1_amd64.deb`](https://dl.influxdata.com/telegraf/releases/telegraf_1.7.0%7Erc2-1_amd64.deb) `5dd5c0f8af728761370f18866da35d9b5247ac4b4eb404c39a604d5dd403b71c`... More

Ребят как в Grafana он на репите исользовать значения в метрике ?

если один сервис шлет одну метрику с одной точкой, то, конечно, правильно

подскажи а как поняь метрику с одной точкой ? у меня исинга опрашивает сервис,в сервисе перфдата /var/spool/icinga2/perfdara/serv* там при опросе сервиса получаю DATATYPE::SERVICEPERFDATA TIMET::1528401157 HOSTNAME::gel-servers-UPS3000RLM SERVICEDESC::ups_stats SERVICEPERFDATA::Temp=20;38;45;0 In_Line_Voltage=232;235;;195 Out_Line_Voltage=221;235;;185 Load=27;50;75;0 RunTime=;20;15;0 Diagnostic=0;15;30;0 Calibration=0;15;30;0 SERVICECHECKCOMMAND::check_common_ups HOSTSTATE::UP HOSTSTATETYPE::HARD SERVICESTATE::OK SERVICESTATETYPE::HARD я так понимаю что это одна точка ? если этиданные я буду передавать в флухдб то мне камежтся что эти данные по номальному не лягут (по умолчанию) - по умоолчанию ляжет как 1 метика (или я не прав?)?

Ребят а что делать когда grafana передавая variable экранирует точки в значении

Слушайте а может ктото знает в графане создал variable и вот спустя какое то время когда она исчезла из prometheus графана все еще ее видит и отображает

@mysabien продолжайте самостоятельно тыкать в кнопочки в графане. не бойтсь.

@mysabien продолжайте самостоятельно тыкать в кнопочки в графане. не бойтсь.

ну ты же все знаешь.

ну вот и предлагаю тебе тоже всё узнать. графана простая как 3 копейки. тыкай букавки.

всем привет. Кто-нибудь впиливал в своё ПО библиотеки prometheus? У меня есть софт, который пушит кое-куда статистику в json, хотелось бы переписать этот json (возможность есть) на данные, пригодные для prometheus. Чтобы не заморачиваться портированием полноценной клиентской библиотеки на lua решено взять просто push_gateway и писать данные туда. Вопрос следующий: софта крутится куча инстансов на сервере, как разделить инстансы в метриках? Если я запушу какое-то дополнительное поле типа "job_id" или "job_name", то prometheus свяжет остальные полученные значения от инстанса этого приложения или необходимо обеспечить уникальность имен метрик для каждого инстанса приложения? Как это вообще лучше всего делается?

> Чтобы не заморачиваться портированием полноценной клиентской библиотеки на lua решено взять просто push_gateway и писать данные туда. говно идея

делайте лучше сразу нормально, кучи проблем избежите

"нормально" это собственно портировать библиотеку?

а её нет готовой?

https://github.com/cherti/prometheus-lua вот сходу нагуглилась, хотя и старая

ок, ладно, вопрос номер два: как мне динамически добавлять инстансы в prometheus? Я не знаю заранее (точнее, в каждый конкретный момент знаю, но править конфиг каждый раз очень некрасиво) количество стартанувших инстансов сервиса

потом вдруг может быть так, что конфиг сгенерится таким образом, что инстанс переползёт с одного порта на другой

а как ты их запускаешь?

у меня один старый телевизионный софт, я его подпиливаю напильничком маленько

клиенты твоих инстансов как-то же узнают где эти инстансы живут?

ну там генерится куча конфигурационных файлов скриптом, а потом просто говорится service astra restart - и он подхватывает новые конфиги

ну вот генерь этим же скриптом и для прометея

да там по факту нет клиентов - там такая nginx-подобная софтина для мультикаста - принимает на входе телевизионный поток и отдаёт на выходе телевизионный поток

но прометей на одном сервере, а этот софт на другом

ну, т.е. идею-то я понял, но...

:)

а, то есть твои приложения - слушатели?

но ведь ты сказал что они поднимаются на каком-то порту, значит этот порт потом куда-то прописывается

при неопределенном круге мониториемых систем очевидно пром не годен и должен быть заменен на push мониторинг