ему строка с host ненравится говорит: level=error msg="Error loading config: couldn't load configuration (-config.file=/docker/prometheus-data3/prometheus.yml): yaml: unmarshal errors:\n line 9: cannot unmarshal !!seq into url.Values" source="main.go:150"

чет туплю, немогу понять что не так как в доке пробовал: params: [ host: ['192.168.0.30','192.168.0.31','192.168.0.105']]

тоже не идет (

и так scrape_configs: - job_name: 'test123' scrape_interval: 10s server: 'localhost:1001' scheme: 'http' metrics_path: '/ping' params: - 'host': ['192.168.0.30','192.168.0.31','192.168.0.105']

а почему ты в params указываешь хосты?

а как?

а как можно иначе?

пробовал так? params: host: ['192.168.0.30','192.168.0.31','192.168.0.105']

секунду

я не пробовал их так оправшивать, но через blackbox_exporter params: module: [http_2xx] static_configs: - targets: - host1 - host2 - host3

time="2017-02-14T13:26:48Z" level=error msg="Error loading config: couldn't load configuration (-config.file=/docker/prometheus-data3/prometheus.yml): unknown fields in scrape_config: server" source="main.go:150"

ну он не понимает этого server: 'localhost:1001'

пробовал так? params: host: ['192.168.0.30','192.168.0.31','192.168.0.105']

это уже не правильный yml, надо - вначале перечислений указывать

https://prometheus.io/docs/operating/configuration/#<scrape_config>

ну он не понимает этого server: 'localhost:1001'

должен понимать: https://prometheus.io/docs/operating/configuration/

в <scrape_config> вроде нет server

точно это для serverset_sd_configs

блин, тупанул

спасибо

scrape_configs: - job_name: 'test' scrape_interval: 10s scheme: 'http' metrics_path: '/ping' params: host: ['192.168.0.30','192.168.0.31','192.168.0.105'] relabel_configs: - source_labels: [__address__] regex: (.*)(:1001)? target_label: __param_target replacement: ${1} - source_labels: [__param_target] regex: (.*) target_label: instance replacement: ${1} - source_labels: [] regex: .* target_label: __address__ replacement: localhost возможно как то так, но не уверен )

unknown fields in scrape_config: host

Отступы расставь правильно

host под params

во unknown fields in config: relabel_configs

а перед relabel_configs: пробела нехватало

ага

нашел : scrape_configs: - job_name: 'test123' scrape_interval: 10s metrics_path: '/ping' scheme: 'http' params: host: ['192.168.0.30','192.168.0.31','192.168.0.105'] static_configs: - targets: ['192.168.0.31:1001']

т.е. scrape_configs: - job_name: 'test123' scrape_interval: 10s metrics_path: '/ping' scheme: 'http' params: host: ['192.168.0.30','192.168.0.31','192.168.0.105'] static_configs: - targets: ['localhost:1001']

тока он все параметры в один GET запрос пихает

но это уже не проблема

просто кучу таких конфигов накопипастю

просто кучу таких конфигов накопипастю

А что ты не хочешь blackbox exporter использовать? У него там можно по http_status коды проверять.

а есть где-нить список экспортеров прометея?

их же много сейчас уже

может кто взялся вести список и статус их?

https://github.com/prometheus/docs/blob/master/content/docs/instrumenting/exporters.md

можно ли в тегах прометеуса хранить значения из беcконечного множества?

ну или очень большого множества )

не спрашивайте зачем мне это надо, я знаю что это тупо

они рекомендуют метрику делать равной единице, а в теге хранить всякую фигню, которая нечасто изменяется, и это best practice

https://prometheus.io/docs/practices/naming/ - "Do not put the label names in the metric name, as this introduces redundancy and will cause confusion if the respective labels are aggregated away."

https://github.com/prometheus/docs/blob/master/content/docs/instrumenting/exporters.md

спасибо!

подскажите пожалуйста как в grafana поле "Legend format" отредактировать? что бы выводился не весь текст легенды а с 10 по 29 символ например

может там какой то хитрый язык регулярных выражений или что то другое есть

{{ __name__.replace("mysql_global_status_", "") }} - работало в старых графанах

https://github.com/grafana/grafana/pull/5096 - вот про новые

неа, в этой неработает так и выводит для всех строк {{ __name__.replace("mysql_global_status_", "") }}

я это тоже видел на гитхабе

о зато {{job}} выводит мой жоп )

ну там {{ var }} выводит переменные

если темплейтинг то $var и в заголовке графика выводит переменную

во все подобрал

спасибо

разобрался )

а как можно {{instance}} сократить? с 1 по 7 символ

вот я не пробовал, но давно жду: {{ foo | replace("bar", "baz") }}

https://github.com/grafana/grafana/pull/6627 - тикет на эту тему

раньше я сокращал через вот то выражение, которое прибили в grafana 4+ {{ __name__.replace("mysql_global_status_", "") }}

ага, там ещё тип substring хочет

вот её очень нехватает

но проще было бы просто регулярные выражения воткнуть - было бы универсальное решение

но наверно не оптимальное по скорости

я забил на это, перестал выводить легенду на график, просто в pop-up вывожу кратко что нужно, при наведении на граф.

(включается в настройке дашборда - Graph Tooltip)

ERROR: S client not available

о нашел, спасибо )

а как можно отключить на графике инстанс или джоп?

у меня просто 2 инстанса и на каждый по 7 легенд

что бы выводились на одном графике 7 легенд первого инстанса а на другом 7 второго

ну или переключать их как то

это раздел про темплейтинг, который настраивается чтобы был выбор серверов/параметров которые показывать/менять

http://docs.grafana.org/reference/templating/ вот это надо осмыслить :)

ага, понял, спасибо

А кто как настраивает HA для графаны? У меня было 2 инстанса , через HAProxy смотрели в мастер бд Postgres , все было отлично до момента когда появились алерты - каждый инстанс считает своим долгом отправить алерт, пришлось 1 инстанс погасить. Кто-нибудь сталкивался?

шлив дедубликатор

типа alerta

ну или мутить консенсус для них с выбором мастера :)

Костыль то понятно что можно замутить, но как то не по фен шую) стандартные алерты вполне устраивают

Может есть какой бест практис ha для графаны?

я слышал, что pagerduty/opsgenie/victorops их аггрегируют автоматом

как пример - содержу две графаны, дашборды экспортирую с основной на резервную. подцепляются они к двум прометеям, которые берут метрики. проблем никаких нет. алертинг на alertnamager потому что алертинг графаны не понимает templating. проблем нет, всё скриптуется, времени почти не отнимает. решение по-своему эффективно.

А кто как настраивает HA для графаны? У меня было 2 инстанса , через HAProxy смотрели в мастер бд Postgres , все было отлично до момента когда появились алерты - каждый инстанс считает своим долгом отправить алерт, пришлось 1 инстанс погасить. Кто-нибудь сталкивался?

Там можно в конфигурации сказать чтоб только на 1-2 работал алертинг

Там можно в конфигурации сказать чтоб только на 1-2 работал алертинг

Спасибо, видимо пропустил!

Но выше правильно советуют - лучше 2 графаны с алертингом и заворачивать алерты в дедупликацию

как пример - содержу две графаны, дашборды экспортирую с основной на резервную. подцепляются они к двум прометеям, которые берут метрики. проблем никаких нет. алертинг на alertnamager потому что алертинг графаны не понимает templating. проблем нет, всё скриптуется, времени почти не отнимает. решение по-своему эффективно.

Т.е. бд у каждой своя ?

вроде чуваки из графаны говорили что они хотят простенькое шардирование сделать

в будущем

Т.е. бд у каждой своя ?

ну да, у каждого прометея и у каждой графаны, сервер сгорит - не потеряются данные.

я слышал, что pagerduty/opsgenie/victorops их аггрегируют автоматом

Это все внешние системы, нужна на своём)

ну да, у каждого прометея и у каждой графаны, сервер сгорит - не потеряются данные.

Понятно, у меня просто репликация master-slave , есть планы заюзать bdr в Postgres

Или дождаться простого шардирования от графаны )

Понятно, у меня просто репликация master-slave , есть планы заюзать bdr в Postgres

о, чем реплицируешь графаны?

Postgres

я тут немного туплю, подскажите, как в grafanf сделать, что бы при наведении на график мне не показывалась вся легенда, а только легенда конкретной кривой) типо что это за метрика такая

я тут немного туплю, подскажите, как в grafanf сделать, что бы при наведении на график мне не показывалась вся легенда, а только легенда конкретной кривой) типо что это за метрика такая

В настройках по-моему графика галочка

да вот никак найти не могу