привет, вокруг алерты никаких костылей случайно нет для того чтобы из нее прокидывать silence в prometheus с комментариями?

А чё, срабатывания отображаются в алерте несмотря на режим тишины?!

Речь о том чтобы снабжать silence с комментарием в виде jira id, например

Но я думаю просто можно кнопку впилить еще одну

подскажите работающий на 4.6.x графане дашборд для node_exporter. prom - 2.1

Опять где то ссылку запостили :)

747 человек уже однако

Опять где то ссылку запостили :)

Я в одном из го каналов человека с вопросами про пром сюда послал :)

в гошном канале

Кстати, а алерта умеет какие-то звуки в окне браузера издавать?

Там давно нужен прогер морду патчить.

В смысле, что она печальная? Что ж получается, для выведения алертов списком из Прома, толком и нет инструментов?

Всмыле что она 'достаточная'

Но вот размерность этой достаточности у всех своя да

Дык альтернатив по сути то нет. Модуль в графане убог насколько я знаю.

Кто-нибудь мониторит WIndows Server telegraf'ом? У вас служба автоматически запускается после перезагрузки системы? После перехода на 1.5 заметил такое поведение.

Дык альтернатив по сути то нет. Модуль в графане убог насколько я знаю.

модуль в графане норм, только он кастрирует графану при использовании, так как нельзя итемы по шаблонам делать

подскажите работающий на 4.6.x графане дашборд для node_exporter. prom - 2.1

https://grafana.com/dashboards/22

Кто-нибудь мониторит WIndows Server telegraf'ом? У вас служба автоматически запускается после перезагрузки системы? После перехода на 1.5 заметил такое поведение.

Известный баг, откатывайтесь на 1.4.3 как временное решение. https://github.com/influxdata/telegraf/issues/3601#issuecomment-360167055

коллеги. может странный вопрос - а как используя file_sd_config использовать job_name?

всмысле как разделять разные типы метрик?

или все в один job name сваливать и теги как-то навешивать потом?

Ты в этом файле можешь теги вешать на таргеты

То есть лейблы

Ты в этом файле можешь теги вешать на таргеты

О, а как?

Очень интересный вопрос

В доке были примеры

Т.е. в пределах target-файла, я могу для разных хостов добавлять свои лейбы?

Ага

Хмм, чет не видел такой фичи, надо еще раз доку поковырять.

https://prometheus.io/docs/prometheus/latest/configuration/configuration/#<file_sd_config>

The JSON file must contain a list of static configs, using this format:

Точняк.

то есть у тебя в файле список, который может состоять более чем из 1 элемента

и у каждого элемента в списке свои наборы лейблов

Слепой мудак... Спасибо тебе добрый человек.

да не, это норм

не самое очевидное, что есть

Да бывают тупняки жесткие. Прочитаешь всю доку вдоль и поперек, а какой-то момент все равно упустишь, который перед глазами :)

А потом в чатах тебя натупливают - иди гугли, хуле простое спрашиваешь ))

в прометее много фич, которые сначала не знаешь как применить, а потом "вау как круто, как же я жил без этого"

Интересно как это в формате yml сделать. Т.е. есть например: target_group = ["host1", "host2"...] labels = {"label": "labelvalue"}

А как соотнести конкретные лейблы с конкретным списком хостов

в смысле?

вообще жсон 1-в-1 переносится в ямль

можно даже синтаксис не менять, жсон это подмножество ямль 1.2

Ага, щас поиграюсь.

можно даже синтаксис не менять, жсон это подмножество ямль 1.2

Все получилось, просто шикарно.

Zabbix лучше всех

смотрю кому-то нечего в обед делать

?

жирно

и у каждого элемента в списке свои наборы лейблов

так а как их заменять?

всмысле job_name это тоже label?

в прометее много фич, которые сначала не знаешь как применить, а потом "вау как круто, как же я жил без этого"

вот где бы такой сборник примеров найти толковый для свежего прома?

а то документация бедна именно на примеры

много времени убивается придумывая какие-то очевидные вещи

всмысле job_name это тоже label?

да, и адрес таргета - тоже лейбл

больше тебе скажу, имя метрики - тоже лейбл

ERROR: S client not available

хм.

то есть можно написать так:

scrape_configs: # The job name is added as a label `job=<job_name>` to any timeseries scraped from this config. - job_name: 'prometheus' # metrics_path defaults to '/metrics' # scheme defaults to 'http'. static_configs: - targets: ['localhost:9090'] - file_sd_configs: - files: - file_sd_configs/statsd_exporter/*.yml

сек

больше тебе скажу, имя метрики - тоже лейбл

Всмысле? То есть можно искать по джобу и отфильтровать по именам метрик?

job_name - строка, которая попадёт в лейбл job

Это служебные лейблы, типа address

Всмысле? То есть можно искать по джобу и отфильтровать по именам метрик?

да, можно сделать запрос вида {__name__=~"prometheus_.*"} и тебе вернутся все таймерии с этим именем

__address__

@Andorka так можно?

@Andorka так можно?

именно так - не уверен, проверь, но через релейбелинг точно можно

просто не понятно как делать релейблинг

например, добавить "мета"-лейбл __job внутри file_sd_configs и переписать его в лейбл job

но возможно и так как ты указал получится, я так не пробовал

хм

щас попробую

бывают такие вопросы, которые быстрее попробовать и узнать, чем спрашивать :)

Немного странный вопрос. В prometheus_client для python можно как-то убить все метрики, связанные с лейблом, не указывая все остальные? Скажем, если есть метрики: t1{t2, t3} t1{t2, t4} Убить обе передав только t1{t2}?

хм, а нельзя как-то это на уровне питона делать заранее?

Ну, конкретно в моем случае просто пропадает docker контейнер, а мне нужно подчистить все его метрики.

А там есть такого плана метрики: container_memory_usage_detailed_in_bytes{container_name="node_exporter",memory_type="rss"} 16445440.0

Или что имеется ввиду под заранее?

ну как-то узнать что метрика не нужна и прибить её самому

кажется твою задачу должен cadvisor решать, а не питон

но я не уверен

Народ. для логов хорошо вродекак ELK, а для метрик что ?

прометеус?

prometheus