здесь то, что мне нужно, называется service_name

Немного наброса, но отправлять алерты письмами - не очень толковое занятие :)

ну это уже требования компании. хотя чтобы отправить значение в слак или ещё куда - его всё равно надо сначала вытащить из под этого рэнжа

вот нашёл что то: https://github.com/prometheus/prometheus/blob/master/docs/configuration/template_examples.md

Display one value {{ with query "some_metric{instance='someinstance'}" }} {{ . | first | value | humanize }} {{ end }}

такой формат я ещё не пробовал

попробую приладить к своему случаю

Это запрос в прометей из алерта в прометее

да пофигу. это же гошный пемплэйт а значит дожен быть применим.

Немного наброса, но отправлять алерты письмами - не очень толковое занятие :)

Надо слать в телегу!

а подскажите, query это управляющее слово или мне вместо него надо своё что то подставлять?

Надо слать в телегу!

Которую периодически подбанивает РКН ?

Которую периодически подбанивает РКН ?

они рукожопы. телеге пофигу, а слак отваливается из за этого периодически ))

они рукожопы. телеге пофигу, а слак отваливается из за этого периодически ))

Ну в итоге отваливается все, да. Кроме почты как раз))

@Banzayy будет жить. Поприветствуем!

так. {{ with . }} {{ .Labels | service_name | value }} {{ end }} не прокатило. алертменеджер падает с ошибкой: err="template: default.tmpl:44: function \"service_name\" not defined"

Потому что нет такой функции

Ты пробовал .CommonLabels.service_name?

это я уже понял. хотя я ожидал другого поведения. в мануале обещался выбор элемента массива а не функция. нет, ещё не пробовал. а как её вписать?

прям так? {{ .CommonLabels.service_name }}

или {{ range . }} {{ .CommonLabels.service_name }} {{ end }}

?

При чём тут range?

Это же мапа, а не список

Типы же в документации описаны

это я уже понял. хотя я ожидал другого поведения. в мануале обещался выбор элемента массива а не функция. нет, ещё не пробовал. а как её вписать?

В каком мануале?

вот нашёл что то: https://github.com/prometheus/prometheus/blob/master/docs/configuration/template_examples.md

вот здесь

Где ты там увидел что это будет выбор элемента?

В каком мануале?

написано же: Display one value {{ with query "some_metric{instance='someinstance'}" }} {{ . | first | value | humanize }} {{ end }} т.е. какбэ first подразумевает элемент массива а не функцию. хотя за эти два дня я уже ничему не удивляюсь - либо в этих мануалах пишут, что хотят, либо я вообще ничего не понимаю.

first - функция

а ,ну тогда ок. тогда какое отношение Display one value имеет к этой функции - для меня загадка. я то думал, что Display one value - это вывод одного из значений. а значит, надо бы указать, какого именно значения вывод мы хотим получить. но если так - то ладно. буду искать другой способ.

Вывести значение полученное из запроса

Чо непонятного?

При отрисовке шаблона в прометее есть возможность сделать дополнительный запрос и вывести его результат как ты сам хочешь

К твоей задаче это не имеет отношения

Ты пробовал .CommonLabels.service_name?

попробовал {{ .CommonLabels.service_name }} и {{ with . }} {{ .CommonLabels.service_name }} {{ end }} пришло пустое письмо

Wonderful

{{ define "__subject" }}[{{ .Status | toUpper }}{{ if eq .Status "firing" }}:{{ .Alerts.Firing | len }}{{ end }}] {{ .GroupLabels.SortedPairs.Values | join " " }} {{ if gt (len .CommonLabels) (len .GroupLabels) }}({{ with .CommonLabels.Remove .GroupLabels.Names }}{{ .Values | join " " }}{{ end }}){{ end }}{{ end }}

По-моему из этого примера должно быть понятно, что надо сделать

пытаюсь понять. пока не понятно, какую роль играет {{ .GroupLabels.SortedPairs.Values | join " " }}

Выводит значения лейблов, по которым сработала группировка в алертменеджере

https://prometheus.io/blog/2016/03/03/custom-alertmanager-templates/

https://prometheus.io/docs/alerting/notification_examples/

т.е. это самостоятельная конструкция? это выражение мне знакомо - это же дефолтная тема письма.

но в итоге в теме письма приходит только [FIRING:1]

т.е. срабатывает только одна часть - [{{ .Status | toUpper }}{{ if eq .Status "firing" }}:{{ .Alerts.Firing | len }}{{ end }}]

а остальная - либо не срабатвывает, либо на выходе даёт пустоту

а вообще сейчас попробую засунуть это всё в тело письма ))

Ну у тебя группировки нет, значит груп лейблов тоже нет

Oleksandr Horodnychenko будет жить. Поприветствуем!

что то почта перестала ходить вообще. походу почтовик лёг ))

эксперименты откладываются ))

Чтобы послать письмо тебе нужен какой-то особый почтовик?

Подними постфикс на хосте с алертменеджером и шли почту на root@localhost

конечно. алертменеджер крутится в кубе в изолированной сети. оттуда открыт один порт к корпоративному почтовику, через него он и шлёт.

да ну. с этим постфиксом геммороя столько... думаю с корпоративным быстрее разберусь ))

ERROR: S client not available

Лол

Прям куча геморроя, взять и поставить

поставить не проблема. его же ещё настраивать надо. я как-то настраивал постфикс - заколебался. потом алертменеджер перенастраивать на него. а так оказалось почтовик перезагружали, вот он и недоступен был. сходил за кофе и можно дальше работать )))

В целом, у кого-то стоит в проде 2.4.2?) Как оно?

Проблем не обнаружено

всё. замучал я алертменеджер ))) он начал гнать по полной ))) последние 5 писем прислал по дефолтному шаблону (который изначально с ним шёл в комплекте), несмотря на то, что я его как раз и редактирую. удалил этот default.tmpl - он всё равно прислал стандартное письмо. я так понимаю, что больше я от него ничего вменяемого сегодня не добьюсь )))

Не стоит алгоритмам припысывать чувства

да какие тут чувства. обычный баг ))

Который проявляется только у тебя?

конфиг default.tmpl при этом в данный момент выглядит так:

и на его редактирование реакции ноль - письмо приходит как показано выше )))

при этом весь день реакция на изменение конфига была. хреновая - но была. а теперь пропала )))

Значит ты где-то ошибся

В магию я не верю

Который проявляется только у тебя?

да я бы и сам не отказался, если бы у меня с первого раза вытащился один элемент из массива и все эти двухдневные изрвращённые совокупления с алертменеджером отсутствовали

Надо всего лишь документацию посмотреть

В магию я не верю

да я тоже. но есть под. есть конфигмап. под я удаляю при изменении конфигмапа, чтобы он пересоздался и к нему подцепился новый конфигмап

внутри пода файл default.tmpl с конфигмапом совпадает

Значит не подцепился

Либо контент не тот что должен быть

В этом файле должны быть темплейты, я их что-то не особо наблюдаю

логично. я же их потёр. и заменил на свои.

Не вижу в этом файле никаких темплейтов

Значит используется дефолтный

ребят а можно в blackbox_exporter возвращать fail если ответ не json