в логах оператора что?

где их брать? если в поде оператора, то там только инфо, типа level=info ts=2019-01-24T19:08:30.024069394Z caller=operator.go:731 component=prometheusoperator msg="sync prometheus" key=monitoring/kube-prometheus level=info ts=2019-01-24T19:08:30.118790366Z caller=operator.go:731 component=prometheusoperator msg="sync prometheus" key=monitoring/kube-prometheus

вот корректный с кемлкейс, но это ничего не меняет https://pastebin.com/bg4xq1s1 в джобе прометея все равно пусто: https://pastebin.com/CgCeCRu7

- sourceLabels: ["__address__"] targetLabel: address replacement: kubernetes.default.svc:443 ???

это после применения твоего?

это после применения твоего?

да, я удалил и применил еще раз на всякий

- sourceLabels: ["__address__"] targetLabel: address replacement: kubernetes.default.svc:443 ???

в чем беда?

тогда смотри в лог прометея

оператор может посчитать синтаксис корректным

в чем беда?

Беду у тебя нашёл. Я предложил свой вариант.

не вижу беду

не вижу беду

А, он же создаёт новый лейбл какбэ. Не опираясь на старый.

угу

просто вписывает статичное значение

Как насчёт такой строки из документации тогда? Labels starting with __ will be removed from the label set after relabeling is completed.

ну это же __address__

"metalabel"

ну это же __address__

И зачем он в результирующих метриках вообще?

его там не будет

это адрес куда прометей пойдёт с запросом

Супер. Но он в targetLabel его указал.

да всё верно

тогда смотри в лог прометея

лог прометея тоже чистый

https://pastebin.com/49w5fcwS

руками указал адрес куда ходить прометею за метриками

руками указал адрес куда ходить прометею за метриками

Лолшто. Это не работает же.

работает :)

Нееееееееееееееееееееееееееееееееееееет. Мама, зачем тут мне жуткие вещи в интернетах рассказывают.

__address__ - по-умолчанию равен instance, но разумеется можно переписать

https://prometheus.io/docs/prometheus/latest/configuration/configuration/#static_config Тогда зачем?

ты ещё и гет-параметры можешь свои описать в мета-лейблах!

https://prometheus.io/docs/prometheus/latest/configuration/configuration/#static_config Тогда зачем?

ну это же другое

ты можешь в своём сервис-дискавери вернуть instance и __address__, и они не обязаны быть одинаковыми

ты можешь в своём сервис-дискавери вернуть instance и __address__, и они не обязаны быть одинаковыми

Чёрт, спасибо за инфу. Интересно-познавательно.

не хочу к вам врываться и мешать, но похоже relabelings в принципе из сервисмонитора не доходят до конфига прометея, вопрос даже не в том корректно ли они работают

не хочу к вам врываться и мешать, но похоже relabelings в принципе из сервисмонитора не доходят до конфига прометея, вопрос даже не в том корректно ли они работают

ещё вчера у меня они туда доходили

Чёрт, спасибо за инфу. Интересно-познавательно.

ну хоть что-то новое я тебе рассказал, а не наоборот! :)

если же я, теста ради заменю relabelings на metricRelabelings - тогда они появятся в конфиге прометея, но работать конечно не будут

нене, у меня только таргет релейбелинг был

100% работало

вчера работало, а сегодня мне уже пофигу %)

может я забыл чего?

ну с виду всё верно

посмотри в сервисмонитор для апи-сервера, который в коробке в kube-prometheus

с его примера мой и сделан, добавлен только релайбелинг

https://github.com/coreos/prometheus-operator/blob/master/contrib/kube-prometheus/jsonnet/kube-prometheus/prometheus/prometheus.libsonnet#L338

хм, там только метрик релейбелингс

в моем даже этого нет

у тебя не jsonnet что ли для kube-prometheus?

хм, похоже я нашел в чем дело

в этом

https://github.com/coreos/prometheus-operator/tree/master/helm

у тебя не jsonnet что ли для kube-prometheus?

нет, я еще не умею в jsonnet

омг, хельм

тут не помогу

да я просто видимо старую версию оператора ставил.

какую?

он должен ругаться на невалидные опции же

v0.20.0

не, я недавно ставил первый раз и там был то ли 25 то ли 26

с обновление на 27 у меня что-то сломалось, но не было времени разобраться

а сейчас уже пофиг какая там у них версия осталась после меня

Да, по мне удобно все ресурсы при помощи этого модуля провижинг ресурсов делать. Можешь кстать, да использовать terraform и в качевстве provisioner ansible

Зачем люди добровольно терраформом пользуются , там одна боль

Зачем люди добровольно терраформом пользуются , там одна боль

а чем ещё виртуалки раскатать?

всем привет! помогите мне починится. В configmape nginx ingress прописал: client_max_body_size: 10M proxy-body-size:10M server-names-hash-bucket-size:1024

после рестарта подов, в кофиге nginx внутри пода, только server-names-hash-bucket-size:1024

втф первые 2 не применяются не пойму

Зачем люди добровольно терраформом пользуются , там одна боль

предложи чо лучше

как итог "413 Request Entity Too Large"

всем привет! помогите мне починится. В configmape nginx ingress прописал: client_max_body_size: 10M proxy-body-size:10M server-names-hash-bucket-size:1024

смесь _ - выглядит уже странно

убрав proxy-body-size:10M оставив client_max_body_size: 10M один фиг в конфиге не появляется

нужно перезаускать nginx, эт было?

офк

всем привет! помогите мне починится. В configmape nginx ingress прописал: client_max_body_size: 10M proxy-body-size:10M server-names-hash-bucket-size:1024

Всё в дефисы!!!

Всё в дефисы!!!

а можно для недалеких с примером? :)

а можно для недалеких с примером? :)

proxy-body-size опция называется.

блин а в доке что написано про эти опции?

зачем гадать дефисы нужны или подчёркивания

чего гадать то) вот из доки

чего гадать то) вот из доки

Он и client_max_body_size ставит.

Проверь конфиг после proxy-body-size.