sed по json'у?

sed по json'у?

да

Проще уволится

Что может быть проще седа по джейсону?

Что может быть проще седа по джейсону?

сед по протобафу

а сейчас в имя метрики добавили например _bytes

а от этого можно как-то уберечься ? сделать дашбоард, который будет работать, даже если в node_exportere что-то переименовали?

Что может быть проще седа по джейсону?

sed по бинарнику круче

Это да. Вопрос, зачем.

а ещё лучше sed по /dev/urandom

а от этого можно как-то уберечься ? сделать дашбоард, который будет работать, даже если в node_exportere что-то переименовали?

нуууу, наверное нет. Регексп для лейблов работает, для имени метрик, скорее всего нет

Это да. Вопрос, зачем.

Потому что можно

нуууу, наверное нет. Регексп для лейблов работает, для имени метрик, скорее всего нет

имя метрики - тоже лейбл

имя этого лейбла - __name__

имя метрики - тоже лейбл

и в графане?

я сейчас про графану, а не про релейбл

например, выбрать ваще все метрики какие есть: {__name__=~".+"}

релейблить имя лейблов для совместимости версий

ММММ

Прочитал это http://docs.grafana.org/features/datasources/prometheus/ и это https://prometheus.io/docs/practices/naming/#labels и все равно не понимаю, что такое UP ? ```label_values(up{job="node-exporter", dc=~"$DC", project=~"$project",service_name=~"$service_name",upstream=~"$upstream"}, instance)```

а, про темплейтинг?

Прочитал это http://docs.grafana.org/features/datasources/prometheus/ и это https://prometheus.io/docs/practices/naming/#labels и все равно не понимаю, что такое UP ? ```label_values(up{job="node-exporter", dc=~"$DC", project=~"$project",service_name=~"$service_name",upstream=~"$upstream"}, instance)```

up это "живой" таргет

который скрапится

а в какой доке об этом написано?

up это "живой" таргет

спасибо

о чём?

что up это живой

что вообще такое up

up == 1 живой

неее

просто ап - все таргеты

где список всех сущностей?

up, down, fap?

сколько их всего

в доке где-то. Я не знаю, у меня с докой прометея проблемы

я там ничего найти не могу

проще на гитхабе найти

в доке графаны только это label_values(label) Returns a list of label values for the label in every metric. label_values(metric, label) Returns a list of label values for the label in the specified metric. metrics(metric) Returns a list of metrics matching the specified metric regex. query_result(query) Returns a list of Prometheus query result for the query.

у тебя все в кучу label_values это графана, а up это прометей, надо разбираться постепенно )

где список всех сущностей?

сайт прометея что-то прилёг, там было в доке

сайт прометея что-то прилёг, там было в доке

это заббиксолюбы ддосят

up это всего лишь одна из метрик

есть некоторые метрики которые прометей добавляет к каждому таргету, up одна из таких метрик

по ней можно узнать получилось у прометея собрать данные или нет

label_values(up...) покажет список хостов-сервисов-таргетов в проме

точнее label_values - это фича графаны, она может послать запрос в прометей и показать значения нужных тебе лейблов и ты например можешь их выбрать в выпадашке

up это всего лишь одна из метрик

сеньк

например, как уже упомянули, можешь получить список хостов

много новых сущностей

о да

толи еще будет

у тебя все в кучу label_values это графана, а up это прометей, надо разбираться постепенно )

да, я и пытаюсь отделить где графана, а где пром

джобнейм например

кстати, если импорт делается по ID дашборда, то графана на даст загрузить дашборд в котором сорс инфлюкс, а у тебя только пром

кстати, если импорт делается по ID дашборда, то графана на даст загрузить дашборд в котором сорс инфлюкс, а у тебя только пром

да, тогда ты сохраняешь его и делоешь сед )

да, тогда ты сохраняешь его и делоешь сед )

:D

семь бед - один сед

ре сед

И еще relable, как его правильно использовать? relabel_configs: - source_labels: [__address__] target_label: __param_target - source_labels: [__param_target] target_label: instance - target_label: __address__ replacement: localhost:9272

это сильное колдунство

(на самом деле нет)

регэкспы знаешь?

Да

хотя в твоём примере их нету

ну или думаю, что знаю

есть два вида релейбелинга: обычный (или таргет релейбелинг) и метрик релейбелинг

работают принципиально одинаково, но на разных сущностях

возьмём для примера метрик релейбелинг

берёт какой-то лейбл и кладёт в другой лейбл (ну или в тот же)

ERROR: S client not available

например можно убрать порт из лейбла instance если очень хочется

у меня практический кейс - для хостнеймов - job_name: 'node-exporter' # Override the global default and scrape targets from this job every 5 seconds. scrape_interval: 5s dns_sd_configs: - names: - 'linux-ci-01.build' - 'linux-ci-03.build' - 'linux-ci-05.build' type: 'A' port: 9100 почему-то отдает ip, хочу имена в дашбордах

просто релейбелинг (или таргет релейбелинг), как у тебя в примере - немножко замороченней, но принцип тот же

И еще relable, как его правильно использовать? relabel_configs: - source_labels: [__address__] target_label: __param_target - source_labels: [__param_target] target_label: instance - target_label: __address__ replacement: localhost:9272

1. взять значение из "металейбла" __address__ и положить в GET-param для реального таргета 2. взять значение из GET-param и положить в лейбл instance 3. вписать в __address__ адрес localhost:9272

в итоге у тебя в лейблах instance будут адреса которые твой SD найдёт

а прометей пойдёт за метриками по адресу localhost:9272/?taget=linux-ci-01.build

как-то так это работает

1. взять значение из "металейбла" __address__ и положить в GET-param для реального таргета 2. взять значение из GET-param и положить в лейбл instance 3. вписать в __address__ адрес localhost:9272

??

у каждого таргета который прометей находит есть куча металейблов, их можно посмотреть на страничке /service-discovery в твоём прометее

у каждого таргета который прометей находит есть куча металейблов, их можно посмотреть на страничке /service-discovery в твоём прометее

ооо

))

это приятное серотониновое чувство понимания

вообще есть две книги про прометей, которые вышли этим летом

одна в мае и вторая с месяц назад

Обе есть в файлах чата

ага

сайт прометея что-то прилёг, там было в доке

вроде ожил, можешь ткнуть?

не в мае, в июне

ну неважно

вообще есть две книги про прометей, которые вышли этим летом

там одна 180 страниц, вторая 700 (наверняка 500 - картинки)

какая для старта лучше?

не знаю, я не читал

у меня опыт с прометеем скоро три года уже будет

вроде ожил, можешь ткнуть?

через раз открывается

наверное эта

https://www.prometheusbook.com/

но вторую я мельком пролистал

а эту читаю

там есть что-нибудь интересное?

@fishhead108 https://prometheus.io/docs/concepts/jobs_instances/

вот там есть 4 метрики которые добавляются ко всем таргетам

up одна из них