Кто нибудь сталкивался с темплейтингом графаны? Я правильно понимаю, что если создать переменную типа Query, можно написать запрос для своего источника данных, который должен возвращать список чего-нибудь (хостов например), которые можно использовать в дашбордах?

Да так и есть

Кто нибудь сталкивался с темплейтингом графаны? Я правильно понимаю, что если создать переменную типа Query, можно написать запрос для своего источника данных, который должен возвращать список чего-нибудь (хостов например), которые можно использовать в дашбордах?

^

А датасорс никак это обработать сам не может? У меня просто для обычных запросов и для метаданных разные endpoints.

А датасорс никак это обработать сам не может? У меня просто для обычных запросов и для метаданных разные endpoints.

Так и нужно. Есть метод metricsFindQuery() датасорса, он обрабатывает запрос, который в query для переменной записан.

Ок, понял, попробую

Всем привет. Есть вопрос по blackbox_exporter. Не могу понять, почему он возвращает probe_success 0 на сайты, заведомо рабочие. Конфиг blackbox_exporter.yml: modules: http_2xx: prober: http timeout: "5s" prometheus.yml: global: external_labels: monitor: 'mymon' scrape_configs: - job_name: 'blackbox' metrics_path: /probe params: module: [http_2xx] static_configs: - targets: - https://site1.com - https://site2.com - https://site3.com - https://site4.me - https://www.google.com.ua/ relabel_configs: - source_labels: [__address__] target_label: __param_target - source_labels: [__param_target] target_label: instance - target_label: __address__ replacement: host:9115

prom v2.0

А если в интерфейсе прометея ткнуть на ссылку которую он для таргета сгенерил

А если в интерфейсе прометея ткнуть на ссылку которую он для таргета сгенерил

# HELP content_length Length of http content response # TYPE content_length gauge content_length 0 # HELP probe_dns_lookup_time_seconds Returns the time taken for probe dns lookup in seconds # TYPE probe_dns_lookup_time_seconds gauge probe_dns_lookup_time_seconds 0.000708006 # HELP probe_duration_seconds Returns how long the probe took to complete in seconds # TYPE probe_duration_seconds gauge probe_duration_seconds 0.001035838 # HELP probe_failed_due_to_regex Indicates if probe failed due to regex # TYPE probe_failed_due_to_regex gauge probe_failed_due_to_regex 0 # HELP probe_http_duration_seconds Duration of http request by phase, summed over all redirects # TYPE probe_http_duration_seconds gauge probe_http_duration_seconds{phase="connect"} 0 probe_http_duration_seconds{phase="processing"} 0 probe_http_duration_seconds{phase="resolve"} 0.000708006 probe_http_duration_seconds{phase="tls"} 0 probe_http_duration_seconds{phase="transfer"} 0 # HELP probe_http_redirects The number of redirects # TYPE probe_http_redirects gauge probe_http_redirects 0 # HELP probe_http_ssl Indicates if SSL was used for the final redirect # TYPE probe_http_ssl gauge probe_http_ssl 0 # HELP probe_http_status_code Response HTTP status code # TYPE probe_http_status_code gauge probe_http_status_code 0 # HELP probe_http_version Returns the version of HTTP of the probe response # TYPE probe_http_version gauge probe_http_version 0 # HELP probe_ip_protocol Specifies whether probe ip protocol is IP4 or IP6 # TYPE probe_ip_protocol gauge probe_ip_protocol 6 # HELP probe_success Displays whether or not the probe was a success # TYPE probe_success gauge probe_success 0

Урл-то правильный?

да

урл точно правильный, в том числе и урл гугла

господа, а кто-то юзает стэк netdata-->prometheus-->grafana? Кто-что может сказать? Нюансы, сложности? Все ли так красиво как выглядит в голове? :)

ну показывай голову, как иначе тебе помочь? ?

ну оно выглядит так красиво, и netdata вроде бы быстрый и удобный и функциональный, и бесшовно соединяется с прометеем (по факту как родной node_exporter, но лучше). Короче все звучит хорошо, и вот думаю есть ли подводные камни, может кто сталкивался

ну как минимум, нужно персистентное хранилище метрик и думать как это отобразить, там же у прометея вроде как типа идеалогия что всего пару недель ретеншен полиси, а дальше крутись как хочеш, да и нет дата зачем, почему не более какой традиционный сборщик, те же коллектд или вон новомодно все любят телеграм или как его от инфлюкса

ну отобразить просто - графана. На счет 14 дней ретеншена - надо уточнять да, неужели это не регулируется? телеграф, коллектд - все хорошо, но их надо допиливать, стандартный набор метрик скудный. netdata привлек именно тем, что в нем ничего не надо настраивать практически - запустил и забыл.

не 14, а 90

у нетдаты же своя морда, не?

ну я тоже всё никак не рушусь попробовать, где то тут запомнилось про 14, мож и не прав :)

у нетдаты же своя морда, не?

да но оно вроде как может хранить и на бекенде и своя вся инфраструктура на один сервер, типо поставил и не паришся

> стандартный набор метрик скудный эмм... это какой же он скудный, там скорее сложно найти что ещё не мониторится, ну по крайней мере у коллектд

> стандартный набор метрик скудный эмм... это какой же он скудный, там скорее сложно найти что ещё не мониторится, ну по крайней мере у коллектд

плюс коллектд ещё многопоточный и написан на сях

ресурсов жрёт чуть меньше, чем нисколько

т.к. неиспользуемые плагины просто не загружаются в память

у нетдаты же своя морда, не?

ага, это еще привлекает - возможность на любой сервак подцепиться на морду и в realtime смотреть за системой.

плюс коллектд ещё многопоточный и написан на сях

netdata ядро тоже на Сях, и тоже мега-быстрое. По ресурсам там ни о чем.

> стандартный набор метрик скудный эмм... это какой же он скудный, там скорее сложно найти что ещё не мониторится, ну по крайней мере у коллектд

по дефолту умеет прерывания, семафоры, netfilter, mdadm, nginx, applications?

ага, это еще привлекает - возможность на любой сервак подцепиться на морду и в realtime смотреть за системой.

но зачем, у вас либо централизованная система, либо набор серваков

но зачем, у вас либо централизованная система, либо набор серваков

вот и думаю об этом. плюс морды netdata в том, что она прям совсем риалтайм - т.е. ежесекундное обновление. При всяких дебагах и осмотрах системы - полезно. А графана с прометеем - как более исторические инструменты для понимания тенденций и прочее. Ну и этот доп. функционал, который вроде бы не мешает ничему, т.е. той же централизованной системе, а возможно дополняет.

ну отобразить просто - графана. На счет 14 дней ретеншена - надо уточнять да, неужели это не регулируется? телеграф, коллектд - все хорошо, но их надо допиливать, стандартный набор метрик скудный. netdata привлек именно тем, что в нем ничего не надо настраивать практически - запустил и забыл.

Меняется, но по умолчанию 15 дней: https://prometheus.io/docs/prometheus/latest/storage/#operational-aspects

ну вот, значит это не проблема.

Ну, нет по серийрного ретеншена (пока), так что небольшая проблема)

вот и думаю об этом. плюс морды netdata в том, что она прям совсем риалтайм - т.е. ежесекундное обновление. При всяких дебагах и осмотрах системы - полезно. А графана с прометеем - как более исторические инструменты для понимания тенденций и прочее. Ну и этот доп. функционал, который вроде бы не мешает ничему, т.е. той же централизованной системе, а возможно дополняет.

Есть Intel snap

Он умеет быть датасорсом для графаны

Есть Intel snap

кстати и как оно? помнится когда то в каких то новостях вроде мелькало, а по релизам вон вообще 2.0 и всё такое, но чего то тут же вон ни от кого не слышно, и что то помнится в нём смущало, а что фик упомнишь :)

кстати и как оно? помнится когда то в каких то новостях вроде мелькало, а по релизам вон вообще 2.0 и всё такое, но чего то тут же вон ни от кого не слышно, и что то помнится в нём смущало, а что фик упомнишь :)

Лёгкий over engineering

Зато тру плагины и загрузка всего и вся на лету

кстати и как оно? помнится когда то в каких то новостях вроде мелькало, а по релизам вон вообще 2.0 и всё такое, но чего то тут же вон ни от кого не слышно, и что то помнится в нём смущало, а что фик упомнишь :)

ждем 5.0 там обещают пределеать архиктуру. и сделать что бы было всё огонь. релиз запланирован на 2025

экий вы эстет и планировщик :)

вот и думаю об этом. плюс морды netdata в том, что она прям совсем риалтайм - т.е. ежесекундное обновление. При всяких дебагах и осмотрах системы - полезно. А графана с прометеем - как более исторические инструменты для понимания тенденций и прочее. Ну и этот доп. функционал, который вроде бы не мешает ничему, т.е. той же централизованной системе, а возможно дополняет.

Ты их чтоль с зябиксом перепутал

вот и думаю об этом. плюс морды netdata в том, что она прям совсем риалтайм - т.е. ежесекундное обновление. При всяких дебагах и осмотрах системы - полезно. А графана с прометеем - как более исторические инструменты для понимания тенденций и прочее. Ну и этот доп. функционал, который вроде бы не мешает ничему, т.е. той же централизованной системе, а возможно дополняет.

А что мешает в графане поставить интервал обновления в 1 секунду?

Там же 5s минимальное

а нафига оно в мониторинге посекундное?

чтобы всё лагало и вентиляторы в ноуте жужжали

Там же 5s минимальное

нет такого правила

Можно добавить 1s

Не знал, спасибо!

Не знал, спасибо!

еще через параметр в URL можно выставить

Мда, может вы и правы в итоге.

а нафига оно в мониторинге посекундное?

у меня были кейсы.

на время проведения работ на активке.

железо задрочено, но зато сразу видишь отклик. ну и кактус не позволял таки 1 секунду. так что было 5

ну... фик знает, для диагностики обычно всякое консольное посподручнее

ну на сетевом железе есть "специфика"

а... ну это да, бывает, но тут то про сервер

Всем доброго вечера! А кто-нибудь настраивал SimpleSQL в графане?

ERROR: S client not available

А что мешает в графане поставить интервал обновления в 1 секунду?

да он перепутал с другим мониторингом всё)

да он перепутал с другим мониторингом всё)

Чё? Ничего я не перепутал. Что за ерунда.

Чё? Ничего я не перепутал. Что за ерунда.

что за бред ты тогда написал?

Дружище, ты можеь взволнован сильно или чем-то обеспокоен, поэтому предлагаю пройтись покурить или подышать, и не общаться в таком тоне.

Дружище, ты можеь взволнован сильно или чем-то обеспокоен, поэтому предлагаю пройтись покурить или подышать, и не общаться в таком тоне.

Аргументы кончились? Ты не смог настроить графану и прометей на одну секунду?

Ты невнимательно читаешь, я не говорил что не смог этого. И собственно ещё даже не делал. Вопрос был у меня совершенно в другом, чем netdata как метрик коллектор, хуже остальных? И какие есть аргументы против него для этого?

Я внимательно прочёл и с полным спокойствием понимаю, что тут ты написал бредятинку плюс морды netdata в том, что она прям совсем риалтайм - т.е. ежесекундное обновление. При всяких дебагах и осмотрах системы - полезно. А графана с прометеем - как более исторические инструменты для понимания тенденций и прочее.

Ну и раз ты завел речь, то тоже вопрос, на счёт записи 150к метрик ежесекундно в базу Прометея по сети. Ты понимаешь что это за объем данных? Сложнее ли его писать каждую секунду по сети, чем каждые 10 секунд например. А в приведенной тобой цитате я НЕ говорю, что графана нельзя настроить на каждую секунду, разве этот вывод очевиден из моего текста? Ты кажется сделал себе в голове совершенно другой вывод, вместо того чтобы просто уточнить

Ну и раз ты завел речь, то тоже вопрос, на счёт записи 150к метрик ежесекундно в базу Прометея по сети. Ты понимаешь что это за объем данных? Сложнее ли его писать каждую секунду по сети, чем каждые 10 секунд например. А в приведенной тобой цитате я НЕ говорю, что графана нельзя настроить на каждую секунду, разве этот вывод очевиден из моего текста? Ты кажется сделал себе в голове совершенно другой вывод, вместо того чтобы просто уточнить

Советую научиться выражать мысли яснее сразу

Спасибо, очень ценный совет, а по теме есть что?

Спасибо, очень ценный совет, а по теме есть что?

не пользвался netdata, не совсем понял почему утверждение Ну и раз ты завел речь, то тоже вопрос, на счёт записи 150к метрик ежесекундно в базу Прометея по сети. Ты понимаешь что это за объем данных? Сложнее ли его писать каждую секунду по сети, чем каждые 10 секунд например. справедливо для прома, но для netdata это не так

Не очень понял что имеешь в виду. Из нетдата можно скрапить раз в 10-15 секунд например, для снижения нагрузки и на базу и на сеть. Ну да ладно, главный вопрос - почему его НЕ надо использовать. И против тех же node exporter/collectd, я не увидел особых "против". Ладно, надо пробовать разное, и по факту смотреть видимо. Благо сменить скрапер не проблема

Не очень понял что имеешь в виду. Из нетдата можно скрапить раз в 10-15 секунд например, для снижения нагрузки и на базу и на сеть. Ну да ладно, главный вопрос - почему его НЕ надо использовать. И против тех же node exporter/collectd, я не увидел особых "против". Ладно, надо пробовать разное, и по факту смотреть видимо. Благо сменить скрапер не проблема

я говорил в контексте сравнения, в прометее всё аналогично

дык я не противопоставляю их! нетдата просто по сути экспортер для прометея

еще через параметр в URL можно выставить

можно кстати даже 0s поставить - забавный эффект

вот кстати может надо эту "дырку" прикрыть?

дык я не противопоставляю их! нетдата просто по сути экспортер для прометея

Можно в прометей направить метрики с нее?

слушайте а кто второй прометей в проде использует

слушайте а кто второй прометей в проде использует

Будете ок метр им продавать

Ага, давайте на личности перейдем)

Не признавайтесь!

Будете ок метр им продавать

Он хороший

Он хороший

А я бедный (

Ну давайте попробуем что нибудь для вас придумать

А я бедный (

Ой

А я бедный (

Во, реплай вот так.

Я знал, что будут продавать! ?