source="main.go:150" это?

я думал что это строка с ошибкой

в коде

а, кавычка не там

сорри

а как выглядит 22 строчка того ямла?

module: [icmp_check]

блин, паходу я смешал конфиги блакбокса и прометея

?

удачного распутывания ?

а зачем, все в один конфиг писать?

не понял вопрос? там два конфига

один для экспортера, другой для прометея

они разные канеш

столкнулся с самым банальной вещью в графане , за 7 и более дней , берет странные значения чем за 24 часа , подскажите куда копать

столкнулся с самым банальной вещью в графане , за 7 и более дней , берет странные значения чем за 24 часа , подскажите куда копать

а какй бекэнд ?

не смейтесь только , ужасный заббикс

на пром еще не перевёл

и тип счетчика counter ?

метрики*

consolidatby можно поробовать разные

если непоможет то колво отображаемых точек можно попробовать увеличить для графика

не смейтесь только , ужасный заббикс

^

столкнулся с самым банальной вещью в графане , за 7 и более дней , берет странные значения чем за 24 часа , подскажите куда копать

есть чатик про зябикс, там отвечает автор плагина графаны к нему, скинул в личку

спасибо

блин, вот я наелся

блин, вот я наелся

м?

probe_success 0 от блакбокса

хоть ты тресни

curl 10.150.254.27:9115/probe?target=8.8.8.8&module=icmp

и просто curl 10.150.254.27:9115/probe?target=8.8.8.8

причем на хостах с вебом он тянет probe_http_status_code

а вот именно probe нет

и метрики probe* не приезжают в пром ни черта

о,кажется понял

кавычки незабыл ?

не, порт

ему надо обязательно порт указывать в таргете

теперь осталось помнять почему метрики из блакбокса не приезжают на морду прометея

получается что прометей работает только по хттп

не получается, внимательно читайте документацию

и блог автора

https://www.robustperception.io/tag/blackbox_exporter/

что то мне тут вот sphinxsearch дико "понравился", а вот чем его лог парсить, как то нет внятности, а вот через collectd tail я могу же только количество и частоту вхождений узнать? какие то значения из лога оно мне никак не выдерет? Это получается только свой какой нибудь питон или прочий парсер писать?

что то мне тут вот sphinxsearch дико "понравился", а вот чем его лог парсить, как то нет внятности, а вот через collectd tail я могу же только количество и частоту вхождений узнать? какие то значения из лога оно мне никак не выдерет? Это получается только свой какой нибудь питон или прочий парсер писать?

или брать и писать правила для rsyslog/logstash/fluentd. Или переписывать приложение чтобы оно давало структурированные логи

ндас... печалька

последнее кстати решает все проблемы с парсингом логов раз и навсегда )

а... нет туплю просто надо читать чуть дальше названия плагина :) он может же число вынуть

так, я вроде настроил в прометее icmp

но поймал новую пакость

context deadline exceeded при icmp проверке хоста на котором ping timeout

причем увеличивал scrape_interval - не помогает

сам probe проходит секунд за 5

кто-то по icmp делает в прометее проверки?

можно глянуть параметры?

я делаю, у меня валятся тоже иногда с этой ошибкой, когда какие то хосты отваливаются

причем валятся доступные хосты с этой ошибкой

потом оно либо исправляется либо приходится рестартовать прометея

хотя последний раз поставил скрейп 30секунд и вроде нет такого больше

еще читал типа что эта ошибка может возникать если ты тэгаешь инстанс тэгом host

типа прометей может не переварить там что-то

ERROR: S client not available

ну вплане у хоста уже есть тэг Instance и нет профита в тэге host

я делаю, у меня валятся тоже иногда с этой ошибкой, когда какие то хосты отваливаются

У меня не иногда, а вот прям сразу

scrape 30 sec это такое

Хотелось бы меньше

так то да) у меня столо 10, и чето херовато становилось ему когда context deadline

ну вот щас поставил scrap 30 s

один черт

где-то еще таймаут

а настройки самого блакбокса не менял?

icmp: prober: icmp timeout: 5s icmp: protocol: "icmp" preferred_ip_protocol: "ip4"

может тут таймаут больше

Нет тут не трогал

Да все

Я набрал параметры

Все норм, только канеш реакция долгая

Больше минуты

В купе с алертингом выходит долговато

Надо ещё покрутить почитать

Тут что ли русские метриказоиды обитают?

Даже пару знакомых имён в чяте

In metrics we trust

тут, тут

Смотрю у кого-то пинговалка не работает

А курлом руками пинговалку пробовал ли дёргать?

context deadline exceeded при icmp проверке хоста на котором ping timeout

Ну у тебя и будет up==0, ты не этого хочешь?

Или даже probe_success=0 от экспортера вернётся

Смотря как настроишь

Если scrape отвалится по таймауту, то будет up=0 без метрик, а если сработает таймаут в блекбоксе, то будет up=1 и probe_success=0

И не забывайте про scrape_timeout в прометее, настройка того же уровня, что scrape_interval, уровня джобы