Всем привет! Есть 6 одинаковых контейнеров с разным названитем внутри композа. Там же cadvisor. По 4 контейнерам свойство container_network_receive_bytes_total отдаётся по 2 нет, хотя эти 2 контейнера самые нагруженные. Настройки одинаковые у всех контейнеров, разнятся только порты. Все находятся в одной сети. Не могу понять куда смотреть

почему-то не сетевого интерфейса внутри о_О

а как оно тогда работает?

активны участникам заббикса срача раздал ро.

:(

Меня забыл

активны участникам заббикса срача раздал ро.

? задолбали накидывать

Всем привет! Есть 6 одинаковых контейнеров с разным названитем внутри композа. Там же cadvisor. По 4 контейнерам свойство container_network_receive_bytes_total отдаётся по 2 нет, хотя эти 2 контейнера самые нагруженные. Настройки одинаковые у всех контейнеров, разнятся только порты. Все находятся в одной сети. Не могу понять куда смотреть

никто не знает?

Может cadvisor не успел собрать данные?

@tnt4brain может это была и не такая плохая идея...

Может cadvisor не успел собрать данные?

в каком смысле не успел?

другие метрики контейнера он собирает

проблема только с сетью

Всем привет! Есть 6 одинаковых контейнеров с разным названитем внутри композа. Там же cadvisor. По 4 контейнерам свойство container_network_receive_bytes_total отдаётся по 2 нет, хотя эти 2 контейнера самые нагруженные. Настройки одинаковые у всех контейнеров, разнятся только порты. Все находятся в одной сети. Не могу понять куда смотреть

я наблюдал такую фигню под centos`ю ) помогло гакатывание ядра 4.x и свежего cadvisor

насколько свежего? стоит 0.28.3, вышла v0.29.0. ось rhel

а как запускается кстати?

у нас стабильнее всех в итоге заработал cadvisor из kubelet'а

просто в композ фале прописан с другими контейнерами

ксения мтс интересный ник

полночь

ксения мтс интересный ник

в своем роде знаменитость, вообще-то

в общем помогло обновление кадвизора до 0,29,0

в своем роде знаменитость, вообще-то

в чем соль?

в чем соль?

тут это оффтоп )

давайте в личке решите вопрос со знаменитостями и прочим

или в другом чате

кстати, коллеги, кто-то использует у себя timescaledb/hyperdb? Очень интересны ваши ощущения

давайте в личке решите вопрос со знаменитостями и прочим

окей

чуть оффтопну

packagecloud у всех работает

кто из РФ

?

мск пока работает

а сами репы?

нет возможности проверить..

Вебморда работает

?

Москва, ОнЛайм (Ростелеком), физик - работает (проверил здесь - https://packagecloud.io/grafana/stable/packages/el/6/grafana-5.0.4-1.x86_64.rpm, закачка стартует)

Москва, ОнЛайм (Ростелеком), физик - работает (проверил здесь - https://packagecloud.io/grafana/stable/packages/el/6/grafana-5.0.4-1.x86_64.rpm, закачка стартует)

полная блокировка – в течении суток!

Всем привет. Новичок в prometheus, возникла такая проблема. Есть приложение в kubernetes которое отсылает метрику в pushgateway, есть подозрение что тк воркеров этого приложения много то в prometheus бьется counter тк присылаются совершенно разные значения с разных воркеров. Если действительно эта проблема может существовать то как ее можно решить ?

Новичок не в prometheus, а в Солсбери. :)

Всем привет. Новичок в prometheus, возникла такая проблема. Есть приложение в kubernetes которое отсылает метрику в pushgateway, есть подозрение что тк воркеров этого приложения много то в prometheus бьется counter тк присылаются совершенно разные значения с разных воркеров. Если действительно эта проблема может существовать то как ее можно решить ?

не использовать pushgateway, а использовать нативную интеграцию с прометеем

даже в пхп есть

Киньте плиз ссылку а то я пока не понял о чем речь. Вот это https://prometheus.io/docs/prometheus/latest/configuration/configuration/#<kubernetes_sd_config> ?

это сервис-дискавери через кубернетис

что именно тебе не понятно?

что значит “использовать нативную интеграцию с прометеем” и что есть в php ?

что значит “использовать нативную интеграцию с прометеем” и что есть в php ?

https://prometheus.io/docs/instrumenting/clientlibs/

получается надо использовать сервис дискавери + нативную библиотеку, чтобы собирались метрки с каждого пода а не с одного ?

нативная библитека и сейчас используется только испольузется вариант - “Exporting to a Pushgateway”

Не надо пухшгейтвей

получается надо использовать сервис дискавери + нативную библиотеку, чтобы собирались метрки с каждого пода а не с одного ?

Да, с каждого надо

ок спасибо

https://www.youtube.com/playlist?list=PLDGkOdUX1UjpXR6BexaDoOIc0ksE2MzFI

Всем привет! Подскажите пожалуйста по синтаксису запросов в графане. нужен двойной запрос, типа такого: up{instance="10.1.29.31:9100" AND instance="10.1.29.31"} не могу подобрать нужный синтаксис, в документации на эту тему вообще ничего не нашёл. как правильно объединять условия?

instance=~"10.1.29.31:9100|10.1.29.31"

или регулярка бы подошла типа instance="10.1.29*" но такое графана видимо не умеет вообще

или регулярка бы подошла типа instance="10.1.29*" но такое графана видимо не умеет вообще

это некорректная регулярка для вашего случая, и это графана вообще никак не обрабатывает

instance=~"10.1.29.31:9100|10.1.29.31"

не работает. ошибку не выдаёт но пишет "no data"

или регулярка бы подошла типа instance="10.1.29*" но такое графана видимо не умеет вообще

Нужно оператор =~ использовать

instance=~"10.1.29.3*" тоже не работает

ERROR: S client not available

С регэкспами ваще не знаком?

не очень

с обычными регэкспами линуксовыми проще - хоть нагуглить можно. а тут видимо свой синтаксис и в доках по графане пусто

регексы везде одинаковые

более-менее

ну значит он в графане не работает

https://regex101.com/ вот тут даже режим golang есть

это не графана эти регексы обрабатывает

ну значит он в графане не работает

Графана не обрабатывает регэкспы, она их в прометей прокидывает как есть

instance=~"10.1.29.3*" тоже не работает

Ты пытался wildcard-стайл сделать, а не регэксп

народ, а кто чем мониторит апстримы в nginx?

vts вроде модный

мы vts, да

nginxlog-exporter

а на каких версиях nginx?

сразу делай метров 10 памяти для зоны, мы так огребли

мы на 13.8 кажется

думал его к 1.14 прикрутить, а vts вообще говорит "я на 1.11* остановился"

мы на 13.8 кажется

багов не было кроме как с памятью?

не, четко все

м, было в сочетании с модулем dynamic upstream, апстрим не отображался как даун, вроде

ок, спасибо, попробую потестирую

Ребят а както можно данные с регионально разнесенных прометеев данные смерджить гдето чтобы одним запросом все получать, можно ли както это через внешнюю базу замутить (например полключить как экстернал сторадж одну базу с разных прометеев) или из прометеев региональных лить в какойто один?

federation это называается

Всем привет!

Есть вопрос по датадог

Можно ли по определенному порогу метрики рестартовать некий модуль?

Никак не могу понять есть ли такая тулза в нем

а что это может быть, любезные? {"level":"ERROR","timestamp":"2018-04-18T19:30:56.893+0300","logger":"render","message":"find error","carbonapi_uuid":"9cb9f114-ea2b-439c-9dc4-b80c773b99f1","username":"","metric":"gatling.frontgermanyrgi.allRequests.all.max","error":"proto.Unmarshal: proto: GlobResponse: wiretype end group for non-group"}

carbonapi лог