а сколько у него кеш прогревается?

(hint - для выборки по json логам можно взять jq )

@Civiloid а у тебя какой concurency: у carbonapi.yml ?

@Civiloid а у тебя какой concurency: у carbonapi.yml ?

1024

рили? )

@azzaazaa я делая примеры конфига списывал дефолты с продакшена

если я правильно помню

а, я тут думаю не многовато ли я поставил 50 )

а не

@azzaazaa concurency: 1024 cpus: 12 # (по физ ядрам) sendGlobsAsIs: true maxBatchSize: 100 idleConnections: 1024

@azzaazaa в принципе я бы еще убедился что в go-carbon включен trigram-index

а, я тут думаю не многовато ли я поставил 50 )

Он просто будет данные загребать не более чем в 50 потоков. Если у тебя медленные запросы есть они начнут мешать жить

я тут себе таки сборал nginx vts + prov exporter. вопрос - вы используете стандаорный даш (https://grafana.com/dashboards/2949) или все на самописном? (я пока ковыряю, все ли он рисует)

Я сначала тоже пытался стандартные использовать и напильником допиливать, сейчас своё быстрее получается чем старое допиливается, так что советую разобраться.

а, я тут думаю не многовато ли я поставил 50 )

Чо у тебя в лимитах? uname - a в студию и посчитай открытые дескриптора от ползунок графитового

Чо у тебя в лимитах? uname - a в студию и посчитай открытые дескриптора от ползунок графитового

Хз, тюнинг мониторинга отложен на завтра.

Если у тебя /etc/security/limits.conf пусто - то скорее всего оно, это же и для nginx но у него своя директива вроде для этого есть

Он просто будет данные загребать не более чем в 50 потоков. Если у тебя медленные запросы есть они начнут мешать жить

Вопрос есть по carbonapi, у него на входе (zipper) какой протокол?

Вопрос есть по carbonapi, у него на входе (zipper) какой протокол?

Протобуф

https://github.com/go-graphite/carbonzipper/blob/master/carbonzipperpb3/carbonzipper3.proto

Ага, спасибо!

я тут себе таки сборал nginx vts + prov exporter. вопрос - вы используете стандаорный даш (https://grafana.com/dashboards/2949) или все на самописном? (я пока ковыряю, все ли он рисует)

самопис

самопис

пошаришь посмотреть? или там вычищать закрытых данных много

не могу, там много закрытого

не могу, там много закрытого

оке, понимаю)

но конкретно в нашем случае дашбор простой, как монетка. Он должен выдавать статистику "топового" уровня, без деталей

ааа

Короч шел по пути упрощения

понял

участники они на русском если

Пардон, что гет поломал.

да не. ща придумаем кого кикнуть

У меня вот какой вопрос. Собрал мониторинг на telegaf+либы → influxdb → grafana. Думаю про алерты.

Какой бест практис: в графане всё накрутить, или Kapacitor развернуть?

бестпрактис дропнуть инфлюкс и ввернуть пром.

но возможны варианты

а что не так с influx'ом?

уже который раз вижу как его тут хейтят

в факе

Я честно думал о прометее, но по логике метрики собрать проще было пушами, чем пуллами.

А фак сейчас полистаю.

Я честно думал о прометее, но по логике метрики собрать проще было пушами, чем пуллами.

вопрос тз. типовые схемы можно собрать и так и эдак.

однако выбвает специфика

Окей. По факу не так страшен чёрт. Пара тысяч точек и необходимость только в оперативнх данных для разрабов, пока система в альфе. Я конечно, подниму вопрос о прометее ещё раз, но то что в факе - ещё не повод всё переделывать.

Так что там насчёт алертов?

Окей. По факу не так страшен чёрт. Пара тысяч точек и необходимость только в оперативнх данных для разрабов, пока система в альфе. Я конечно, подниму вопрос о прометее ещё раз, но то что в факе - ещё не повод всё переделывать.

М... По мне там каждый пункт ставит крест на инфлюксе в проде. Но дело твое конечно

Так что там насчёт алертов?

алерты на графане молоды очень. не умеют шаблоны. это крайне печально.

но ты выбрал уже части системы на инфлюксе. впиливай и последние две. но или одну...

Окей. Я вас услышал.

Надо было пораньше к вам заглянуть. Для меня открытием стало, что достаточно поводов так хуесосить инфлюкс. По ту сторону интернета все сдержаннее.

В любом случае после заббикса глоток свежего воздуха.

да после забикса да. но увы

и после прома тоже можно лучше

/stat@combot

combot.org/chat/-1001068522817

/link@yetanotherstatsbot

https://b.yasb.exileed.com/telegram/chat/1001068522817

Надо было пораньше к вам заглянуть. Для меня открытием стало, что достаточно поводов так хуесосить инфлюкс. По ту сторону интернета все сдержаннее.

ну инфлакс сам виноват. Кроют его исключительно за дело, как и заббикс

Кстати, альтернатива cadvisor для мониторинга контейнеров, если кто искал) https://github.com/infinityworks/moby-container-stats

Правда немного странная, но вроде неплохо отдает что нужно

а телеграф совсем плохо отдает ?

Надо было пораньше к вам заглянуть. Для меня открытием стало, что достаточно поводов так хуесосить инфлюкс. По ту сторону интернета все сдержаннее.

ну фишка в том что ты на что-нибудь из списка наткнешься с шансом 100%, вопрос лишь в том когда

666 members до сих пор висит)

https://vignette.wikia.nocookie.net/trollpasta/images/8/84/666-1.jpg/revision/latest?cb=20171021124425 можно менять

ERROR: S client not available

Если телеграм это ко мне, то у меня его просто нет.

Привет! А есть вообще возможность telegraf'ом собирать утилизацию LVM volume?

Привет, я думаю да, максимум можно взять https://github.com/influxdata/telegraf/tree/master/plugins/inputs/exec и написать на чем то нужный сборщик

Привет! А есть вообще возможность telegraf'ом собирать утилизацию LVM volume?

а утилизация Lvm volume это какая то другая утилизация нежели дискюзадж ?

а утилизация Lvm volume это какая то другая утилизация нежели дискюзадж ?

Надо было дописать "спойлер: нет"

нее. там вообще есть другие метрики да. но мне интересно о них ли речь

Есть block device, на который через lvm смотрит docker со своим devicemapper storage. У телеграфного плагина disk в тегах есть только path и fstype, но нет device_name, как в diskio

Хотелось бы, чтобы telegraf умел чекать вольюмы lvm, но судя по github его еще не завезли

О великий, ты снова пришел в обличьи Rinat Теперь нас снова 666

ох уж мне эти измерения

Кстати, может кто знает, как можно ресетить метки в python prometheus-client?

А то я тут накалякал на коленке свой docker exporter, наконец-то, с метрикой в духе container_up, но что-то мне подсказывает, что нужно будет его переодически чистить. Или чистить по нормальному стоит только перезапуском?

А может кто поделиться чем собирает метрики с nginx? Нужны адреса и коды ответов, желательно в виде модуля для nginx чтобы он сам посылал метрики.

он в логи это пишет

А может кто поделиться чем собирает метрики с nginx? Нужны адреса и коды ответов, желательно в виде модуля для nginx чтобы он сам посылал метрики.

тебе адреса чего? ip ?

А может кто поделиться чем собирает метрики с nginx? Нужны адреса и коды ответов, желательно в виде модуля для nginx чтобы он сам посылал метрики.

поднять эндпоинт с метриками используя директиву stub_status?

@Civiloid go-carbon + carbonapi хорошо работают, но есть НО )

@Civiloid go-carbon + carbonapi хорошо работают, но есть НО )

какое?

кажется carbonapi не может отдавать анотации с графита

тебе адреса чего? ip ?

Адреса страниц + коды ответов.

Адреса страниц + коды ответов.

я тебе в лс написал

кажется carbonapi не может отдавать анотации с графита

не может, да

@azzaazaa PRs are welcome :)

ну вот на монструозном дашборде с более чем 10 графиками начинаются проблемы

я даже могу помочь с тем как это должно выглядеть

анотации - ты про event'ы?

да

он в логи это пишет

Это понятно, но не очень удобно. Было бы круто иметь это в виде модуля, чтобы nginx сам отправлял данные.

@azzaazaa ну реализовать не сложно, надо сделать отдельный демон с протобуфом как протоколом, который сможет отдавать анотации

он веб-сервер

и допилить апишечку