А который последний стейбл?

Который не 1.х

Который не 1.х

Ага, спасибо :)

А то я зиппером ch положил

А то я зиппером ch положил

Новый может группировать

Но graphite-clickhouse не умеет в новый протокол

судя по тому что я в логах увидел он сгенерировал кучу мелких и забрудкастил в базы

база подумал и сдохла

Но graphite-clickhouse не умеет в новый протокол

пичаль :(

судя по тому что я в логах увидел он сгенерировал кучу мелких и забрудкастил в базы

Ну вот в новом протоколе это учтено

т.е старый протокол так и будет класть базу?

т.е старый протокол так и будет класть базу?

Да

Ну если глобов нет

или все таки последний стебл не будет во все апстримы бродкастить

или все таки последний стебл не будет во все апстримы бродкастить

Будет

гм

Там нет других методов балансировки

Настраиваемая схема в мастере

Он не протестирован в достаточном объеме

Полноценный фикс с множеством запросов только с новым протоколом работает

гм

Там два параллельных изменения крупных в мастере: 1. Поддержка более гибкой балансировки 2. Поддержка нового протокола и разбиение по maxglob для него на уровне зиппера

получается если пробовать склеивать базы (каждая со своим префиксом) под которыми снизу ch не самый лучший вариант пока

получается если пробовать склеивать базы (каждая со своим префиксом) под которыми снизу ch не самый лучший вариант пока

А много таких баз есть/планируется?

ну штук 20-30

но в варианте с ch зиппер просто положит ch из за того что бродкастит во все базы

более-меенее крупный запрос сжирает max_queries в ch

но в варианте с ch зиппер просто положит ch из за того что бродкастит во все базы

В мастере это пофиксено пунктом 1

Можешь поставить и баги репортить

мда, надо вобщем пробовать

получается если пробовать склеивать базы (каждая со своим префиксом) под которыми снизу ch не самый лучший вариант пока

в конфиге graphite-clickhouse есть blacklist. он может быстро отвечать пустым ответом на запросы, которые заведомо не ему

в конфиге graphite-clickhouse есть blacklist. он может быстро отвечать пустым ответом на запросы, которые заведомо не ему

о! спасибо! это точно улучшит ситуацию

@rlomonosov вот эта опция?

# Daemon returns empty response if query matches any of regular expressions # target-blacklist = ["^not_found.*"]

да

отрицательный регэксп писать?

я перечисляю префиксы, которые точно лежат на других серверах. если сделать whitelist по префиксу (или отрицательный регэксп), то перестанут работать запросы вида "*.blabla"

хм

хотя да, по другому то и не сделаешь :)

это как ?

Я думаю, что раньше там был прометей, и при сохранении в JSONе поле осталось. Когда меняешь датасорс, поля перезаписываются, но не удаляются.

Как уменьшить время между получением данных и их отображением? telegraf - influxdb - grafana

заменить influx?

заменить influx?

Можно в telegraf'е output timeout выставить 0, но это не рекомендуется. А еще данные пишутся каждые 10 секунд, и мне кажется, что при получении в influxdb отправляется предыдущее. Мне кажется надо смотреть параметры, только не уверен какие.

Еще в grafana datasource есть min time interval, но Я так понял с этим не связано.

Кто то пробовал делать маршрутизацию graphtieapi (то что через /render) на основе префиксов?

Кто то пробовал делать маршрутизацию graphtieapi (то что через /render) на основе префиксов?

Zipper так внутри делает

Он посылает find query=* и запоминает какие префиксы кому слать

я вот какого момента с зиппером не пойму

если у меня запросы летят напрямую в carbonapi при этом сверху балансируется, а снизу 2 идентичные бд, у меня ошибок нет и все работает отлично

как только в цепочке появляется carbonzipper(допустим просто объеденил 2 базы с похожими данными и на них перенастроил carbonapi) я начинаю ловить пустые графики, при этом graphite-clikhouse валит ошибками

именно поэтому родилась идея резать запросы сначала по префиксам а потом их распихивать по балансировщикам

Без версий, конфигов и прочих ошибок - да черт его знает что там

Подход простой - нет багрепорта с указанием этой всей информации - значит нет и бага

попробую собрать

grafana/grafana was tagged: v5.2.0-beta1 Link: https://github.com/grafana/grafana/releases/tag/v5.2.0-beta1 Release notes: release v5.2.0-beta1

@alexanderzobnin а нет ли у вас уже таска на дашборд графаны в качестве датасорса графаны? поясню вчера все пырились в графики гитлаба. а мне хотелось их покрутить. но их публичная графана не даёт права редактировать. данные как бы есть и в виде json и в виде пригодного вида, но поиграть с ними низя. грустько

подскажите, logstach можно настроить в режиме прокси, чтобы он аккумулировал на себе в единицу времени большое кол-во сообщений, и потом пулял их в сторону master нод elastic search 1 раз.

а у всех 5.1 графана на raspberry 3 model b в хромиуме стала вылетать через какое-то время?

а у всех 5.1 графана на raspberry 3 model b в хромиуме стала вылетать через какое-то время?

тут у большинства такой сетуп да ;)

у нас в двух разных офисах она стала крэшится

правда, в нашем дешборде напихано норм

подскажите, logstach можно настроить в режиме прокси, чтобы он аккумулировал на себе в единицу времени большое кол-во сообщений, и потом пулял их в сторону master нод elastic search 1 раз.

За logstash не подскажу, но heka точно умеет

За logstash не подскажу, но heka точно умеет

кстати оная жива ?

о, спасибо

кстати оная жива ?

Пока на цементос ставится

кстати оная жива ?

судя по сайту осталась в 2015.

Пока на цементос ставится

ставится не значит что жива ага.. но спасибо

ERROR: S client not available

ставится не значит что жива ага.. но спасибо

Ну, как-бы лучше и шустрее для себя не нашёл

а у всех 5.1 графана на raspberry 3 model b в хромиуме стала вылетать через какое-то время?

графана вылетает или хромиум?

графана вылетает или хромиум?

таб с графаной, да

то есть хромиум?

попробуйте менее жадный до памяти браузер

и dmesg проверь, скорее всего просто oom убивает

ставится не значит что жива ага.. но спасибо

https://habr.com/company/yamoney/blog/328018/

Ага, прошлом году был доклад на хайлоаде про хекку от денег. В духе мы знаем, что оно депрекейтед, но работает же)) А ещё у них z есть

Если не путаю, там другой проект deprecated

Из которого heka и вышла

https://github.com/mozilla-services/heka

прям черным по белому - DEPRECATED

а кстати на что они свичнулись ?

hindsight

https://github.com/mozilla-services/hindsight

тоже самое, но на C и с чуть более продуманной архитектурой

но порог входа адский)

оно уже продоготово ?

дропнули гошеньку?

based on the lua sandbox project.

понятно следующие.

Надо попробовать =)

based on the lua sandbox project.

как бэ heka тоже на нем, не?)

как бэ heka тоже на нем, не?)

а я ее и не успел посмореть. :)

как бэ heka тоже на нем, не?)

Да, но она на Golang, а hindsight на C

в день когда мне потребовалось решать проблему с логами я прочитал что heka depricated

поэтому я забил. и взял mtail

из того что в heka вкусного непортированного осталось - logstreamer и другие go'шные input'ы типа docker events

из того что в heka вкусного непортированного осталось - logstreamer и другие go'шные input'ы типа docker events

у вас в проде оное ?

неа, у нас плохо всё в проде

но я этим не занимаюсь