заливаю сейчас в нее порядка 800к записей в секунду. на одном процессоре.

да не

на виртуалке средней руки.

просто неплохо справляется с сильно побочной для нее задачей

la 0.32

0.32 карл!

и iops'ы мне нравятся

подрывает продажи EMC ?

212 мегов RES

667 мегов VIRT

мало того, что использующий ее продукт напрямую умывает другой продукт EMC ?

инфлюкс забилс в угол и рыдает от таких показателей ))

это мы его ногами не били еще

инфлюкс регулярно уходит на пару минут покурить

и вообще не отвечает

у нас процессы discovery откидывают метрики на nsq

а с другой стороны сидят злые писатели, которые утрамбовывают их в базу пачками

это 4 разных сервера

IOPS карл!!

не kilo ?

все это барахло можно писать на 2 SATA шпинделя

и не париться

читать потом с них наверное будет не очень

читают обычно свежее

да и чтение там линейное, нормально пойдет

кстати к вопросу о TSDB

не забывайте про такой use case

покажи мне 100 самых загруженных интерфейсов на сети

тут influx сразу доствиданья.

Кстати по поводу инфлюкса, хотите уложить машину на которой он стоит на минут 20 в кому? Запускаем в него простой запрос: show tag keys from all (ВНИМАНИЕ! НЕ ЗАПУСКАТЬ НА ПРОДе!) - в ответ он ругается на неправильный запрос и ... кладет машину в кому на минут 20 (перестает работать все, даже ssh)

фи

а запуск процесса по 8 часов?

когда он просто взлетает

жрет проц и ничего не делает

не жрет

если бы жрал....

он жрет одно ядро.

ну я же сказал проц, а не процы ?

сосет один проц как чупачупсу

изредка жрет все. но за 8 часов он la больше 0,9 не поднимал

и мечтает, как школьница

а вопрос непопулярности прост - ее никто не пробует потому что никто не пробует :). Рецепт популяризации: 1) взять популярного агента сбора - завернуть его на эту БД 2) прилепить это к графане в качестве визуализатора 3) собрать лабу которую можно развернуть за 5 мин хвастаца, катаца на графанаконфы и прочее

У меня поддерживается протокол OpenTSDB (тот который простой по tcp) и все что его использует сможет писать данные в Akumuli. Grafana пока в планах только (вот думаю не проще ли язык запросов OpenTSDB реализовать, чем пилить свой data source для графаны, учитывая что я в js ни в зуб ногой)

У меня поддерживается протокол OpenTSDB (тот который простой по tcp) и все что его использует сможет писать данные в Akumuli. Grafana пока в планах только (вот думаю не проще ли язык запросов OpenTSDB реализовать, чем пилить свой data source для графаны, учитывая что я в js ни в зуб ногой)

там все значительно проще, чем кажется

У меня поддерживается протокол OpenTSDB (тот который простой по tcp) и все что его использует сможет писать данные в Akumuli. Grafana пока в планах только (вот думаю не проще ли язык запросов OpenTSDB реализовать, чем пилить свой data source для графаны, учитывая что я в js ни в зуб ногой)

3 пункта пути к славе и успеху расписаны :) ТСДБ много, времени на попробовать все - малавата

ну и есть разница: практически пет проект, и что то что показывает кто то большой и говорит что оно у него в проде и вот нате вам бесплатно и точно будут исправления ошибок (бесплатные)... так что для популяризации надо устроится в ФБ и посадить их на эту БД - тогда точно взлетит :)

Боюсь что там где я работаю (BloombergLP) есть свое и причем сильно круче :)

Но вообще - огромное спасибо за совет, я об этом так не думал, мне даже в голову за все это время не пришло взять и сделать то, что можно быстро, в несколько кликов, запустить и показать.

У меня поддерживается протокол OpenTSDB (тот который простой по tcp) и все что его использует сможет писать данные в Akumuli. Grafana пока в планах только (вот думаю не проще ли язык запросов OpenTSDB реализовать, чем пилить свой data source для графаны, учитывая что я в js ни в зуб ногой)

Пилите, если что - подскажем.

инфлюкс. ха

это еще нетюненая реализация

о!

проблемы

А вы всё ещё меряеете LA? :) http://www.brendangregg.com/blog/2017-08-08/linux-load-averages.html

А вы всё ещё меряеете LA? :) http://www.brendangregg.com/blog/2017-08-08/linux-load-averages.html

не, не меряем, просто смотрим на изменения :)

Но вообще - огромное спасибо за совет, я об этом так не думал, мне даже в голову за все это время не пришло взять и сделать то, что можно быстро, в несколько кликов, запустить и показать.

4 года работы в интеграторе научили не только плохому :) Ну и местные чатики если почитать то хороший срез ИТ получается, на пару тысяч человек единицы ковыряют что то самостоятельно, десятки пытаются идти им вслед, а остальные просто смотрят на эту движуху

ERROR: S client not available

?

ого, круто

очень интересно посмотреть реализацию! Это уже можно найти в гите?

Да, но ветка пока развивается. ace-editor

спасибо!

круто! я морочился с <div> и <textarea> чтобы такое сделать. Теперь смогу переделать на ace

Да, я сделал директиву для повторного использования, теперь встроить такую штуку просто.

а в SQL эдиторе будет форматирование?

В смысле, форматирование?

превращение "SELECT Col FROM TABLE WHERE 1" в SELECT Col FROM TABLE WHERE 1

А, понял. Пока точно не знаю, я хотел бы такое сделать, но надо проверить, есть ли в Ace поддержка автоформатирования.

я там видел модуль beautify, возможно, это оно и есть.

всем доброго дня. кто может подсказать, как в Grafana templating с использованием regex _пропустить_ ненужную метрику? пытаюсь вставить: frontend_(?!stats_\d+)(.+) - не берёт. а в ответ на frontend_(.+) вот такие метрики - All, a_server, c_tcp, c_server, c_server_pp_tcp, c_server_tcp, stats_1, stats_2, stats_3, stats_4, stats_5, stats_6, stats_7, stats_8

я хочу пропустить благополучно всё, что относится к stats_(.+), это возможно вообще?

Ребят, привет, а кто-нибудь мониторит зимбру прометеем ? есть экспортер ?

Хм

А может кто подсказать, что вот тут не так с роутами: # The root route on which each incoming alert enters. route: receiver: 'Admins support' group_wait: 30s group_interval: 5m repeat_interval: 1m routes: - receiver: 'Cool Team' match: team: 'cool' receivers: - name: 'Admins support' email_configs: - to: 'cute_email@cute.come' - name: 'Cool Team' email_configs: - to: 'cute_email@cute.come' - to: 'cute_2_email@cute.come' slack_configs: - api_url: 'slack_api_url' channel: 'slack_channel'

Потому что даже алерт с пометкой cool все равно идет через главный роут

А понятно. Я всегда буду читать логи, прежде чем спрашивать в чате)

можно проверить роутинг в интерфейсе алертменеджера внизу на странице /#/status

Народ привет а кто нибудь юзал вот эту связку ? https://github.com/prometheus/prometheus/tree/master/documentation/examples/remote_storage/remote_storage_adapter ? как считаете. имеет смысл написать какой то clickhouse adapter для того чтобы иметь для prometheus метрик long term storage ?

да имеет

А на что для аналитики с дашбордами посмотреть можно?

superset / redash

Народ привет а кто нибудь юзал вот эту связку ? https://github.com/prometheus/prometheus/tree/master/documentation/examples/remote_storage/remote_storage_adapter ? как считаете. имеет смысл написать какой то clickhouse adapter для того чтобы иметь для prometheus метрик long term storage ?

время которое будет храниться метрики настраивается.

время которое будет храниться метрики настраивается.

попробуйте хранить в prometheus метрики больше чем 30 дней для сколько нибудь большого кол-ва серверов и метрик...

да, прилично будет файлов.

попробуйте хранить в prometheus метрики больше чем 30 дней для сколько нибудь большого кол-ва серверов и метрик...

Зачем?