Высокодуховный

мы же в церкви :) как иначе то?

мы же в церкви :) как иначе то?

По поводу временного дата стора, для которого Вы хотите позднее определить назначение. Зачем оверхедить излишне данными усложняя сетевую структуру когда можно данные писать всегда, а позже выставить в планировщик задачу по какому нибудь дата аналайз который будет лишние данные удалять с икс условиями. Думаю мысли Ваши ушли не в ту степь

Т.к логика в данном случае будет одна и так же, а стек скорее всего вырастит из за желаемых прокси или что Вы хотите юзать

Ммм... там выше задача была очень коротко описана которую почти решает плагин в графане который умеет визуализировать (ну и немножко управлять тем что собирается) онлайн поток метрик из snapteld. Не всегда требуется метрики куда то сохранять. Данный кейс полезен когда пилится что то совсем непонятное (условный блек бокс) и его например еще и стресс тестированием пытают. Вот запустил на 5-10 минут открыл дашборд на одном из мониторов и втыкаешь в метрики с 100мс интервалом сбора... остановил, добавил 5-50 метрик ...запустил... итеративный процесс - писать при этом вообще все что только можно чтобы потом разгрести не нужно. Это можно делать на следующем этапе.

и да, это такая скажем исследовательская работа. Именно для нее готовить хранилище чутка излишне. Это не прод эксплуатация.

Ммм... там выше задача была очень коротко описана которую почти решает плагин в графане который умеет визуализировать (ну и немножко управлять тем что собирается) онлайн поток метрик из snapteld. Не всегда требуется метрики куда то сохранять. Данный кейс полезен когда пилится что то совсем непонятное (условный блек бокс) и его например еще и стресс тестированием пытают. Вот запустил на 5-10 минут открыл дашборд на одном из мониторов и втыкаешь в метрики с 100мс интервалом сбора... остановил, добавил 5-50 метрик ...запустил... итеративный процесс - писать при этом вообще все что только можно чтобы потом разгрести не нужно. Это можно делать на следующем этапе.

netdata?

Ммм... там выше задача была очень коротко описана которую почти решает плагин в графане который умеет визуализировать (ну и немножко управлять тем что собирается) онлайн поток метрик из snapteld. Не всегда требуется метрики куда то сохранять. Данный кейс полезен когда пилится что то совсем непонятное (условный блек бокс) и его например еще и стресс тестированием пытают. Вот запустил на 5-10 минут открыл дашборд на одном из мониторов и втыкаешь в метрики с 100мс интервалом сбора... остановил, добавил 5-50 метрик ...запустил... итеративный процесс - писать при этом вообще все что только можно чтобы потом разгрести не нужно. Это можно делать на следующем этапе.

под такую задачу проще взять и сделать отдельный маленький сторадж куда пихать на время тестов ВСЕ метрики

с нужным интервалом

netdata?

лехко, я про то что можно и вот так вот

вообще все? :) про интервал как раз и речь - можно прям на лету менять параметры съема метрик и смотреть а как оно... и при этом все в интерфейсе в котором привык работать (графана). Потом уже то что наворотил зафиксировать (слить конфиги) и пустить в какую то хранилку чтобы смотреть как оно там день, два, неделю живет

ну т.е. если заранее включить мозг... подумать... потом еще подумать, то вот такого юзкейса не будет - сразу сядешь и понимая что ты хочешь получить возьмешь и сделаешь сразу 2ой шаг

общих параметров не так много

ну как бы это такой функционал который на графанконе и показывали типа а вот есть такая штука - вау, клево и тишина

ну вот захотелось посмотреть все что могут плагины дать... и с разрешением в 100мс (чаще он вроде может, но загибаться начинает), а в бекенде у тебя графит... и давай досвиданья 100мс :) я честно мало кейсов могу придумать зачем они такую штуку запилили. Проблема в том что они тоже не всегда могут объяснить зачем. Предполагаю что они (intelsdi-x) пытаются запилить универсальную платформу сбора и предобработки данных - и пока вот такое вот получилось

https://prometheus.io/blog/2017/06/21/prometheus-20-alpha3-new-rule-format/

новый дсл для рулезов

как они задолбали. я только этот выучил и везде нормально раскатал.

да второй не раньше сентября в стабильной ветке будет

а как конкретно они задолбали?

это первый брейкинг-чейнж за два года

постоянно что-то меняют, то коллектор нужный выпилят, то синтаксис конфига поменяют, сейчас вот синтаксис алертов :)

формат базы ещё где-то поменялся

формат базы менялся пока что безболезненно

не не... гады делают что то слишком шустро... вот толи дело Забб.... :)

оно само там внутри апгрейдило на первом старте 1.6

во второй полностью новый - читаю чо там

да, в 2.0 прям сильно переделали все

не не... гады делают что то слишком шустро... вот толи дело Забб.... :)

че за вбросы? клуб латентных заббиксоидов? @ptchol был прав? )))))))))))

был блог-пост отдельный даже про новую структуру данных

че за вбросы? клуб латентных заббиксоидов? @ptchol был прав? )))))))))))

я ж тебя поддерживаю :) типа :)

@freeseacher давай бота слабаем который будет банить в этом чате за слово zabbix.

заебало. чесслово.

кто тебе мешает остановиться на том что уже используешь? тогда не будет проблем с тем что то то там меняется - очевидно же

кто тебе мешает остановиться на том что уже используешь? тогда не будет проблем с тем что то то там меняется - очевидно же

новые фичи, скорость, улучшения по стабильности хочу

хоти :)

хочу новый сторейдж

хочу новый сторейдж

не так... хочу новый сторадж забесплатно

не так... хочу новый сторадж забесплатно

тогда вообще так, хочу хороший новый сторейдж за бесплатно

хочу хороший новый сторейдж забесплатно и с SSD и на 20Tb

как назвать метрику "байты в секунду" в прометее ? просто bytes или bps?

не, сторейдж - это про базу для метрик

не, сторейдж - это про базу для метрик

да, я шучу конечно. понятно же что про базу

как назвать метрику "байты в секунду" в прометее ? просто bytes или bps?

bits per second (bit/s) and bytes per second (B/s)

bits per second (bit/s) and bytes per second (B/s)

это понятно, я про само название в прометее

https://prometheus.io/docs/practices/naming/ - смотрю как их именовать, но в данном случае не понятно

главное что бы было понятно что в метрике лежит

это понятно, я про само название в прометее

node_network_transmit_bytes node_disk_bytes_read node_disk_bytes_written

@bova

вот такие уже есть, зачем изобретать

а нельзя вместо bytes-per-second юзать счётчик?

ну да, это счётчики как раз

где математика, на экспортере или в прометее?

вот такие уже есть, зачем изобретать

node_exporter не использую, все через pushgateway пушу

если в прометее - то тогда bytes отдавай. графана сама и в bits переведет

если в экспортере/пушгейтвее - то смысл там считать rate

так все делают, отдают bytes/octets

и дело в том, что у меня нет доступа к счетчику, только сразу к rate

софт сам высчитывает Bp/s и отдает значение

...should use base units (e.g. seconds, bytes, meters - not milliseconds, megabytes, kilometers). а вот это еще интересно, если у меня софт отдает disk latency в милисекундах, руками умножать? ))

а, софт считает. ясно. я и спросил, где математика.

http://demo.robustperception.io:9100/metrics - вот тут всё правильно названо

а сами используют "_ms"

...should use base units (e.g. seconds, bytes, meters - not milliseconds, megabytes, kilometers). а вот это еще интересно, если у меня софт отдает disk latency в милисекундах, руками умножать? ))

у меня node_exporter отдаёт disk latency в ms я пока вроде не вырос до задержек чтобы переводить. да и grafana имеет такую штуку как ось Y где задается величина

софт сам высчитывает Bp/s и отдает значение

говно твой софт :)

говно твой софт :)

это даже не софт, железка )

чо за железка такая?

ERROR: S client not available

а если он микроберсты высчитывает и там max/min есть - тож говном считается? )

приходится работать с тем, что есть ))

ibm sonas

а если он микроберсты высчитывает и там max/min есть - тож говном считается? )

квантили считать?

зачем квантили. вот есть микроберст ты его как-то квантилем разве словишь?

я о том что есть всплески которые могут внутри scrape_interval быть не видны

а как ещё?

@freeseacher давай бота слабаем который будет банить в этом чате за слово zabbix.

я против. если человек хочет есть кактус - у него есть на это право

заббикс, кстати, тоже постоянно рихтует формат своей базы. правда обычно мигрирует ее он самостоятельно - при старте

я против. если человек хочет есть кактус - у него есть на это право

это была конечно же шутка.

ещё я ради отучения от zabbix'а людей буду бота писать, да пусть жрут свой кактус сами.

хотя бот нужен. ключевое слово - variable и погнали.

заббикс тут недавно анонсировал миграцию с SQL на influx...

дашборды у него уже под grafana

вот... пару лет, и не станет никакого zabbix.

ещё я ради отучения от zabbix'а людей буду бота писать, да пусть жрут свой кактус сами.

а в каком месте у меня любовь к этому ... проявилась?

не не... гады делают что то слишком шустро... вот толи дело Забб.... :)

вот тут

заббикс тут недавно анонсировал миграцию с SQL на influx...

и да и нет... там все плохо если вкратце

всё, я устал читать про zabbix..

это я шутил про: "как они задолбали. я только этот выучил и везде нормально раскатал." там даже в конце смайлики есть специально для тех кому табличка "сарказм" нужна

Ребята всем привет! подскажите есть такая задача отправлять логи всех файлов и логи контейнеров(stdout) в logstash кто как это делает? Раньше такую задачу решал через отправку syslog-ом

Ребята всем привет! подскажите есть такая задача отправлять логи всех файлов и логи контейнеров(stdout) в logstash кто как это делает? Раньше такую задачу решал через отправку syslog-ом

и зачем переделывать?

пару раз видел такую багу со стороны rsyslog при недоступности получателям там где крутится rsyslog хост через некоторое время начинал жутко тупить

filebeat разве не для этого?

плюс а как забирать логи докеров которые stdout

filebeat чего?

это агент

какого сервиса?

стека ЕЛК

агент для сбора данных и передачи их в logstash

у меня вот кибана не хочет искать по referrer: "-"

я нею зал filebeat в elk