вопрос лишь в том чем жертвовать

Это вопрос качества алгоритмов сжатия, innodb пишет данные несколько по другому. Там они сначала пишутся на диск как есть, потом сжимаются и пишутся еще раз. В случае TSDB данные сразу пишутся в сжатом виде. Зависит конечно от конкретной БД, но все равно, тут стоит ожидать сильно более высокой эффективности, нежели в случае OLTP систем.

Это вопрос качества алгоритмов сжатия, innodb пишет данные несколько по другому. Там они сначала пишутся на диск как есть, потом сжимаются и пишутся еще раз. В случае TSDB данные сразу пишутся в сжатом виде. Зависит конечно от конкретной БД, но все равно, тут стоит ожидать сильно более высокой эффективности, нежели в случае OLTP систем.

писать уже в сжатом это как раз про "read vs write + space"

в TSDB просто принято приносить в жертву Read в угоду всему остальному

точнее либо Read либо Write

Читать несжатые данные может быть ничуть не быстрее чем читать сжатые. Ну и к тому же, декомпрессия обычно быстрее выполняется.

Читать несжатые данные может быть ничуть не быстрее чем читать сжатые. Ну и к тому же, декомпрессия обычно быстрее выполняется.

Это уже зависит от алгоритмов сжатия и прочего

Сжатые данные, это более высокая эффективность кэширования, больше всего влезает в RAM, меньше тартится throughput диска.

ценой CPU при этом

Я запускал свою БД под нагрузкой и смотрел сколько instructions per second показывают счетчики с реальной нагрузкой буквально вчера. У меня ips в лучше случае 0.59, процессор может 4. Т.е. все упирается в память, в ее пропускную способность, а вообще алгоритм сжатия может порядка гигабита данных в секунду проживать (ЕМНИП). Он оч. простой и хорошо оптимизирован. В общем, тут слишком много всего можно крутить и сравнивать, поэтому сложно такие однозначные выводы делать. В моем случае основные тормоза вызваны кэш и TLB промахами, количество которых падает при использвании сжатия, т.к. приходится меньше скакать по памяти.

Ну и никто не обязывает жертвовать чем-то одним, вот в influx и space amlification и write amplification огого :)

Посоны, как вы делаете алерты для ELK? Про риман, elastalert и watcher знаю, что ещё есть?

вот кстати еще про алерты

ALERT BadSiteResponse IF probe_http_status_code ne '200' LABELS { severity = 'critical' } ANNOTATIONS { description="Bad HTTP response on {{$labels.instance}} "}

ругается на вторую строку

пробовал <>

один хрен ошибка

значение может быть только числом

Float64

а ты сравниваешь со строкой

а если ставить <> 200

?

хотя я так пробовал вроде

блин, не могу найти исчерпывающий ман

!=

да, с документацией у прометея довольно грустненько

с одной стороны, есть всё, а с другой стороны, как-то очень сжато и без хороших примеров использования

https://prometheus.io/docs/alerting/rules/ ну что это, блин

IF <expression>

а вот это <expression> - любой валидный запрос в прометей

> The optional FOR clause causes Prometheus to wait for a certain duration between first encountering a new expression output vector element (like an instance with a high HTTP error rate) and counting an alert as firing for this element. Elements that are active, but not firing yet, are in pending state.

я ж говорю, вроде всё описано как есть

но без хороших примеров использования хуй допрёшь

ладно я с прометеем полтора года общаюсь уже, вроде всё что надо знаю

я только месяц

и в слезах просто

общайся с авторами в ирц

там коммьюнити отзывчивое

https://prometheus.io/docs/querying/operators/

науглил вот

тебе надо !=

прямо в консоли прометея выполни probe_http_status_code != 200

прямо в консоли прометея выполни probe_http_status_code != 200

так работает

вот прямо это и пиши в алерт

там же просто выполняется периодически запрос, и если он вернул не пустой ответ - начинает гореть алерт

общайся с авторами в ирц

когда как

я их спрашивал раза 4 как в алертменеджере писать алерты в роут какой-то только о определённых джобах\инстансах, в итоге через trial&fail сам додумался

Там же по меткам прост

Никакой магии

блин, там оказывается важны отступы

я поэтому и спотыкался

Привет, кто-нибудь отображает все алерты Prometheus в графане, если да, то каким образом?

Поправлюсь, все сработавшие алерты

блин, там оказывается важны отступы

Бл там ямль

В ямль синтаксис не умеете что ли :/

Поправлюсь, все сработавшие алерты

ALERTS?

Не помню, хранится ли их история

ALERTS?

Ага. Мне не нужна история. Только current. Интересует кто в каком виде отображает. Если отображает

Мы не юзаем, в графане теряться могут, потому что могут выгребаться не все на интервале

ERROR: S client not available

Бл там ямль

как то вообще не очевидно что там ямль

Покажи где у прометеевских проектов не ямль в конфигах

yaml же благодать вообще спустившаяся к нам с небес, вычо вычо

Ага. Мне не нужна история. Только current. Интересует кто в каком виде отображает. Если отображает

в графане есть спецальная панель Alert list

http://docs.grafana.org/guides/whats-new-in-v4/#alert-list-panel

yaml же благодать вообще спустившаяся к нам с небес, вычо вычо

и туда же томл )

в графане есть спецальная панель Alert list

Хм... но там же нет возможности выбрать датасорс прометеуса и вывести алерты...

Хм... но там же нет возможности выбрать датасорс прометеуса и вывести алерты...

тогда вы можете сделать вывод в панели Таблица примерно так ALERTS{alertstate=~"pending|firing"} > 0

Да, именно так я и делаю

Думал, может есть способ покруче

народ кто нить https://grafana.com/plugins/jdbranham-diagram-panel юзает ?

народ кто нить https://grafana.com/plugins/jdbranham-diagram-panel юзает ?

Я пытался прикрутить как замену заббикс картам. Не осилил

почему ?

Руками столько же пришлось бы делать, сколько и в заббиксе, а заббикс-карту заполняют и поддерживают без меня.

Хм... но там же нет возможности выбрать датасорс прометеуса и вывести алерты...

примерно с версии 3.5 можно

народ кто нить https://grafana.com/plugins/jdbranham-diagram-panel юзает ?

на замену cacti weathermap тоже не годится

и тупо не работает, если узлов-связей в диаграмме больше пары десятков

не работает даже даже демка на странице либы, на которой основан этот плагин

и тупо не работает, если узлов-связей в диаграмме больше пары десятков

ага. вот это ценная инфа.

ну ты посмотри на демку на странице либы, может для твоего кейса пойдёт

не помню как называется

Я пытался прикрутить как замену заббикс картам. Не осилил

Я, кстати, по этому поводу отвечал на топик недавно https://community.grafana.com/t/zabbix-map-on-grafana/993

Я, кстати, по этому поводу отвечал на топик недавно https://community.grafana.com/t/zabbix-map-on-grafana/993

Жесткач, на спасибо огромное.

Самый простой вариант - просто картинку оставить.

Ох жескачь

Просто для меня графана - инструмент, которым я скрываю переход с zabbix на prometheus

:)))

Скрываю от пользователей*

Ржу нимагу