@amarao будет жить. Поприветствуем!

неужели, настоящий?

а давайте зададим ему каверзный вопрос :)

а давайте зададим ему каверзный вопрос :)

когда будет systemd?

на BSD

Ничоси

как много я слов новых узнал. но зачем

на BSD

ну, каверзный же вопрос)

@droptheplot будет жить. Поприветствуем!

Интересненько https://twitter.com/juliusvolz/status/1031054925768388608?s=21

as well as implement subqueries (e.g. max_over_time(rate(foo[5m])[1h:1m]))

вааааааааау!

О_О

Ну это пока только хотят, как я понимаю...

Это как я понимаю, решение по итогам дев саммита, который был на промконе, вот заметки итоговые https://docs.google.com/document/d/1-C5PycocOZEVIPrmM1hn8fBelShqtqiAmFptoG4yK70/edit

А можно пин?) Мне кажется важно)

Всем привет! Есть вопрос по promql, допустим у меня приложения отдают метрики healthchecks: up и ready. Соответственно на каждый инстанс отдельный времянной ряд. Я хочу отслеживать проблемы, когда времянной ряд отсутствует (т.е приложение упало и не отдает метрики). В PromQL есть функция absent, но она работает для явно указанного ряда. Как можно это обойти и сделать что-то вроде дискавери? Руками указывать все возможные ряды не вариант.

Я добавил поддержку remote_read в адаптер для прома (https://github.com/akumuli/akumuli-prometheus-adapter). Вопрос - что будет если сконфигурировать в проме только remote_read, без remote_write. Насколько я понимаю, пром будет лезть в TSDB через remote_read интерфейс если метрики нет в локальном сторадже и можно будет настроить алерты для данных, которые есть только в TSDB. Кто-нибудь пробовал так делать?

moira-alert/moira-alert was tagged: v2.3: Merge pull request #110 from moira-alert/hotfix/cli-fixes Link: https://github.com/moira-alert/moira/releases/tag/v2.3 Release notes: Yep, I made a mistak in CLI converter

Я добавил поддержку remote_read в адаптер для прома (https://github.com/akumuli/akumuli-prometheus-adapter). Вопрос - что будет если сконфигурировать в проме только remote_read, без remote_write. Насколько я понимаю, пром будет лезть в TSDB через remote_read интерфейс если метрики нет в локальном сторадже и можно будет настроить алерты для данных, которые есть только в TSDB. Кто-нибудь пробовал так делать?

Женя, а можно новость под пин ?

Женя, а можно новость под пин ?

можно конечно, а что мне нужно сделать?

Товарищи, из графаны в телегу шлет кто уведомления?

обычно все говорят это плохо и надо алертменеджер юзать или аналоги

печаль

вообще про "из графаны в телеграм" примерно раз в месяц появляются вопросы

попробуй поискать по истории чята

они от меня походу ?

кто-то показывал вебхук

попробуй поискать по истории чята

я недавно задавал

ответа не нашёл?

но вообще да, алертинг в графане довольно примитивный, лучше использовать что-нибудь другое

я не пойму почему один алерт в разные каналы разную инфу отдает. т.е. в пушовер уходит нормальное описание, а в телегу скриншот и ссылка

Ну по нормальному нужно брать алертер по своему датасоурсу

видимо потому чт уходит не "алерт" а отрендерений шаблон оного

хотя это касается только графика с большим кол-ом данных

если сделать отдельный график по 1 хосту грубо говоря, то в телегу свалится детальная инфа

если на график вывести 100 хостов и 1 упадет - в чат придет скрин и ссылка (

он же там вроде был 1 график 1 алерт, или уже поправили

он же там вроде был 1 график 1 алерт, или уже поправили

нельзя шаблоном

moira-alert/moira-alert was tagged: v2.3: Merge pull request #110 from moira-alert/hotfix/cli-fixes Link: https://github.com/moira-alert/moira/releases/tag/v2.3 Release notes: Merge pull request [#110](https://github.com/moira-alert/moira/pull/110) from moira-alert/hotfix/cli-fixes Yep, I made a mistak in CLI converter

Yep, I made a mistak in CLI converter))

moira-alert/moira-alert was tagged: v2.3: Merge pull request #110 from moira-alert/hotfix/cli-fixes Link: https://github.com/moira-alert/moira/releases/tag/v2.3 Release notes: Merge pull request [#110](https://github.com/moira-alert/moira/pull/110) from moira-alert/hotfix/cli-fixes Yep, I made a mistak in CLI converter

Ай, сорян, у нас тут некоторые непредвиденые обстоятельства при релизе возникли) Вот норм change log: https://moira.readthedocs.io/en/latest/changelog.html#changelog По ссылке на тег теперь тоже доступен

moira-alert/moira-alert was tagged: v2.3 Link: https://github.com/moira-alert/moira/releases/tag/v2.3 Release notes: * Add API methods: `DELETE /notification/all` and `DELETE /event/all` [moira-alert/moira#73](https://github.com/moira-alert/moira/pull/73). * Add notifier config option: DateTime format for email sender [moira-alert/moira#74](https://github.com/m... More

хакеры, кто уже использовал istio?

это вам в кубер-сообщество

Внезапно, но istio еще можно и на nomad натянуть :)

не представляю, кто его использовать кроме оркестраторов будет

Подскажите пожалуйста можно ли в графане сделать на графике по оси Y только целые числа? У меня только целочисленные значения и хотелось бы четко видеть глазами чему соответствует каждая точка.

Внезапно, но istio еще можно и на nomad натянуть :)

на сайте сказано что оно там не тестировалось ;)

Ну, я верю в consul connect :)

Подскажите пожалуйста можно ли в графане сделать на графике по оси Y только целые числа? У меня только целочисленные значения и хотелось бы четко видеть глазами чему соответствует каждая точка.

разобрался. надо поставить Decimals 0

да

как раз только что то же самое коллеге показывл

moira-alert/moira-alert was tagged: v2.3 Link: https://github.com/moira-alert/moira/releases/tag/v2.3 Release notes: * Add API methods: `DELETE /notification/all` and `DELETE /event/all` [moira-alert/moira#73](https://github.com/moira-alert/moira/pull/73). * Add notifier config option: DateTime format for email sender [moira-alert/moira#74](https://github.com/m... More

(сообщение для запинивания) Я написал адаптер для интеграции Prometheus и Akumuli - https://github.com/akumuli/akumuli-prometheus-adapter Адаптер позволяет использовать Akumuli как long-term storage для прома. Это может быть полезно, т.к. Akumuli может выдавать очень хорошую производительность даже на слабом железе (может даже работать на ARM64 сервере, или дешевом инстансе в AWS/DO). На слабом железе вполне можно получить 1-2М точек в секунду на запись. Еще TSDB неплохо жмет данные и не нуждается в обслуживании, т.к. retention - disk based. Вы заранее говорите сколько диска можно использовать под хранение данных и TSDB не выходит за эти пределы. Важный момент - использование памяти растет вместе с cardinality, поэтому если у вас миллионы уникальных метрик, то TSDB будет использовать много RAM (rule of thumb - cardinality * 8KB, т.е. 1М метрик ~ 8Гб). Адаптер поддерживает read и write. Это значит что можно не переделывать дашборды. У Akumuli есть свой плагин для графаны - https://github.com/akumuli/akumuli-datasource. Он может быть полезен для создания дашбордов для работы с историческими данными (т.к. дашборды для прома обычно предназначены для оперативного мониторинга). Еще Akumuli реализует telnet-api OpenTSDB, поэтому может работать с многими коллекторами (push модель). Я тестировал collectd, tcollector и netdata.

*пределы

ERROR: S client not available

Evgeny красавчик ваще

идею для плагина мне вроде в этом чате и подкинули

но сделал-то всё равно ты

+1, выглядит очень вкусно)

Evgeny поправь плз приделы->пределы

Всем здарова, вопрос новичка, прометеус, есть приложение которое генерит по GET text based format и мне по этой ссылке нужно все забирать прометеусом! Как это сделать ?

Задача исключительно для себя

указать прометеусу куда ходить

Я рылся в GUI его но нчиего не нашел

потому что он не в гуе настраивается, а в конфиг-файле

Я рылся в GUI его но нчиего не нашел

у прометеуса есть конфиг

like this ? global: scrape_interval: 15s scrape_timeout: 10s evaluation_interval: 15s external_labels: monitor: docker-host-alpha alerting:

то есть мне ман по конфигу прочитать и там будет решение.?

это лишь часть конфига, к твоему таргету не имеющая отношения

не, у прометея нет прям "решений" в документации

но суть примерно такая, да

Ок, спасибо

поищи в интернетах примеры конфигов, даже в коде прометея пример вроде был про статик таргеты

если вывод текстовый и вы им не управляете надо будет писать экспортер

если вывод вам управляется надо будет привести к формату который понимает пром

если вывод текстовый и вы им не управляете надо будет писать экспортер

Он вроде в формате прома

тогда вопрос только как сказать прому где искать. для этого нужнопочитать секцию дискавери.

начиная от статического указания продолжая всякой непотребщиной

# HELP http_requests_total The total number of HTTP requests. # TYPE http_requests_total counter http_requests_total{method="post",code="200"} 1027 1395066363000 http_requests_total{method="post",code="400"} 3 1395066363000 вот такой формат

я так поинмаю это и есть text based format prometheus

ага да

Thnks! будем посмотреть