?а нашей кассандре предстоит каждый год 400+ тб без репликаций иметь в базе

Кассандра годная.

видя постресс ахуевает

Ахах, я неоднократно видел micro$oft специалистов, вынужденных заниматься этим вашим линуксом. Вот где настоящие слёзы были.

Ахах, я неоднократно видел micro$oft специалистов, вынужденных заниматься этим вашим линуксом. Вот где настоящие слёзы были.

это да

у меня вин программисту ахреневают от того, что линукс пока есть оператива ничего на диск не пишет

?а нашей кассандре предстоит каждый год 400+ тб без репликаций иметь в базе

Это пиздеж

Это пиздеж

В плане? Кодер посчитал в экселе с разной хренью накладной, и это ещё без system директории

Мы говорили уже об этом

Кодер облажался с количеством строк

Кодер облажался с количеством строк

Скинул его эксель, если даст

Да че там эксель

Он с посылками облажался

Монго не переживет 16т данных

переживёт, только вот данные не переживут

?а нашей кассандре предстоит каждый год 400+ тб без репликаций иметь в базе

про stcs ему напомни

@erzent интересно, когда ты научишься выбирать нормального работодателя?

когда ныть перестанет

:)

Ребзя всем привет

кто нить подключал бота для прометея?

https://github.com/inCaller/prometheus_bot

Коллеги, привет. Есть ли смысл использовать прометей для мониторинга и алертов инфраструктуры, а не приложений?

Коллеги, привет. Есть ли смысл использовать прометей для мониторинга и алертов инфраструктуры, а не приложений?

только для этого и есть смысл )

только для этого и есть смысл )

в чем принципиальное отличие от Nagios/Icinga2/Zabbix?

в двух словах

тем что это не говно мамонта, а живой модный проект

со своими плюсами (простота развертывания, мощный язык запросов) и минусами (необходимость дискавери и отсутсвие лонгтерм стораджа)

Вот Саша как объяснит так объяснит

звучит так, что стоит потыкать) Спасиибо

Насколько я понял там разница по сути в сторадже, MySQL не очень расчитан на мегамасштабирование

Всем добрый день

я с этим прометеем ща просто в обнимку живу, но уважаю чужой выбор – кому и заббикс конфета

я с этим прометеем ща просто в обнимку живу, но уважаю чужой выбор – кому и заббикс конфета

вот кстати, если можно просветите на тему кастомных алертов, мне очень kapacitor понравился от influxdb, в прометее есть что-то такое?

я с этим прометеем ща просто в обнимку живу, но уважаю чужой выбор – кому и заббикс конфета

правда ли, что на каждый чих надо писать свой экспортер, который биндит по порту? Или я неправильно доку читал?

2) куча готовых экспортеров уже есть, если есть код – то его, да, надо инструментировать

есть костыль с statsd экспортером, н это костыль

но

1) прометеус позволяет подкладывать файлики с правилами алерта в прометеус и роутить в алертменеджере сообщения во всякие SAAS-ы/слеки/телеграми/вебхуки(можно своё написать)

по п.2. не все экспортеры очень зрелые – иногда приходится подпиливать, так что неплохо бы знать Go или хотя бы его не бояться :)

1) прометеус позволяет подкладывать файлики с правилами алерта в прометеус и роутить в алертменеджере сообщения во всякие SAAS-ы/слеки/телеграми/вебхуки(можно своё написать)

Александр, интересуют кастомных функции, к примеру хочу свою функцию AVG написать внешнуюю, возможно ли такое?

34 гб проклятое число

и надо помнить, что прометеус (influxdb) не масштабируется/кластеризуется забесплатно, а только за денежки за лицензии

^ что это было?

при чём тут influx?

инфлакс не масштабируется бесплатно

Да, кстати, у прома что за сторадж отвечает?

Александр, интересуют кастомных функции, к примеру хочу свою функцию AVG написать внешнуюю, возможно ли такое?

нет, нильзя. но вероятно вам это и не надо, там уже мощный язык запросов (PromQL)

про прометеус не уверен, не использовал его так близко

у них свой сторадж

по п.2. не все экспортеры очень зрелые – иногда приходится подпиливать, так что неплохо бы знать Go или хотя бы его не бояться :)

Я не боюсь го, но я боюсь что у меня сразу займуться 100 портов под всякие бизнес метрики

а-ля инфлакс, но не инфлакс, свой ))

у Прометеуса своя имплементация leveldb

Я не боюсь го, но я боюсь что у меня сразу займуться 100 портов под всякие бизнес метрики

Не того боишься. С портов пока налог не берут.

нет, нильзя. но вероятно вам это и не надо, там уже мощный язык запросов (PromQL)

Спасибо за информацию, в доках этого явно не нашёл, но вдруг такое было бы. Я пока использую внешнуюю фунцию чтобы применять методы машинного обучения для предсказания поведения системы. Думаю что такое сложно сделать через QL

Ну и ничего не мешает поставить nginx перед нми, даже с ертификатами (прометей умеет ходит с кастомными)

А что у него с HA?

Не того боишься. С портов пока налог не берут.

Берут. Безопасники печалятся когда им говоришь, что надо много портов открыть

Прометеус однонодовое решение. Нода может держать довольно приличную нагрузку. Авторы пишут о перфомансе на сайте.

influx единственный сторадж который можно подключить к prometheus который в принципе может как-то масштабироваться

Ничего не мешает поднять несколько прометеусов.

Есть федеративный режим, но хз – я его не щупал. Почитайте – авторы объясняли про него, как оно работает

Ок. Спасибо

Берут. Безопасники печалятся когда им говоришь, что надо много портов открыть

ну вешайтесь на локалхост, и проксите нжинксом раз админы такие буки

> influx единственный сторадж который можно подключить к prometheus который в принципе может как-то масштабироваться а как же TSDB. Еще оно кажется даже графит умеет. DO написал vulcan, но кажется что проект не очень активно с тех пор развивается.

но это опять же экспериментальная фича пока, для лонгтерма прометеус сыр https://prometheus.io/docs/introduction/roadmap/#long-term-storage

Да, кстати, у прома что за сторадж отвечает?

хранить можно и в графите с карбон кешем

кто нить подключал бота для прометея?

я подключал, пишет дичь, темплейты не смог осилить; пилиакает затем чтобы в почте норм глянуть

ERROR: S client not available

в двух словах

oldshit/decent/average-dnishe

oldshit/decent/average-dnishe

Алерты адекватные завезли и тренды(усредненные значения)?

а чего там теплейты осиливать? ну в смысле надо разобратся конечно, но не сложнее джинжи, а код как оно уустроено так еще проще

Алерты адекватные завезли и тренды(усредненные значения)?

там к сожалению не завезли вообще, смотри на сенсу + графит, или прометеус

там к сожалению не завезли вообще, смотри на сенсу + графит, или прометеус

Я как раз про прометей. Или намек, что в заббиксе алерты не котируются?

а чего там теплейты осиливать? ну в смысле надо разобратся конечно, но не сложнее джинжи, а код как оно уустроено так еще проще

да чтот, я на дефолтном не увидел что хотел, отключил вообще темплейты; более-менее сносно пишет северити и кто куда о чем, чего хватает. но у меня другие сложности в понимании этих темплейтов

а чего там теплейты осиливать? ну в смысле надо разобратся конечно, но не сложнее джинжи, а код как оно уустроено так еще проще

Используешь пром в продакте как единственную систему мониторинга?

Используешь пром в продакте как единственную систему мониторинга?

Где как. Но вообще если под мониторингом подразумевать алертинг и графички, то 99% покрывает прометей. Но система сбора логов всё-равно нужна.

но это опять же экспериментальная фича пока, для лонгтерма прометеус сыр https://prometheus.io/docs/introduction/roadmap/#long-term-storage

И лонгтерм хранилки нет. Можно использовать только для текущих метрик и алертов, но истории не будет, как я понимаю.

Я так скорее скрещу графит и заббикс

Да, для истории надо много диска. Так-то можно настроить и полгода хранить. Но прометей в текущем виде он про оперативный мониторинг и инсайт

Я так скорее скрещу графит и заббикс

удачи

вероятно если они нравятся – это правильный путь

но звучит страшно

Да, для истории надо много диска. Так-то можно настроить и полгода хранить. Но прометей в текущем виде он про оперативный мониторинг и инсайт

Диск это не проблема. Вопрос в просмотре истории, для выявления каких-то трендов, изменений

1) под это прометеус не заточен, для трендов неплохо бы хранить данные по паре лет и иметь удобный инструментарий для управления данными 2) но то для чего он заточен он делает неплохо

универсальных систем нет, которые умеют все хорошо ну или я о них не знаю

ок. по 1 пункту, какой инструментарий можно найти?

я подключал, пишет дичь, темплейты не смог осилить; пилиакает затем чтобы в почте норм глянуть

вот этого сча подключил https://github.com/metalmatze/alertmanager-bot

поадекватнее месаги приходят

я не знаю, ибо не решаю такую задачу пока. может кликхауз?

но надо немног go чтоб оптимизорвать как надо

ок. по 1 пункту, какой инструментарий можно найти?

у меня в influxdb лежат nmon с 30 серверов за 3 года (усреднение за одну минуту), занимают ~60ГБ

поадекватнее месаги приходят

о, спасибо; гляну

вот этого сча подключил https://github.com/metalmatze/alertmanager-bot

прикольно. гляну. мне просто пока слека хватает.

там есть параметр telegram_admin где Id Надо указать

у меня в influxdb лежат nmon с 30 серверов за 3 года (усреднение за одну минуту), занимают ~60ГБ

А как собираешь?

если чо у этого парня @userinfobot

)

А как собираешь?

https://github.com/adejoux/nmon2influxdb , но это для AIX, не знаю как будет с nmon для linux.

Сами nmon собираю самописным скриптом на python

Приглашаем выступить с докладом по потоку "Системное администрирование и хранение данных" на конференции по базам данных PG Day'17 Russia! Чтобы 5-7 июля побывать в Санкт-Петербурге, поделиться опытом и узнать что-то новое у коллег, вспомните, каких результатов вы добились в последнее время и что для этого сделали. Выберите тему и подайте заявку на доклад или мастер-класс по ссылке https://pgday.ru/ru/2017/for-speakers. Авторам мастер-классов мы предлагаем гонорар в размере 40% прибыли от продажи билетов!