а в базу независимо пишут информацию хосты уже

не самый правильный подход, но хорошо встраивается в имеющейся зоопарк зато

Так ты про визуализацию или съем данных?

Так ты про визуализацию или съем данных?

я про алертинг по метрикам

И в каком месте там очередь возникает? Задания на проверки значений метрик?

Кстати, в Графане 4 писали про алертинг

Кстати, в Графане 4 писали про алертинг

Ну он куций

И в каком месте там очередь возникает? Задания на проверки значений метрик?

Угу, вполне как вариант. Но вообще любое шардирование подошло бы, если есть фейловер хост

потому что в 1 рыло оно не очень работает

Скажи, какой объем занимают данные за час скажем в TSDB?

слишком много математики нужно постфактум уже, на стороне мониторилки

Скажи, какой объем занимают данные за час скажем в TSDB?

те по которым мониторинг? Ну мегайбаты

может десятки мегабайт

скорее всего впаяны в мать

Нет

@demeliorator приходи в питоночатик, там опять наш противник статистики лютует

те по которым мониторинг? Ну мегайбаты

Это на 1 метрику или на все?

@demeliorator приходи в питоночатик, там опять наш противник статистики лютует

кинь ссыль плиз

Это на 1 метрику или на все?

сумрано, но я не считал прям вот четко, примерная прикидка

кинь ссыль плиз

https://telegram.me/ru_python

https://telegram.me/ru_python

Давайте им стекеров накидаем? Фашисты!

@demeliorator приходи в питоночатик, там опять наш противник статистики лютует

В который из трех?

В который из трех?

я выше кинул один

В который из трех?

ёмаё

поделись двумя другими))

сумрано, но я не считал прям вот четко, примерная прикидка

Не совсем точно понимаю задачу, но вот это ложится на Тарантул хорошо. Там у них есть репликация, шардирование , костыли для кластеров

ты редставляешь, какого размера будет индекс в памяти?

и какого размера будет ченджлог?

Не совсем точно понимаю задачу, но вот это ложится на Тарантул хорошо. Там у них есть репликация, шардирование , костыли для кластеров

Но нет алертинга

Не совсем точно понимаю задачу, но вот это ложится на Тарантул хорошо. Там у них есть репликация, шардирование , костыли для кластеров

У меня есть тсдб

Отдает ответы быстро

Но нету алертинга который сам умел бы паралелиться

ты редставляешь, какого размера будет индекс в памяти?

Там можно запись до 1 мбайта и писать что угодно

Но нету алертинга который сам умел бы паралелиться

Ну понял. Нужно типа воркеров, которые вычисляют долго. И тут возникает очередь заданий.

Ну понял. Нужно типа воркеров, которые вычисляют долго. И тут возникает очередь заданий.

ну не то чтоб долго. Проблема в том что это кучи проверок и у того же босуна сейчас время отработки списка занимает 50 секунд, во время этих 50 секунд цпу сжирается примерно весь

В одном процессе?

А вообще зная я как вы мониторите. Все педали в пол, тысячи сенсоров в секунду итд. Ясен хер что загнется что угодно

ты что-то слышал про LSM Tree?

поделись двумя другими))

Есть еще питерский

Есть еще питерский

PiterPy?

В одном процессе?

босун на го написан, процесс 1, потоков столько сколько и ядер и жрет не одно ядро, а все

PiterPy?

Есть еще один

https://telegram.me/spbpython

босун на го написан, процесс 1, потоков столько сколько и ядер и жрет не одно ядро, а все

Ну тебе получается нужен кластер тогда, а не распаралеливание

Ну тебе получается нужен кластер тогда, а не распаралеливание

ну можешь и так сказать. Суть не меняется

А почему просто не взять и не поделить на две группы - это сервера отдела А, а вот это отдела Б.

А давайте мониторить мониторы - как вся страна делает

А почему просто не взять и не поделить на две группы - это сервера отдела А, а вот это отдела Б.

ручная работа - рано или поздно отделы тоже вырастут

и надо будет еще раз делить

и еще

и еще

еще именно мысль с очередью она о том что можно поставить допустим 6 серверов на проверку, каждый делает 1/6 работы. А если кто-то сдох, то его проверки сделают оставшиеся

как "простое" решение

Только алертинг узкое место или остальное тоже кластеризовать?

Только алертинг узкое место или остальное тоже кластеризовать?

а что остальное?

Только алертинг узкое место или остальное тоже кластеризовать?

я рассматриваю в общем только алертинг, притом с точки зрения что tsdb - это просто один из датасорсов (в виде плагинов) и что ты делаешь с тсдб - твоя проблема

Ну, например ты поставил 6 серверов алертинга, а потом нужно 6 отдельных tsdb. Или не нужно. Вот в чем вопрос.

Ну, например ты поставил 6 серверов алертинга, а потом нужно 6 отдельных tsdb. Или не нужно. Вот в чем вопрос.

не имеет значения )

https://prometheus.io/docs/introduction/overview/

Чот смотрю я на схему этого прометеуса и кажется она мне чрезмерно сложной и подверженной внутренним всяким поломкам и косякам. А мониторинг который ломается, не мониторинг.

Чот смотрю я на схему этого прометеуса и кажется она мне чрезмерно сложной и подверженной внутренним всяким поломкам и косякам. А мониторинг который ломается, не мониторинг.

например каким?

например каким?

Что каким?

Что каким?

>чрезмерно сложной и подверженной внутренним всяким поломкам и косякам

Пока не знаю, не пользовался. Но исхожу из практики, которая показывает, что чем больше компонентов, тем выше вероятность поломки одного из них

такое впечатление, что что-то переполняется, что-то, что не описано в доке

По-умолчанию thinpool в течении 60 сек. даёт писать на переполненный том в ожидании его расширения. Если это не происходит то только тогда выдаёт ошибку, теряя данные за 60 сек. Да вы конечно-же читали Data space exhaustion в http://man7.org/linux/man-pages/man7/lvmthin.7.html

Но thin pool говно же вовсе не потому, почему сказал Даниил Маркович

thin pool это экзистенциальное, онтологическое говно

Когда у вас есть где-то подраздел с метаданными, который может переполниться, он рано или поздно переполнится

Как то ружье

Аргументация уровня “чем больше компонентов, тем выше вероятность поломки одного из них”, я знаю

Возможно, мы не заслуживаем иной

в стране совсем весело

мегафон выкупил 64% майл сру, йота, мегафон объявили о закрытии всех безлимитных тарифов на интернет мобильный

скажи, давно за навигатор не платил 800-1000р в месяц?

хочешь снова?

скажи, давно за навигатор не платил 800-1000р в месяц?

Никогда. Навител - оффлайновый. Пробки - копейки. Запускаю пару раз в год.

Никогда. Навител - оффлайновый. Пробки - копейки. Запускаю пару раз в год.

один из плюсов глуши, нет пробок

сейчас будет более интересно, если от безлимитных тарифов простые операторы ещё следом откажутся

сейчас будет более интересно, если от безлимитных тарифов простые операторы ещё следом откажутся

Хрыч ну вот что мля за пи...? Ну вот как ты умудряешься уже в 7 утра это гавно свое в люди нести...? Нет безлимитных тарифов - всё иди убейся, не мучай не себя - не врачей.

Проснулся, настроение гуд... зашел поздороваться называется

Всем привет, ребята.

У меня кстати никогда безлимита и не было. 4 ГБ хватает

Проснулся, настроение гуд... зашел поздороваться называется

?ну так я тут для этого, необоснованный позитив снимать

?ну так я тут для этого, необоснованный позитив снимать

Он обоснованый! ты вот свое "добро" что ты в люди несешь - как обоснуешь?

Он обоснованый! ты вот свое "добро" что ты в люди несешь - как обоснуешь?

его правительство рф творит

Правительство РФ те еще педики, б/п

Но тарифы на связь устанавливают не они

Правительство РФ те еще педики, б/п

Хрычевы друзья, он им вечно тут пиар устраивает

А я все же настаиваю на бане за политоту

От хрыча один негатив

А я все же настаиваю на бане за политоту

А может да...

Но тарифы на связь устанавливают не они

ну, это они закон яровой ввели, и сейчас доводят операторы

Бляяяя

От хрыча один негатив

Нарм, пусть будет

без меня тут слишком позитивно будет