нет, именно 2->5 full cluster restart. Как я понял, ноды можно обновлять по одной, но нужно отключать миграцию данных между ними на время обновления

иначе будет ад

ну да, логично

просто при миноре они вообще без проблем обновляются

все мажорные релизы несовместимы и требуют полного рестарта кластера

Но обновление можно произвести хитрее, если вам позволительна остановка инжеста данных в эластик

вы можете просто одну ноду апнуть на новой версии и нацелить аппы, если заведется просто остальные цепануть.

если всё подохло, то откатить у тодну и ресинкнуть её

вопрос

2ha/3elastic/4logstash ок схема?

отстой

а кроме меня в этом чате еще извращенцы с инфлюксом есть ? :)

Хочу стать извращенцем с инфлюксом. Впервые с мониторингом и метриками сталкиваюсь, но выбор пал именно на него. Зачем графану еще подрубают с ним, если в инфлаксдэйта свой дашборд есть?

он за бабло

Хочу стать извращенцем с инфлюксом. Впервые с мониторингом и метриками сталкиваюсь, но выбор пал именно на него. Зачем графану еще подрубают с ним, если в инфлаксдэйта свой дашборд есть?

не делай этого, бро

делай это! муахаха!

Ненавижу графану

Алексей, я понимаю, что тебе трудно страдать в одиночку

Ненавижу графану

вброс не за считан

но это не повод сбивать людей с прямого пути

вообще можно поставить риман :3 И наливать метрики параллельно в инфклюкс и графит

и посмотреть потом, что больше понравится

(графит больше понравится)

Ненавижу графану

чой то?

чой то?

нет нет. даже не начинайте

Хочу стать извращенцем с инфлюксом. Впервые с мониторингом и метриками сталкиваюсь, но выбор пал именно на него. Зачем графану еще подрубают с ним, если в инфлаксдэйта свой дашборд есть?

инфлакс глючный

1,1 пока радует.

нет нет. даже не начинайте

Нет уж. Пусть аргументирует

это же александр, не будет там аргументов

он за бабло

Я так понял у них про облачные решения и поддержку денег берут, а kapacitor в сорцах лежит. Чет мутно на сайте

отстой

а более информативно?

за кластер они бабла хотят

и за хронограф

а более информативно?

ну у вас сообщение не очень то информативное тоже )

вброс не за считан

Точнее не навижу свои кривые руки :D

это же александр, не будет там аргументов

Что-то не так?

opentsdb и прочее поверх кассандры кто-то использует?

да, про opentsdb интересно

у opentsdb большой оверхед по диску и ему нужен hbase, я бы там например котировки валют хранил, т.е те данные точность которых надо сохранить

указывать в телеграфе мибы оказалось не очень хорошей идеей. сейчас запускается примерно 60 запросов длительных и вижу в процессах столько же 2876 ? R 0:00 snmptranslate -Td -Ob RFC1213-MIB::ifMtu 2877 ? R 0:00 snmptranslate -Td -Ob RFC1213-MIB::ifMtu 2878 ? R 0:00 snmptranslate -Td -Ob RFC1213-MIB::ifSpeed 2889 ? R 0:00 snmptranslate -Td -Ob RFC1213-MIB::ifSpeed 2890 ? R 0:00 snmptranslate -Td -Ob RFC1213-MIB::ifInOctets 2891 ? R 0:00 snmptranslate -Td -Ob RFC1213-MIB::ifPhysAddress 2892 ? R 0:00 snmptranslate -Td -Ob RFC1213-MIB::ifPhysAddress

сожрал cpu

они психи

хорошо что IFMIB

будь MIB с большим количеством зависимостей - хост будет тупо парсить mib'ы

Ненавижу графану

Проблема была с collectd, а точнее с selinux :(

Проблема была с collectd, а точнее с selinux :(

selinux - на редкость укуренная софтина

ее по моему до конца никто не понимает

Ну... можно закинуться тем же что и разрабы и постигать дзен

)))

Селинукс проста и логична :)

Прям как иптаблес.

Да? Значит я не постиг ещё дзен

Угу, отсыпать? ;)

Нее, сам выращиваю

Прям как иптаблес.

это он логичный, пока простые вещи делаешь

а вот дальше начинаются нюансы

ethstat plugin: No stats available for bond1

Как такое может быть? O_o

Всё разобрался, указываются физические интерфейсы, странно что в доке ничего не сказано об этом.

нет, именно 2->5 full cluster restart. Как я понял, ноды можно обновлять по одной, но нужно отключать миграцию данных между ними на время обновления

Там ж вроде можно сделать что-то типа отреплицировать с удаленной ноды. То есть пятый кластер поднять и в него на лету слить

Где-то в доках по апгрейду было, но я не пробовал

А, так вроде даже с первой версии можно: https://www.elastic.co/guide/en/elasticsearch/reference/current/reindex-upgrade.html#reindex-upgrade-remote

https://telegram.me/clickhouse_ru тут сегодня хороший разговор о скейлинге графита

Всем привет. В интернетах набрёл на ссылку на Графану википедии, посмотрел, показалось интересным: https://grafana.wikimedia.org/. Какие-то дашборды - спорные, какие-то - хороши в качестве образца/примера/быстрого справочника.

ERROR: S client not available

у википедии даже есть где-то описание того какая у них архитектура

https://wikitech.wikimedia.org/wiki/Graphite что-то такое

интересно, что у них в стеке имеет место statsd

и их же ганглия - https://ganglia.wikimedia.org

а там реально кладезь

— похоже, это единственная действительно крупная организация, IT-инфраструктура которой открыта

интересно, что собирают в statsd/graphite похоже через diamond

привет, а кто может подсказать по prometheus хочу развернуть у себя, но никак не могу найти четкой информации по системным требованиям, если разворачивать на обычных виртуалках под centos сколько делать виртушек под фронт, бэк и сколько ресурсов выделить для мониторинга 100-200 машин?

скромно замечу, что в вопросе не хватает конкретики. сколько метрик в секунду планируется собирать? от этого уже можно начать какие-то прикидки, хотя бы ориентируясь на ту же инфраструктуру викимедиа.

скромно замечу, что в вопросе не хватает конкретики. сколько метрик в секунду планируется собирать? от этого уже можно начать какие-то прикидки, хотя бы ориентируясь на ту же инфраструктуру викимедиа.

а почему в секунду? раз в минуту разве нельзя делать?

а почему в секунду? раз в минуту разве нельзя делать?

Принято менять в точек в секунду

почему же? конечно, можно. решать, как именно делать - это привилегия/обязанность администратора ? а размерность в метриках в секунду просто хорошо подходит для оценки производительности того или иного решения.

Можно слать хоть точку в день

мне нужно не много в основном ос метрики, пару метрик для БД и нужен веб чек, проверка сертификатов

для алертов

проверка валидности сертификатов - это больше к алертингу относится, как мне кажется.

да эт к алертам

так как оценивать ресурсы?

или хотя бы с какой базовой конфигурации начать

ос = 4 метрики(диск, сеть, память, проц)*100 машин = 400 метрик. если брать их раз в минуту - так это весьма средней руки графит вроде получается (6-7 метрик в секунду). я бы алертинг вынес на отдельную ноду, т.к. будет заметно грузить. предлагаю чатику меня поправить - могу ошибаться.

ос = 4 метрики(диск, сеть, память, проц)*100 машин = 400 метрик. если брать их раз в минуту - так это весьма средней руки графит вроде получается (6-7 метрик в секунду). я бы алертинг вынес на отдельную ноду, т.к. будет заметно грузить. предлагаю чатику меня поправить - могу ошибаться.

Графит на ноду 100к в секунду выжимает даже тот что на питоне

То есть это не нагрузка

Имхо ее такую выжмет баш скрипт дергающий гнуплот на txt файл

так как оценивать ресурсы?

Вообще брать и ставить на то что есть, а потом пытаться убить

Как убил - оцениваешь во что уперсч. Потом понимаешь планку на процентов 20 и смотришь стабильно ли держит нагрузку пару дней

сурово, но справедливо. никогда не узнаешь пределов, не попытавшись за них выйти.

да это понятно, просто везде пишут про установку на одну машину те там и графана и алерты и сам сервер, можно конечно из под докера запустить все, но думаю так не очень правильно

докер здесь предполагается для справедливого деления ресурсов хоста?

я хотел поставить на одну машину сервер с алертами, на другую графану

Дальше можешь сапроксимировать уже