Точно... именно это в башне и написано ) пардон

при сборе метрик учавствуют discovery, sae, activator и chwriter

это только половина правды ?

Скажи, а сислог и трап будут резервироваться, если их на разных машинах запускатть, но слать события на оба? Что будет? Клоны аварий?

при сборе метрик учавствуют discovery, sae, activator и chwriter

Спасибо Всё хочу разобраться как взаимодействие процессов происходит...

Все таски же в nsqd ?

при сборе метрик учавствуют discovery, sae, activator и chwriter

А если пинг мертв?

Скажи, а сислог и трап будут резервироваться, если их на разных машинах запускатть, но слать события на оба? Что будет? Клоны аварий?

Клоны

Спасибо Всё хочу разобраться как взаимодействие процессов происходит...

Есть статья по сервисам

Есть, но интересно именно межпроцессовое взаимодействие

ping генерирует метрики, да

активатор, кстати, тоже может ?

кто хочет мониторить PMTU до железки и tcp retransmit/tcp rtt на cli?

Кстати насчёт cli а можно собирать метрики через cli?

Не SNMP а именно cli

кто хочет мониторить PMTU до железки и tcp retransmit/tcp rtt на cli?

PMTUD можно

На проблему встали?

Сеть то большая ;)

нет, не смотрели еще в эту сторону

но я сталкиивался с внезапным занижением MTU на арендованных каналах

но я сталкиивался с внезапным занижением MTU на арендованных каналах

Я постоянно..

хорошо, что есть привычка isis с padding'ом гонять

Ж)

Мы ещё мплс гоняем через них

я тоже гонял

там и заметно было

там и заметно было

По сислогам ответь?

выжрет кучу проца и дедуплицирует

выжрет кучу проца и дедуплицирует

Значит, теоретически такое можно?

там и заметно было

угу

ТЗ в некоторых местах кривое было, операторы не могли ничего сделать, т.к. не мы заказывали канал.. ПРиходлось MSS понижать

ну вот подумать нужно

"tcpi_state", "tcpi_ca_state", "tcpi_retransmits", "tcpi_probes", "tcpi_backoff", "tcpi_options", "tcpi_snd_rcv_wscale", "tcpi_rto", "tcpi_ato", "tcpi_snd_mss", "tcpi_rcv_mss", "tcpi_unacked", "tcpi_sacked", "tcpi_lost", "tcpi_retrans", "tcpi_fackets", # Times "tcpi_last_data_sent", "tcpi_last_ack_sent", # /* Not remembered, sorry. */ "tcpi_last_data_recv", "tcpi_last_ack_recv", # Metrics "tcpi_pmtu", "tcpi_rcv_ssthresh", "tcpi_rtt", "tcpi_rttvar", "tcpi_snd_ssthresh", "tcpi_snd_cwnd", "tcpi_advmss", "tcpi_reordering",

то, что есть в TCP info

из хорошего -- снимается просто с сокета CLI

А это как лечить?

миграцией

./noc migrate ?

Running migrations for main: - Nothing to migrate. Running migrations for project: - Nothing to migrate. Running migrations for wf: - Nothing to migrate. Running migrations for gis: - Nothing to migrate. Running migrations for crm: - Nothing to migrate. Running migrations for inv: - Nothing to migrate. Running migrations for sa: - Nothing to migrate. Running migrations for fm: - Nothing to migrate. Running migrations for pm: - Nothing to migrate. Running migrations for cm: - Nothing to migrate. Running migrations for ip: - Nothing to migrate. Running migrations for vc: - Nothing to migrate. Running migrations for dns: - Nothing to migrate. Running migrations for peer: - Nothing to migrate. Running migrations for kb: - Nothing to migrate. ? You have no migrations for the 'support' app. You might want some. Running migrations for sla: - Nothing to migrate. Running migrations for phone: - Nothing to migrate.

Ты точно инсталл олл делаешь?

@somovis вот ретрансмиты и pmtu вполне можно сбрасывать

да и объемы переданных данных

Ты точно инсталл олл делаешь?

Абсолютно

"tcpi_state", "tcpi_ca_state", "tcpi_retransmits", "tcpi_probes", "tcpi_backoff", "tcpi_options", "tcpi_snd_rcv_wscale", "tcpi_rto", "tcpi_ato", "tcpi_snd_mss", "tcpi_rcv_mss", "tcpi_unacked", "tcpi_sacked", "tcpi_lost", "tcpi_retrans", "tcpi_fackets", # Times "tcpi_last_data_sent", "tcpi_last_ack_sent", # /* Not remembered, sorry. */ "tcpi_last_data_recv", "tcpi_last_ack_recv", # Metrics "tcpi_pmtu", "tcpi_rcv_ssthresh", "tcpi_rtt", "tcpi_rttvar", "tcpi_snd_ssthresh", "tcpi_snd_cwnd", "tcpi_advmss", "tcpi_reordering",

"tcpi_snd_mss", "tcpi_rcv_mss", Может пригодится для определения неправильной настройки с двух сторон, между узлами

А для 3х инстансов с базами данных нужен HAP?

У меня ощущение, что базы не синхронизированны

Зачем ты два раза делаешь это?

да, видимо зря... File "/opt/noc/lib/python2.7/site-packages/pymongo/helpers.py", line 314, in _check_write_command_response raise DuplicateKeyError(error.get("errmsg"), 11000, error) pymongo.errors.DuplicateKeyError: E11000 duplicate key error collection: noc.noc.pools index: name_1 dup key: { : "P0001" }

Чёт видимо, пока, рано много машин... Сделаю новую инсталляцию на 1+2активатора+4кликхауса

Четыре кликхаус?

Ты наркоман?

Ты наркоман?

Ну оно же распределенное

"tcpi_state", "tcpi_ca_state", "tcpi_retransmits", "tcpi_probes", "tcpi_backoff", "tcpi_options", "tcpi_snd_rcv_wscale", "tcpi_rto", "tcpi_ato", "tcpi_snd_mss", "tcpi_rcv_mss", "tcpi_unacked", "tcpi_sacked", "tcpi_lost", "tcpi_retrans", "tcpi_fackets", # Times "tcpi_last_data_sent", "tcpi_last_ack_sent", # /* Not remembered, sorry. */ "tcpi_last_data_recv", "tcpi_last_ack_recv", # Metrics "tcpi_pmtu", "tcpi_rcv_ssthresh", "tcpi_rtt", "tcpi_rttvar", "tcpi_snd_ssthresh", "tcpi_snd_cwnd", "tcpi_advmss", "tcpi_reordering",

"tcpi_snd_rcv_wscale" - иногда полезно, иногда нет. Метрики можно собирать любые, дальше каждый выберет сам что нужно, а что нет

часть не нужна

"tcpi_snd_rcv_wscale" - иногда полезно, иногда нет. Метрики можно собирать любые, дальше каждый выберет сам что нужно, а что нет

Илья, а сколько у тебя PG ?

Илья, а сколько у тебя PG ?

1, я жду, её выпилить собираются

зачем*

наркоманы

и ты

зачем*

поправил текст

Какой пул у тебя у железах?

Дефолт

Дефолт

жаль, жаль

А что вместо PG планируется? Перечитал историю чатика не особо понял

Таки ошибка впоследней версии башни (( DuplicateKeyError(error.get("errmsg"), 11000, error) pymongo.errors.DuplicateKeyError: E11000 duplicate key error collection: noc.noc.pools index: name_1 dup key: { : "P0001" }

ERROR: S client not available

Я на git_migrate

Это правильно?

Это правильно?

да

поправил текст

А ты E11000

эту ошибку как пофиксил?

А ты E11000

откуда у тебя этот пул?

Понятия не имею Деплою из башни новую инсталляцию

Андрея лучше попроси, не могу сказать

Искать надо

Тут в поиске где-то есть

Ага, поищу спасибо

Stan, дропай все.

4 кх это примерно 200к+ железа

Тебе нужен один или максимум 2

Тебе нужен один или максимум 2

Ок )

Дб сервера оставь 1

Дббл это балансер?

да

Выбрасывай

Нечего там ещё балансить

Ты такое собрал почитав мою доку по масштабированию?

Тогда я пришёл к следующему: 1 х Главная нода с базами и монгами 2 х КХ 2 х Активатора 2 х Дисковерера 1 х WWW

Ты такое собрал почитав мою доку по масштабированию?

да)

Два кх зачем?

Резервирование?

Если да где другие резервы?

Если нет то нафиг

Шарда+репилка

Зачем?

Её надо обслуживать и деплой не собирает эту схему

Ну метрики это святое, их терять в последнюю очередь хочется )

Ее надо делать руками