у меня такого нету

для отладки

а, поскольку, FM я у себя так и не поднял, то помочь мало чем могу

бле

У меня поток есть - 10к RA пользователей в VPN, 140 контекстов на асе - они активно генерят события + всякий хлам во всей сети

везёт:)

это лечится

это лечится

как?

Отключением syslog/trap?

no logging message 106015 no logging message 106015 standby no logging message 313005 no logging message 313005 standby no logging message 419002 no logging message 419002 standby no logging message 106023 no logging message 106023 standby no logging message 305012 no logging message 305012 standby no logging message 305011 no logging message 305011 standby

в общем на асе хуяришь весь шлак

чтобы осталось только полезное

мы свой сислог сервер также завалили

миилиард сообщений от асы

no logging message 106015 no logging message 106015 standby no logging message 313005 no logging message 313005 standby no logging message 419002 no logging message 419002 standby no logging message 106023 no logging message 106023 standby no logging message 305012 no logging message 305012 standby no logging message 305011 no logging message 305011 standby

no logging message 713123 no logging message 713122 no logging message 313001 no logging message 722020 no logging message 722037 no logging message 113009 no logging message 113008 no logging message 113013 no logging message 722035 no logging message 113012 no logging message 722046 no logging message 113004 no logging message 611103 no logging message 611102 no logging message 611101 no logging message 716058 no logging message 113039 no logging message 716001 no logging message 716002

и место кончилось

и так

мало отключил

если сообщения продолжают литься

Я отключил что валится лишнее

далее лишнего нет

это конкретно аса только для RA

@freeseacher у тебя сколько сообщений от nsq в памяти?

50к

А у меня?

А у меня?

по умолчанию 10к

по умолчанию 10к

Сделай даш? А то тот у меня не алло

Сделай даш? А то тот у меня не алло

?

Какой?

@freeseacher @aversant @dvolodin когда в памяти очередь - всё ок, когда на диске - начинаются проблемы

iops?

Какой?

Ну ты адапттровал выше скинутый под себя?

Ну ты адапттровал выше скинутый под себя?

он подошёл как влитой

Хм

Я наверное не тот сорс хернул :(

Странно всё же это

Я не верю что от такого кол-ва событий nsq не справляется

@freeseacher потоки коррелятора и шедулера?

@EKbfh сколько у тебя объектов и потоков коррелятора?

ну и sae

Всё по 1 :)

Всё по 1 :)

потоки, не процессы

Надо смотреть, мин.через 20

напиши пож

даже если дефолт

Поднял в ram до 50к сообщений в nsq, похоже из очереди плохо разгребает, с диском не связано. Вот 17к сообщений и уже отставать начинает events

@freeseacher

Добавь разребаторов

@dvolodin игнорит

Корелятор работает по dispose очереди

смотрите на классификатор

он разгребает fmwriter

хм

по логике, большой поток событий должен его нагружать

как там событие будет в логе, если нехватает?

это нормально? 2016-10-25 19:10:16,317 [classifier] [580f83e84a5e680377aca5bf|dpmo-pss-65|10.100.5.65] Managed object found 2016-10-25 19:10:16,318 [classifier] [580f83e84a5e680377aca5bf|dpmo-pss-65|10.100.5.65] Event class: NOC | Managed Object | Ping OK ({}) 2016-10-25 19:10:16,321 [classifier] [580f83e84a5e680377aca5bf|dpmo-pss-65|10.100.5.65] Disposing 2016-10-25 19:10:16,321 [classifier] [580f83e84a5e680377aca5bf|dpmo-pss-65|10.100.5.65] Event processed successfully

чет мне показалось not found :)

отдыхать уже надо)

Как там будет в логе, если нехватка ресурсов?

Да, в логе есть disposed

добавил процессов

о да, детка

Вот теперь события разгребаются быстрее, чем капают в очередь

@freeseacher @dvolodin @EKbfh @aversant спасибо, это надо записать!

теперь понятно чем ты такой особенный:)

чтобы это воспроизвелось надо разгребать трапы и сислог

на пинговалку это не влияет

чтобы это воспроизвелось надо разгребать трапы и сислог

ни у кого что ли их нет?

ну... я всё собираюсь запилить, обычно, это заканчивается неудачей:)

последний раз я не смог заставить rsyslog не подменять IP адрес

и отложил:)

последний раз я не смог заставить rsyslog не подменять IP адрес

ставь сислог-нг

он не кошерный

ни у кого что ли их нет?

у меня есть. Мои скрины нужны?

он не кошерный

чем?

я не умею им пользоваться

у меня есть. Мои скрины нужны?

уже нет

НОК заставляет вспоминать школьную задачку, про бак и трубы

не знаю такую задачу

мы в разных школах учились

ну, в сосуд входит N труб, а выходит M

*бассейн

почему вода жёлтая

за сколько он наполнится

вода жёлтая, потому что там лечебная глина

про альтернативы лучше не думать

))

@aversant так

а во что упирается дальше классификатор?

ну, у него 2 канала на подписке - events и fmwriter

ну, у него 2 канала на подписке - events и fmwriter

а вниз куда он отдаёт?

# Finally dispose event to further processing by correlator

Вообще, сделал 6 классификаторов, теперь ок

self.pub("correlator.dispose", {"event_id": str(event.id)})

коррелятор, ок

Ну, пока справляется

Завтра увидим

Видимо надо больше ядер богу нока

уже нет

:(