discovery activator

коррелятор и даже sae трейснули

[sae] RPC call failed: Failed: No active activators for pool 'default'

[sae] RPC call failed: Failed: No active activators for pool 'default'

ну, активаторы сдохли

ну, активаторы сдохли

ага, я вот смотрю логи

там баг глобальный такой. От него дохнут активаторы

ага, я вот смотрю логи

полагаю, там память закончилась и их убили

2018-09-08 12:18:05,115 [nsq.client] [10.50.74.67:4150:10.50.74.67:4150] connection is stale (100.23s), closing 2018-09-08 12:18:05,177 [activator] POST /api/activator/ (10.50.74.66) 91657.38ms 2018-09-08 12:18:05,177 [nsq.async] uncaught exception in data event UNHANDLED EXCEPTION (2018-09-08 12:18:05.177684) PROCESS: ./services/activator/service.py VERSION: 15.05.1+microservices.11152.6ad2efaa BRANCH: microservices CHANGESET: 6ad2efaa ERROR FINGERPRINT: 142e2a35-489c-5985-9466-391c6e4ff3c9 WORKING DIRECTORY: /opt/noc EXCEPTION: <class 'tornado.iostream.StreamClosedError'> Stream is closed

лог активатора

лог активатора

NSQD проверяй, жив ли

NSQD проверяй, жив ли

типо жив

ну, перезапускай да и всё. Бага известная. Пока не пофикшена

ну, перезапускай да и всё. Бага известная. Пока не пофикшена

Окей

Андрей, а как траблшутить interface-status-ex?

Андрей, а как траблшутить interface-status-ex?

как обычный скрипт

Я чисто дергаю скрипт, данные которые я получаю верные, но нок какго-то хера шлёт события up/down, хотя в реальности интерфейсы не меняют статус

Я чисто дергаю скрипт, данные которые я получаю верные, но нок какго-то хера шлёт события up/down, хотя в реальности интерфейсы не меняют статус

метрики Up/Down снимаются?

метрики Up/Down снимаются?

а такие метрики есть?)

а такие метрики есть?)

обязательно

хороший повод поставить сниматься

обязательно

Ты про interface admin/oper в профиле интерфейса?

ок, посмотрим

ок, посмотрим

вот поставь и понаблюдай

вот поставь и понаблюдай

ок, спасибо

Я смотрю ddash нету для них?

Я смотрю ddash нету для них?

интерфейсный

рисуютя на интерфейсах

а, ок

а, ок

вот так встанешь с утра пораньше и узнаешь новую фичу

вот так встанешь с утра пораньше и узнаешь новую фичу

ага )

Я давно не заходил в профиль интерфейса, а там уже столько метрик добавили

круто

а я встану с утра пораньше и узнаю новую багу. Давай меняться ;)

))

а чинить кто будет?)

а чинить кто будет?)

чёрт... я думал поведёшься....

интерфейсный

Можешь напомнить как в него зайти?

Я чет забыл даже где он

Можешь напомнить как в него зайти?

кнопочка Dashboard в объекте

кнопочка Dashboard в объекте

на МО? Ну да, я там был

на МО? Ну да, я там был

как пиво с мёдом?

как пиво с мёдом?

Всё мимо, нету там admin/oper status

Всё мимо, нету там admin/oper status

а что мне будет, если я покажу, что есть?

починишь 2 бага?

эээх )

Больше сломаю, чем починю

почему у меня нету то?

у меня только load in/out

почему у меня нету то?

Лимит ответов на сегодня исчерпан. Благодарим за обращение в нашу службу ответов на все вопросы. Удачного дня. Пи, пи, пи.

Лимит ответов на сегодня исчерпан. Благодарим за обращение в нашу службу ответов на все вопросы. Удачного дня. Пи, пи, пи.

:)

надо было другие вопросы задавать, блин

надо было другие вопросы задавать, блин

проверь, что они начали собираться.

не начали

ой

начали же

Fields: %s interface.date.ts.managed_object.path.discards_in.discards_out.errors_in.errors_out.load_in.load_out.speed.status_admin.status_duplex.status_oper 2018-09-09 2018-09-09 08:52:33 1889526433007432043 ['','','','xe-0/0/3'] 0 0 0 0 117598789 179543274 10000000000 1 3 1

остальные графики-то строятся?

только load in/out

да, я как-то фиксил но не закоммитил

да, я как-то фиксил но не закоммитил

вот оно что )

d.zakharov opened merge request at / noc: custom fields add to NOC.core.FormPanel при создании каждой NOC.core.FormPanel, выполняется запрос `me.restUrl + 'launch_info/'`, который возвращает `cust_form_fields` если для формы есть `custom fields`, то они динамически добавляются в конец формы

merge request opened by d.zakharov

d.zakharov opened merge request at / noc: custom fields add to NOC.core.FormPanel при создании каждой NOC.core.FormPanel, выполняется запрос `me.restUrl + 'launch_info/'`, который возвращает `cust_form_fields` если для формы есть `custom fields`, то они динамически добавляются в конец формы

merge request opened by d.zakharov

удалил кастомный путь к ddash, стало ок

Last physical up time : 2018-08-03 12:52:42 Last physical down time : 2018-08-03 12:51:47

удалил кастомный путь к ddash, стало ок

?

нок явно врёт

aversant opened merge request at / noc: Migrate WEB Monitor to SelfMon. Migrate WEB Monitor to SelfMon.

?

Что может врать? Скрипт возвращает периодически неверный результат или что?

До апдейста на прошлой неделе такого не было

проблема наболюдается с разными платформами и вендорами, это либо дискавери, либо generic скрипты

aversant opened merge request at / noc: Migrate WEB Monitor to SelfMon. Migrate WEB Monitor to SelfMon.

merge request opened by aversant

aversant opened merge request at / noc: Migrate WEB Monitor to SelfMon. Migrate WEB Monitor to SelfMon.

merge request opened by aversant

проблема наболюдается с разными платформами и вендорами, это либо дискавери, либо generic скрипты

Поправил snmp_ifstatus_get_timeout, пока нет срабатываний, жду

Канал херовый с часто алертящим МО, в логах оч часто 2018-09-09 11:12:23,550 [script] [Huawei.VRP.get_interface_status_ex|10.100.3.200] SNMP timeout. Passing to next method

ааа) тогда понятно в чём дело

но это не значит, что интерфейс down

откуда такая логика?

откуда такая логика?

потому что oper_status логический параметр.