Но форма ничетак.

Maksim pushed to noc/feature/microservices Update profile ECI.SAM get_interfaces

restart act<tab>

Единственное подозрительное, что есть в логе Activator-NOC 2017-07-08 21:52:45,586 [tornado.general] 400 GET /health/?service=f755fee8-0651-41a4-8bdc-dde66415c8d2 (172.19.31.7): Invalid service id 2017-07-08 21:52:45,586 [activator] GET /health/?service=f755fee8-0651-41a4-8bdc-dde66415c8d2 (172.19.31.7) 1.22ms 2017-07-08 21:52:46,592 [tornado.general] 400 GET /health/?service=f755fee8-0651-41a4-8bdc-dde66415c8d2 (172.19.31.7): Invalid service id 2017-07-08 21:52:46,593 [activator] GET /health/?service=f755fee8-0651-41a4-8bdc-dde66415c8d2 (172.19.31.7) 3.30ms

HP.ProCurve.get_version now correctly works whith HP-3500yl ➔ Tested on HP-3500yl-24G, firmware K.15.16.0005   ? Dmitry Luhtionov

народ есть кто может подскаать как развернуть NOC через Tower

Инфа разрознена часть тут https://kb.nocproject.org/pages/viewpage.action?pageId=25887132

часть тут http://repodoc.readthedocs.io/en/feature-doc/installation/manual.html

часть в других мануалах

Dmitry Volodin pushed to noc/feature/moversion discovery: Fix syntax error

Dmitry Volodin pushed to noc/feature/moversion SAE: Fix imports and query

Перезапусти активатор, посмотри в его логи

Насколько я понял, торнадо не может запуститься, т.к. возникает ошибка в IOLOOP

Dmitry Volodin pushed to noc/feature/moversion sa.managedobjectselector: Filters by profile, vendor, platform, version and TT System

Насколько я понял, торнадо не может запуститься, т.к. возникает ошибка в IOLOOP

Но почему это происходит мне непонятно. Надо как-то дебажить Ioloop?

ioloop там не ошибка. точнее ошибка но на работу она точно не влияет

а вот почему у тя 2017-07-08 21:52:46,592 [tornado.general] 400 GET /health/?service=f755fee8-0651-41a4-8bdc-dde66415c8d2 (172.19.31.7): Invalid service id 2017-07-08 21:52:46,593 [activator] GET /health/?service=f755fee8-0651-41a4-8bdc-dde66415c8d2 (172.19.31.7)

вот это интересно

@dvolodin как так может быть ?

Тогда что это? Этот трейс в web.log появляется часто, не только при попытке запустить опрос.

Dmitry Volodin pushed to noc/feature/moversion Replace managed object profile usage

Хм. А может это быть из-за того, что я увеличивал кол-во активаторов? Потом вернул 1 и, кажется, после этого перестало работать.

останови полностью нок на 70 секунд

это почистит старые записи в consul

Ок.

вообще надо только на 60. но 10 секунд запаса

https://code.getnoc.com/noc/noc/issues/35

вот нашел древний issue

кто хочет занятся?

могу показать, как правильно настроить ETL для экспорта объектов из заббикса

@ss ?

вообще надо только на 60. но 10 секунд запаса

Да я могу хоть на сколько остановить. Пока им пользуюсь только я.

не надо хоть на сколько. надо что бы консул подерагал сервисы

за этим процессом можно посмотреть на http://noc_ip:8500

Dmitry Volodin pushed to noc/feature/moversion ./noc script: Fix json object handling

вот. это проблема.

на сервере посмотри на consul info

тебя особенно интересует наличие лидера

Это? consul: bootstrap = true known_datacenters = 1 leader = false leader_addr = server = true

Dmitry Volodin pushed to noc/feature/moversion SAE: Fix query

Это? consul: bootstrap = true known_datacenters = 1 leader = false leader_addr = server = true

да. почини это используя сайт консула. быть может для начала хватит перезапуска

Сайт консула это consul.io ?

ага

Заглянул в сислог, а там.. Jul 9 21:07:20 noc telegraf[26528]: 2017-07-09T10:07:20Z E! Error in plugin [inputs.httpjson]: Get https://172.ххх.ххх.ххх/inv/monitor/: x509: cannot validate certificate for 172.ххх.ххх.ххх because it doesn't contain any IP SANs Jul 9 21:07:20 noc consul[1275]: 2017/07/09 21:07:20 [ERR] http: Request PUT /v1/session/create, error: No cluster leader from=127.0.0.1:32598

No cluster leader это проблема

172.ххх.ххх.ххх because it doesn't contain any IP SANs не проблема

c ioloop лезут ошибки если из CLI запускаешь что нибудь с селектором на много объектов

c ioloop лезут ошибки если из CLI запускаешь что нибудь с селектором на много объектов

Не запускал.

попробуй. но это может быть с активаторами отвалившимия от консула связано. тут рекомендуют эпизодически ребутать активаторы ....

А как сделать так, чтобы при деплое часовой пояс не слетал?

не в курсе. у тебя на всех нодах одно время 7

У меня одна нода.

и время всё ок ?

да. почини это используя сайт консула. быть может для начала хватит перезапуска

Перезапуск не помог 2017/07/09 21:16:11 [ERR] http: Request PUT /v1/session/create, error: No cluster leader from=127.0.0.1:56828

и время всё ок ?

Ну да. А после деплоя становится московский часовой пояс

ты консулов ДВА поставил?

Нет, один.

ойпи не менялся ?

я бы отмотал лог консула до момента первого появления No cluster leader и посмотрел чего там такое случилось

ибо потеря лидер не такое уж штатное явление

Нет. Всегда один и тот же.

а должно быть ДВА.

нее

на одном хосте можно один

два надо для точного указания в многосерверной конфигации кто бутсрап сервер

Jul 4 22:48:29 noc consul[27566]: 2017/07/04 22:48:29 [ERR] agent: failed to sync remote state: No cluster leader Jul 4 22:48:29 noc consul[27566]: agent: failed to sync remote state: No cluster leader Jul 4 22:48:30 noc consul[27566]: consul.acl: Failed to get policy from ACL datacenter: No cluster leader Jul 4 22:48:30 noc consul[27566]: 2017/07/04 22:48:30 [ERR] consul.acl: Failed to get policy from ACL datacenter: No cluster leader

А чуть раньше при перезапуске НОКа было вот такое Jul 4 22:48:22 noc mkdir[27558]: /bin/mkdir: невозможно создать каталог «/var/run/consul»: Файл существует

ойпи не менялся ?

Не менялся, но их на сервере 2.

ERROR: S client not available

эт всё не фатальное

Вот так было за несколько секунд до первой ошибки Jul 4 22:48:22 noc consul[27566]: raft: Node at 172.ууу.ууу.ууу:8300 [Follower] entering Follower state (Leader: "")

А вообще НОК работает на 172.ххх.ххх.ххх

стопни консул и нок

Через 172.ууу.ууу.ууу сервер может в инет ходить.

https://www.consul.io/docs/guides/outage.html

думаю тебе интересно consul operator raft -list-peers

ну и скорее всего понадобится https://www.consul.io/docs/guides/outage.html#manual-recovery-using-peers-json

root@noc:~/temp# consul operator raft list-peers Error getting peers: Failed to retrieve raft configuration: Unexpected response code: 500 (No cluster leader)

Dmitry Volodin pushed to noc/feature/moversion ProfileCheckRules: Use Profile reference

Нашел в /etc/consul/config.json "bind_addr": "172.yyy.yyy.yyy" "recursors": [ "172.yyy.yyy.yyy" ]

Наверно, надо переправить на 172.ххх.ххх.ххх ?

Там где работает НОК?

bind должен быть такой какой есть на машине адрес

и по идее деплой его таким и выставляет

А если адреса 2 ?

Точно, менялся адрес. Раньше в башне в настройках ноды был localhost, а потом я поставил 172.ххх.ххх.ххх и сделал деплой

вот отсюда и грабля

в много серверной конфигурации сейчас должно быть досвольно просто сменить адрес. когда серверов консула более одного. именно серверов.

а в односерверной видимо надо фигачить Peers.json каждый деплой

Т.е. мне смена адреса в /etc/consul/config.json не поможет?

а в односерверной видимо надо фигачить Peers.json каждый деплой

Не очень удобно.

черт

Using raft/peers.json for recovery can cause uncommitted Raft log entries to be implicitly committed, so this should only be used after an outage where no other option is available to recover a lost server. Make sure you don't have any automated processes that will put the peers file in place on a periodic basis.

низя

Вот этот кусок я не понял. Ясно только, что что-то может испортиться.

Почему нельзя? "должно испотльзоваться только после отключения когда невозможны другие способы восстановления потерянного сервера"

А чем чревато "безусловный коммит записей Raft log " ?

Dmitry Volodin pushed to noc/feature/moversion PeeringPoint: Use profile reference

Dmitry Volodin pushed to noc/feature/moversion sa.peeringpoint: Filter by profile

Dmitry Luhtionov pushed to noc/feature/microservices Fix Huawei.MA5600T.get_interfaces script

А как узнать версию протокола Raft ? Для разных версий разная структура файлов.