самое забавное, после рестарта всё ок, а вот если нок немного поработал, пару дней например, то воспроизводится

а как его поиметь?

Логи супервизора смотреть да

на высоконагруженных системах где высокий LA такое сплошь и рядом.

там таймаут есть ?

Да

На запуск точно

На смерть не помню

у меня такое постоянно. если LA выше чем 20 единиц == 100% надо руками рестартить

или таймаут увеличить или добавить kill -9

ну -9 это после таймаута.

или таймаут увеличить или добавить kill -9

Кого килать то?

всех кто не подох.

Кого килать то?

задачи супервизора, типа noc-discovery-01

pkill что ли?

pkill что ли?

не знаю, но мне нравится сислема pid файлов

Супервизор ее не делает

Скорее всего надо просто крутой приоритет поставить, чтобы оно гарантированно добивало своих детей, чтобы они потом не мешались

@freeseacher memcached на deb8 не работает

Скорее всего надо просто крутой приоритет поставить, чтобы оно гарантированно добивало своих детей, чтобы они потом не мешались

Приоритет чему?

аве сатан

Супервизору?

@freeseacher memcached на deb8 не работает

Печально слышать

Приоритет чему?

он ведь шлёт sigterm своим?

А проблема точно в этом?

Логи то чо?

ну вот это моё видение. Да, после завершения башней, не все процессы завершаются.

логи супервизора?

а в логах ничё. в логах - адресс ин юсе

он наверное про supervisor логи

щас поищу, где они вообще

Там же

Всё инет хана

0_0

не пугай так

что то у меня подозрения что баунсер неправильн оконфигурится.

нууууууу всё возможно да.

[root@nochost1 pgbouncer]# tail -f /var/log/pgbouncer/pgbouncer.log | grep Stats 2016-11-30 18:00:11.877 10592 LOG Stats: 62 req/s, in 50788 b/s, out 39036 b/s,query 20276 us 2016-11-30 18:00:21.882 10592 LOG Stats: 29 req/s, in 56930 b/s, out 51318 b/s,query 17367 us 2016-11-30 18:00:31.885 10592 LOG Stats: 41 req/s, in 56828 b/s, out 49019 b/s,query 16182 us 2016-11-30 18:00:41.887 10592 LOG Stats: 61 req/s, in 65194 b/s, out 53809 b/s,query 15663 us 2016-11-30 18:00:51.900 10592 LOG Stats: 37 req/s, in 67671 b/s, out 62083 b/s,query 22122 us 2016-11-30 18:01:01.906 10592 LOG Stats: 80 req/s, in 89444 b/s, out 76397 b/s,query 24701 us 2016-11-30 18:01:11.905 10592 LOG Stats: 61 req/s, in 83190 b/s, out 73552 b/s,query 24710 us 2016-11-30 18:01:21.906 10592 LOG Stats: 37 req/s, in 65497 b/s, out 57848 b/s,query 15284 us

и нахера нужен балансер то.

https://topwar.ru/104689-minoborony-rf-otkrylo-oficialnuyu-stranichku-vkontakte.html

задача bouncer'а - не балансировка

а?

он мультиплексирует коннекты к постгресу

с одной стороны у него - 10k, с другой - 50

и у тебя 50 процессов постгреса, а не 10k

хорошо. логично. тогда почему после ковыряния башней у него прописывается только одна база на первом хосте а на второй не прописывается. да и в настройки ему было бы хорошо прописать максимальное колличество коннектов к БД из башни

всё пошло по пизде.png

да ладна. это ещё ничего так.

{ "name": "Raisecom | ROS | REAP", "$collection": "sa.profilecheckrules", "uuid": "6767e137-f5a3-45fd-a0fd-983363292e53", "description": "", "preference": 1000, "method": "snmp_v2c_get", "param": "SNMPv2-MIB::sysDescr.0", "match_method": "eq", "value": "REAP", "action": "match", "profile": "Raisecom.ROS" }

pull request делай

я не уверен что это правильный подход

чекать по дескрипшену

лучше, чем ничего?

а у него sysObjectId нет совсем?

там уже есть профиль для этого типа железки.

на некоторых у меня не подхватилось

всем до завтра.

pull request делай

Которые не мержат

не надо грязи

два замержили сегодня

не надо грязи

А можешь где-то прибить весь список ресурсов? Типа: баги сюда, пуллы сюда, а тут влпросики

не надо грязи

:)

Нок подружил с телеграммом, осталось немного косметики.

Спасибо за помощь @aversant

@dvolodin Дмитрий, подскажите, как из noc.yml Забрать тот самый токен для работы с телеграмом?

Нок подружил с телеграммом, осталось немного косметики.

Хуяссе

Хуяссе

да его еще допилить надо ;( не отправляет сообщения из очереди, только первое самое после рестарта.

Andrey pushed to noc/feature/microservices Fix some profiles Fix some profiles

Andrey pushed to noc/feature/microservices Fix Angtel.Topaz init

Нок подружил с телеграммом, осталось немного косметики.

self.config.XXX

Server not found Firefox can’t find the server at self.config.xxx.

self.config.XXX

да уже сделал, осталось только отсылать в NSQ подтверждение отправки сообщения или же нет. Тут затык.

;; Configuration section [pgbouncer] @@ -112,7 +111,7 @@ ;reserve_pool_timeout = 3 ; how many total connections to a single database to allow from all pools -max_db_connections = 1000 +; max_db_connections = 300 ;max_user_connections = 50 ; If off, then server connections are reused in LIFO manner

подтверждение отправки -- вернуть True из обработчика сообщения

Dmitry Volodin pushed to noc/feature/microservices Remove deprecated modules

Dmitry Volodin pushed to noc/feature/microservices Remove deprecated modules

Dmitry Volodin pushed to noc/feature/microservices discovery: Unified caps caching

доброе утра

хотите поржать ?

возможно

а если это будет не смешно?)

ну я тогда пойду поплачу.

в уголке.

короче у меня одномоментно умерло около 600 коммутаторов. Одной марки :)

тогда тебе точно в уголок поплакать =)

и марка эта EdgeCOre!!!!

ололо.

короче у меня одномоментно умерло около 600 коммутаторов. Одной марки :)

как бля

китайщина ?

гроза, эл-во, софт?

MAGIC PACKET

неее. говорят размазано по всей области.

происки спецслужб

и все стрелки на меня . типа объекдиняет их только нок.

у тебя команды не сисложатся?

как умерли? не встают после ребута?

у нас NOC лопатит тысяч 30 ежиков