@freeseacher у меня после аварии что-то поехало в бд, аварии открываются 40 дневней давности, сам создаю аварию, событие даже не появляется в events

ребут был?

@freeseacher еще пример, в ипам есть поле fqdn, если нок не может его валидировать он не принимает и ты не можешь понять каого хера, а должно быть так чтобы он крайние пробелы стрипал, без моей помощи, а потом вываливал подсказку что запятых и подчеркиваний в fqdn быть не должно

поставь на мониторинг колво коннетков к постгресу

я выше скидывал

бля, это монгаа

к монге 70 =))

в инфлюксе нет данных про постгрес?

есть

не помнишь названия коннектов?

ребут был?

да

@freeseacher попробуйте иногда смотреть на систему с точки зрения юзера-дебила вроже меня. знает ли он что вводить в поле и можно ли подправить по факту, убать лишние пробелы, если в поле разрешен только ip а он ввел fqdn, орезолвить имя и предложить юзеру сохранить его

да

проверь очередь nsq через nsqadmin

почисти очередь

@freeseacher попробуйте иногда смотреть на систему с точки зрения юзера-дебила вроже меня. знает ли он что вводить в поле и можно ли подправить по факту, убать лишние пробелы, если в поле разрешен только ip а он ввел fqdn, орезолвить имя и предложить юзеру сохранить его

и меня ^__^

numbackends это оно?

а вот не имейте мне мозг со своими цепочками

https://www.evernote.com/l/ADndseLG3zNJaY_qqEDq488-sch2QUuG5lc

нужно иногда читать, что я пишу

numbackends это оно?

да

и не спрашивай почему оно так называется

нужно иногда читать, что я пишу

мы уже привыкли тебя игнорировать, все равно ничего не понимаем

я не знаю

проверь очередь nsq через nsqadmin

http://nsq.io/components/nsqadmin.html

http://nsq.io/components/nsqadmin.html

ты мне прям упростил задачу))

оно у тя поставлено должно было быть через башню

поставлено

и должно висеть на каком то порту типа 4171

ща

и должно висеть на каком то порту типа 4171

да, на нём

по http ломись туда

ок

Сверху монга, снизу постгрес

сколько коннектов в постгече выставено ?

в башне 300

маловато

ок

yo ?

/usr/lib/postgresql/9.4/bin/postgres -D /var/lib/postgresql/9.4/main -c config_file=/etc/postgresql/9.4/main/postgresql.conf в итоге в файле /opt/noc/var/etc/postgres/postgres.conf max_connections = 302

маловато

Но он их не утилизирует же?

вкачивай больше дискаверей.

дай для начала два дискавери с 100тредов

yo ?

как посмотреть жив ли он?

ОК

у тя должны быстро кончится коннекты

похоже nsqadmin сдох

о чем в логе будет много рас сазано

похоже nsqadmin сдох

это печально

у тя должны быстро кончится коннекты

проверим. и графану заодно

это был самый быстрый способ

конечно состояние nsq у тя мониторится и есть в графне

но его надо нарисовать

это печально

как nsqadmin в sysctl посмотреть? я вижу только nsqd

nsqlookupd

о чем в логе будет много рас сазано

update configs достаточно?

как nsqadmin в sysctl посмотреть? я вижу только nsqd

не та нода, отбой

Попёрло, поцаны!

збс

хорошая вещь инфлюкс

на самом деле нет

но на мельнком потоке да

на пиздец, мне только понравилось +)

ты ещё скажи, выпилите её =)

Подключение к 10.50.74.65...Не удалось открыть подключение к этому узлу, на порт 4171: Сбой подключения

noc]# systemctl status nsqadmin в—Џ nsqadmin.service - Admin interface Realtime distributed messaging (nsddmin) Loaded: loaded (/etc/systemd/system/nsqadmin.service; enabled; vendor preset: disabled) Active: active (running) since Fri 2016-10-07 22:29:55 MSK; 10s ago Main PID: 30299 (nsqadmin) CGroup: /system.slice/nsqadmin.service в””в”Ђ30299 /opt/noc/bin/nsqadmin -config /opt/noc/var/etc/nsq/nsqadmin.conf Oct 07 22:29:55 db01 systemd[1]: Started Admin interface Realtime distributed messaging (nsddmin). Oct 07 22:29:55 db01 systemd[1]: Starting Admin interface Realtime distributed messaging (nsddmin)... Oct 07 22:29:55 db01 nsqadmin[30299]: [nsqadmin] 2016/10/07 22:29:55.517325 nsqadmin v0.3.7 (built w/go1.6) Oct 07 22:29:55 db01 nsqadmin[30299]: [nsqadmin] 2016/10/07 22:29:55.517622 HTTP: listening on [:?:4171

я бы хотел что бы выпилили

noc]# systemctl status nsqadmin в—Џ nsqadmin.service - Admin interface Realtime distributed messaging (nsddmin) Loaded: loaded (/etc/systemd/system/nsqadmin.service; enabled; vendor preset: disabled) Active: active (running) since Fri 2016-10-07 22:29:55 MSK; 10s ago Main PID: 30299 (nsqadmin) CGroup: /system.slice/nsqadmin.service в””в”Ђ30299 /opt/noc/bin/nsqadmin -config /opt/noc/var/etc/nsq/nsqadmin.conf Oct 07 22:29:55 db01 systemd[1]: Started Admin interface Realtime distributed messaging (nsddmin). Oct 07 22:29:55 db01 systemd[1]: Starting Admin interface Realtime distributed messaging (nsddmin)... Oct 07 22:29:55 db01 nsqadmin[30299]: [nsqadmin] 2016/10/07 22:29:55.517325 nsqadmin v0.3.7 (built w/go1.6) Oct 07 22:29:55 db01 nsqadmin[30299]: [nsqadmin] 2016/10/07 22:29:55.517622 HTTP: listening on [:?:4171

читай лог его, что там?

noc]# systemctl status nsqadmin в—Џ nsqadmin.service - Admin interface Realtime distributed messaging (nsddmin) Loaded: loaded (/etc/systemd/system/nsqadmin.service; enabled; vendor preset: disabled) Active: active (running) since Fri 2016-10-07 22:29:55 MSK; 10s ago Main PID: 30299 (nsqadmin) CGroup: /system.slice/nsqadmin.service в””в”Ђ30299 /opt/noc/bin/nsqadmin -config /opt/noc/var/etc/nsq/nsqadmin.conf Oct 07 22:29:55 db01 systemd[1]: Started Admin interface Realtime distributed messaging (nsddmin). Oct 07 22:29:55 db01 systemd[1]: Starting Admin interface Realtime distributed messaging (nsddmin)... Oct 07 22:29:55 db01 nsqadmin[30299]: [nsqadmin] 2016/10/07 22:29:55.517325 nsqadmin v0.3.7 (built w/go1.6) Oct 07 22:29:55 db01 nsqadmin[30299]: [nsqadmin] 2016/10/07 22:29:55.517622 HTTP: listening on [:?:4171

rhel же да ?

iptables же

rhel же да ?

да

нет

firewalld

да пох

бля

всё равно закрыто

да

что смотреть в nsqadmin?

состояние очередей

и наличие в низ данных

особенно correlator.dispose

вот у меня сейчас 2x100 == 200 дискавери-тредов, и 204 открытых постгрес-подключения, значит каждый тред дискавери туда лезет?

lf

да

да

но у меня всего 150 активаторо-тредов! Как такое возможно?

Как все сообщения могли потеряться то..

А монга у нас для чего?

тут вдруг +100 коннектов к ней прилетело

@freeseacher я рестартнул nsqadmin и события попёрли с правильным временем

монга у нас для всего

и опять залипли

22:28

@freeseacher я рестартнул nsqadmin и события попёрли с правильным временем

это какая то фигня.

и всё равно фигня

не может оно влиять

кроме рестарта nsq ничего не делал, время видишь?

херня какая то

а ты только nsqadmin рестартанул ?