На новой инсталяции буду пробовать

@EKbfh у тя на картинке какая то странность

https://kb.nocproject.org/download/attachments/24936479/image2016-10-18%2012%3A1%3A9.png?version=1&modificationDate=1476781305246&api=v2

раннинг тасков слишком много

раннинг тасков слишком много

это стартап

у меня на такую систуацию мониторинг бы встал на дыбы

у меня на такую систуацию мониторинг бы встал на дыбы

у меня нет мониторинга нока

(httpjson_inv_monitor_running_tasks{env="prod"} + httpjson_inv_monitor_late_tasks{env="prod"}) > (httpjson_inv_monitor_total_tasks{env="prod"} / 300) * 10

формула означает пиздец.

куда её вводить?

никуда.

прикинь по ней

нужно просто настроить нок, чтобы не было такого

Вот box discovery

можно сделать его 10 минут

но нагружают-то периодики

@freeseacher как поживает playbook? :)

пока деплой падает.

у меня на такую систуацию мониторинг бы встал на дыбы

толку от мониторинга, если это нок так стартует?

два чая данному господину

толку от мониторинга, если это нок так стартует?

нет. он так не стартует.

он так стартует после длительного простоя

он не лошадь, он верблюд, который лошадь

Ты вообще понял, что написал?

да понял :)

ну вот с 11:20 на картинке я предполагаю что ты считаешь что это устоявшееся поведение.

но это не оно

там должно быть падение до 2-3 задач в секунду

а у тя 500...

что бы такое поведение было оправданым надо что бы у тя был даунтайм в сутки примерно

и даже в этом случае.... надо считать короч

там должно быть падение до 2-3 задач в секунду

почему?

потому что у тя переодические таски должны только работать.

а их 800/300

Я считаю. если lag ~0 и в late_tasks 0, значит всё заебись

ибо бокс у тя отрабатывает раз в сутки

800/86400 не имеет сколь значимой цифры

Ок, тогда откуда у меня столько задач

дибаж чо

а их 800/300

ты не учитываешь время выполнения тасков, так-то

тут кажется @aversant кидал запрос в монгу

который показывает какие задачи сейчас в running

ты не учитываешь время выполнения тасков, так-то

значит это ещене устоявшееся поведение

и надо дать еще 2-3 часа

через два три часа у тя должно быть 2-3 задачи в секунду.

значит это ещене устоявшееся поведение

12 часов устоявшееся?

больше - плохо что то идет не так

12 часов да

Ок, что?

можно выкинуть из уровнения временя выполнения тасков

они все выполнены и перевыполнены

смотри что у тя в этом списке.

может у тя часть железяк не пингается

@freeseacher запилите плейбуку :)

или не опрашиваются

@freeseacher запилите плейбуку :)

не могу. дима еще чёто крутит

надеюсь не sla :)

никогда не угодаешь :)

а что у нас значит параметр "IP ToS mark" для пингователя?

битики какие выставлять

для приоритезации пакетиков

в смысле он сам красит ицмп перед вылетом?

Прикольно.

смотри что у тя в этом списке.

ну щас

просто не ясно, что такое running_tasks

раннинг это те у которых стоит признак R монге

я говорю же @aversant кидал запрос каким смотреть

db.noc.schedules.discovery.default.find({"s":"R"}, {"key":1, "ts": 1})

в наверное уде 15 раз. механика такая шедулер проверяет mo profile и конвертирует раз в 5 минут в конкретное время.

это конкретное время он кладет в монгу

задачи у которых время запуска находится в прошлом - читает дискавери

дискавери идет к сае и добывает активтаор и логопас.

потом дискавери идет к активатору

перед тем как пойти к активатору он говорит я таск взял

это становится раннинг таском

те что не взяты late

дальше активатор отрабатывает задание.

и отдает его обратно дискавери

дискавери проверяет задание и говорит что оно комплит

#faq Список запущенных задач https://kb.nocproject.org/pages/viewpage.action?pageId=24936488

db.noc.schedules.discovery.default.find({"s":"R"}, {"key":1, "ts": 1})

http://pastebin.com/qndNZUJy

посмотри, что не так тогда

Dmitry Volodin pushed to noc/feature/microservices ./noc escalation run

Dmitry Volodin pushed to noc/feature/microservices ./noc escalation run

это то, о чём я думаю?

Дима

@dvolodin когда?

хе-хе

centos7 : ok=224 changed=83 unreachable=0 failed=0

только это с форка

запилил пгбаунсер ?

если кому ну очень срочно. могу дать линк. потом должно нормально перейти на офф ветку

запилил пгбаунсер ?

нет

Andrey pushed to noc/feature/microservices Migrations commits come back

Commits stike back :)

fuck yeeeaaaa!!!

@dvolodin когда запилите?

Andrey pushed to noc/feature/microservices Revert customerID transaction

а VC не ломали случаем ?