первой и не было
А, ок, годнота.
Sergey
l1njan
Будут когда везде нормальные эскалации, даунтаймы через API, деление алертов по дежурным - не будем трогать. А до тех пор, мальчик, отойди и не мешай дядям работать :-) ну или доки по Icinga2 почитай.
посидите еще в своём дестком саду, детишки, узнайте что такое Downtime-API и Alertmanager в Prometheus, тут же откроется третье око для осознания, как сделать эскалации :)
Aleksey
Aleksey
лучше скажите как делать направленный граф связей между системами что бы поднимать меньшее колво алертов
Aleksey
а эти все ваши даунтайм апи
Magistr
лучше скажите как делать направленный граф связей между системами что бы поднимать меньшее колво алертов
о этот человек познал проблему
Magistr
а есть чо по решениям ?
Aleksey
конечно нет
Magistr
а трейсинг не решеает ? по идее он знает топологию системы
Евгений
Aleksey
трейсинг знает да. но у него 2,5% трафика
George
А если ты его делаешь на часть... Ну, ты понял - можно упустить детали
Евгений
А если ты его делаешь на часть... Ну, ты понял - можно упустить детали
Можно делать его на случайную часть, есть вероятность что упустишь, но eventually — нет
Sergey
а есть чо по решениям ?
https://icinga.com/docs/icinga2/latest/doc/03-monitoring-basics/#dependencies 😊
Aleksey
George
Можно делать его на случайную часть, есть вероятность что упустишь, но eventually — нет
Проект меняется и изменения могут быть быстрее, чем евенчуалли получится понимание
Magistr
https://icinga.com/docs/icinga2/latest/doc/03-monitoring-basics/#dependencies 😊
не, спасибо мне больно от исинги все равно
Aleksey
да дело ведь не в ицинге
Aleksey
дело в том что оно движется
Евгений
Проект меняется и изменения могут быть быстрее, чем евенчуалли получится понимание
Ну тут, как всегда, чем выше точность — тем дороже и зависимость эспоненциальная
Aleksey
нужен механизм позволяющий перестраивать этот граф зависимостей хотя бы раз в час
Aleksey
обнаруживая его
Евгений
Ты хочешь сервайс меш, риали
George
Рили
Aleksey
с депендами не между сервисами а на основе данных ?
Oleksandr
ну
Евгений
Ну тут трейсинг только, да
Oleksandr
ну роутят и роутят
Aleksey
и чего трейсинг то ?
Sergey
с депендами не между сервисами а на основе данных ?
Ну это ты круто загнул. Разве что по формальному какому-то описанию архитектуры генерить граф зависимостей? UML is back?
Aleksey
трейсинг говорит мне положили в очередь
Aleksey
потом кто то гдето достал
Aleksey
кто достал где достал
Aleksey
Magistr
мм очередь - тупая труба, тебе приложеньке надо тогда уж ругатся
Oleksandr
логи
Oleksandr
где достал ты сам знаешь
Denis 災 nobody
Oleksandr
настройки
պլհկ
Aleksey
вот в ноке мы делали дискаверинг топологии сети
Aleksey
это довольно больно. но там боль она линейная от колва железа и плохих реализаций
Aleksey
говорят есть ребята которые делают дискаверинг l3 топологии
George
Это физическая структура.
Aleksey
с учетом bgp/mpls тунелей
Denis 災 nobody
Не то
а что то? Умение делать трейсы до узлов? Думаю, если вам это очень сильно надо - повод быть полезными сообществу..
Aleksey
это очень сложная задача про l3
Aleksey
а тут l7
George
а что то? Умение делать трейсы до узлов? Думаю, если вам это очень сильно надо - повод быть полезными сообществу..
Фейспальм. Ты тред как будто не читал
Aleksey
а весь l7 по факту это данные.
Magistr
а аутомониторинг на уровне аппа на л7 не ?
Denis 災 nobody
Фейспальм. Ты тред как будто не читал
пролистал... и когда сначала ответил - ещё даже не дошёл.
George
Теоретически в том же Апп дайнамикс - все бд, все Кафки - это терминальные узли
George
Ты можешь через всякие агенты пытаться получить доп инфу, но это такое. Ненадежное
Aleksey
что именно от л7 надо получить? Л3 чем не устроил?
в том что сеть работает. а приложение тоже работает. но коннект начинает вместо 12ms занимать 970ms
Николай
с депендами не между сервисами а на основе данных ?
Возможно, это умеет ServiceNow. Но это дорого.
Aleksey
всё везде работает но для пользователя ничего не работает.
Aleksey
какие тут депенды... какие тут l3
Oleksandr
а какую задачу вы решаете? ловить каскадные сбои?
Oleksandr
нагиос фигачит аж бегом
Aleksey
понять/посочувствовать/простить
Denis 災 nobody
в том что сеть работает. а приложение тоже работает. но коннект начинает вместо 12ms занимать 970ms
мониторинг апп логов, мелкий ттл (типа 100 мс) и автобалансировка? Тут разные подходы придумать можно, но очень зависит от топологии и задач