есть какой-то способ в графане обновлять json графика?!

есть какой-то способ в графане обновлять json графика?!

а что Вы хотите сделать?

в гите json держать и на проде обновлять.

Любой наколенный скрипт

Но ваще можешь сделать простейшую скриптед борду, которая будет твой жсон грузить откуда скажешь и выдаватт

в гите json держать и на проде обновлять.

Питоновское что то на гитхабе видел, клиент

я использую свой скрипт для экспорта/импорта дашбордов/датасорсов https://github.com/hagen1778/grafana-import-export

есть еще https://github.com/utkarshcmu/wizzy

Если мониторинг рулится IaC, можно туда встроить дашборды

Народ привет а кто нибудь юзал вот эту связку ? https://github.com/prometheus/prometheus/tree/master/documentation/examples/remote_storage/remote_storage_adapter ? как считаете. имеет смысл написать какой то clickhouse adapter для того чтобы иметь для prometheus метрик long term storage ?

Ну юзал, но юзать надо будет уже вчера ) Так, что будем делиться впечатлениями

в гите json держать и на проде обновлять.

боль будет с этим.

следить как-то надо кто вносит правки в дашборды

wizzy не выглядит решением

так они в последнем обновлении, как раз заявили хранение истории

как реализовано правда не глядел пока

история хранится. это правда

но это не слишком наглядно.

и не хочется людей коотрые рисуют графики пускать в прод

чревато тем что они прям там в проде и будут их рисовать

эм... а чем оно плохо, тем более система прав весьма сносная (более одного ранга разграничение)

тем что сидит поддержка смотрит в график

а он фигак и стал погоду на марсе показывать потому что человек который их настраивает решил поэксперементировать

или там какую-то хотелку руководства исполняет

да, постфактум ему люлей прилетит

но в моменте это может продолжаться долго

и суппорт вовремя не заметит проблем с системой

а это чревато убытком

ну организовать этот процесс, графики смортит одна организация, рисовальшики резвятся в другой, когда готово синкают

во!

как синкают-то?

это мой вопрос

ну кнопочку выдумай, делов то

какую кнопочку?

покажи хотя бы апи для этого. я как-то пока не нашёл

именно _обновление_ графика

ну которую рисовальшик жмакнет, а твой скрипт засинкает что надо

а не удалил график, залил новый - тут тоже проблема у суппорта - надо вовремя заметить что график перестал "работать" и обновить экран

понимаешь проблему?

ну надо смотреть, а оно точно ещё требует обновления, они же там чего то недавно мутили с динамической подгрузкой контента, или она только при перемотки странцы работает

покажи хотя бы апи для этого. я как-то пока не нашёл

http://docs.grafana.org/http_api/dashboard_versions/

нет "put dash ver". только revert

Версия обновляется, когда ты дашборд сохраняешь

http://docs.grafana.org/http_api/dashboard/#create-update-dashboard

Народ привет а кто нибудь юзал вот эту связку ? https://github.com/prometheus/prometheus/tree/master/documentation/examples/remote_storage/remote_storage_adapter ? как считаете. имеет смысл написать какой то clickhouse adapter для того чтобы иметь для prometheus метрик long term storage ?

производительность проседает

и как мне нв другом хосте ее получить?

http://docs.grafana.org/http_api/dashboard/#create-update-dashboard

о! это надо попробовать

попробуйте хранить в prometheus метрики больше чем 30 дней для сколько нибудь большого кол-ва серверов и метрик...

undefined болшое кол-во сервисов\метрик

производительность проседает

а вулкана от ДО не пробовали?

парни а чем можно делать autoremediation ?

stackstorm не пределагать

парни а чем можно делать autoremediation ?

что есть autoremediation?

я хочу авточинители

ну так, так и пиши

в чем, ты их хочешь?

точнее, для каких систем?

autoremediation специальное словечко для этой тематики

я хочу платформу

winston/nurse

баш и крон, сойдёт?

да. но нет

ну давай с другой стороны, а что ты ими само-чинить собираешься?

у меня например много всякой всячины, и банально пара скриптов решает проблему, ad-hoc

у меня есть хрени которые можно чинить автоматом. я хочу чинить автоматом.

ну тут применительно к тому, что ломается

если например у базы сплит, то надо иногда, но надо ручками

а автоматика может дров наломать

я хочу там где можно отреагировать автоматом отреагировать автомтом

ERROR: S client not available

запустить ансибл скрипт

на входе евенты

ну тупо, как prometheus operator в k8s ?

на выходе запуски ансибла

ты хочешь сложноты типа фидбек в оркестратор или попроще чё?

я хочу платформу что бя я ей говорил когда чинить и как чинить. а она эта делала.

потоком событий я ее снабжу.

потоком чинителей тоже

тебе и нагиос подойдёт, по моему

есть триггер, который зависит от ещё там например пары тригеров, есть екшн-чинитель-скрипт

а нагиос умеет выполнять ансиблы на нужных хостах ?

как настроишь

если у тебя ансибл - башня или реверс режим, то да, win-win

оно ? https://assets.nagios.com/downloads/nagioscore/docs/nagioscore/3/en/eventhandlers.html

у меня сенсу делает такие маленькие вещи

типа сломали конфиг пгпула, и он больше 5 минут не отвечает, пойди накати с гита снова

оставим за скобками как можно сломать конфиг но идею я понял

но на деле - это днище и ниразу не надёжная платформа

у сенсу куча проблем, а нагиос вообще фрактал непонятностей

но свою задачу как тупо следить за ключевыми вещами(которые простые, уровня нет сервися vmtoolsd попробуй запустить 5 раз, а если нет, скажи админу)

делает +-; пока больше пользы, чем проблем

у меня есть хрени которые можно чинить автоматом. я хочу чинить автоматом.

Я сейчас запрещённое в этом чатике слово вспомню, но таки заббикс/монит?:)

я хочу платформу что бя я ей говорил когда чинить и как чинить. а она эта делала.

Вроде ещё есть monit

типа сломали конфиг пгпула, и он больше 5 минут не отвечает, пойди накати с гита снова

Конфиг целиком в гите что ли?

Конфиг целиком в гите что ли?

ну некоторое время, у меня было что на каждой тачке, свой конфиг лежит в своём гите сейчас конфиг темплейтится, и если сломался пгпул например, то возьми с гита, оттемплейти его и запусти снова; в идеале ещё сделать типа если из гита взял и всё равно плохо, сделай чекаут предыдущего комита, и так пока не починится

http://www.brendangregg.com/blog/2017-08-08/linux-load-averages.html?utm_source=telegram.me&utm_medium=social&utm_campaign=podrobnyy-razbor-load-average-la-v-lin

Очень крутая статья

Ее уже даже мейлру успел перевести

самое ценное в этой статье последний коммент из кода.

Народ зацените, запилил статью на хабре: https://habrahabr.ru/company/avito/blog/335410/

Народ зацените, запилил статью на хабре: https://habrahabr.ru/company/avito/blog/335410/

В статье еще более странное использование термина DevOps, чем в выступлении

Народ зацените, запилил статью на хабре: https://habrahabr.ru/company/avito/blog/335410/

всё хотел спросить, почему brubeck а не statsite ?