ну это какой то пипец

а не упала отзывчивость

а что вотерфолл показывает? графана то сама по себе выплевывет json с конфигурацией отрисовки метрик + js код для браузера - все остальное время прут запросы через нее в качестве прокси на бекенд (графит пром еластик или что там кушает даш) за данными

у меня тормоза самой графаны были когда база графаны была в ПГ а ПГ лежал на дисках которые периодически лагали на 2-3 секунды

а что вотерфолл показывает? графана то сама по себе выплевывет json с конфигурацией отрисовки метрик + js код для браузера - все остальное время прут запросы через нее в качестве прокси на бекенд (графит пром еластик или что там кушает даш) за данными

вотерфол? ты про отладчик браузера?

у меня тормоза самой графаны были когда база графаны была в ПГ а ПГ лежал на дисках которые периодически лагали на 2-3 секунды

база графаны? Не знал что она есть. Ща копну, что там происходит

чо?

а как у тебя графана поставлена?

а как у тебя графана поставлена?

yum install grafana*rpm

полез в конфиг

у меня slqlite

может быть в этом проблема

он его делает по дефолту видать

пойду поищу ман по миграции на норм базу

# Either "mysql", "postgres" or "sqlite3", it's your choice ;type = sqlite3 ;host = 127.0.0.1:3306 ;name = grafana ;user = root

а схему базы где найти?

в офф доке графаны постгрес описан только как датасорс

неа - в подразделе администрирования описано что если у вас продуктив то меняешь 2 строчки и даешь права пользователю - она схему сама создаст

скулайт для тестов

а скрипт миграци. который я нашел хочет готовую схему.

придется ломать продуктив(

вотерфол? ты про отладчик браузера?

про него конечно

так создаешь +1 графану создаешь пустую бд - бинго у тебя готовая схема - только даши и пользователей надо перенести

так создаешь +1 графану создаешь пустую бд - бинго у тебя готовая схема - только даши и пользователей надо перенести

ща попробую

не работает миграция. придется тащить руками

какой storage под prometheus лучше взять, если задача бэкап в 1 строку?

а есть варианты?

какой storage под prometheus лучше взять, если задача бэкап в 1 строку?

Для ремоут врайт?

Для ремоут врайт?

люди хотят делать бэкап раз в день

пром в контейнере графана в контейнере

люди хотят делать бэкап раз в день

Бекап раз в день - это снепшот

Он вымаливается в файлы

А там куда ты их положишь - дело твоё

Но человечнее настроить remote_write

там я из разговора понял в чём тема, люди хотят делать миграции легко, типа сегодня тут валяется контейнер и база, сделали запустили в ансибле бэкап, быстро на другую ноду перенесли, эти выключили

плюс хотят раз в день куда-нить в арзивчик сливать по типу pg_dump

сам постгресс под это делао жирновато будет

ну и пусть копируют папку с вольюмом, если им очень хочется

плюс хотят раз в день куда-нить в арзивчик сливать по типу pg_dump

Это же надо барманом делать, а не пгдампом

Всем привет! все ещё актуально ищу инженера в мониторинговую команду netcracker'a хозяйство богатое - есть и исинга и кактус, и моднейшие кликхаусы с графанями. все это высоконагруженное и всем дико нужное что делаем - ну стараемся, чтобы вот это вот всё более менее стабильно работало и пореже умирало, если ещё и вовремя становится красным и не теряет данные - то ваще зашибись. Пишем много всяких своих проверок, по возможности пилим автоматизации, интеграции и всё такое прочее (да, признаю, встречается и текучка), но в двух словах - скучать некогда где мы есть - Мск,С.-Птр,НН,Врнж,Саратов,Самара,Тлт в общем, если кто-то круто шарит в этих ваших линуксах, сетях, (облаках опционально - чё там сложного? можно разобраться на ходу), закончил институт и может кодить всякое, а оно потом бац и работает, ну и знаком вон с теми системами что я описал в разделе хозяйство, ну или с подобными системами - пиши мне в личку, перетрём за жизнь

> закончил институт вышка обязательна?

еще небось и из бауманки

Бляяяя, и тут хрыч

Бляяяя, и тут хрыч

Забей. Он скоро умрет

Забей. Он скоро умрет

он нас с тобой переживет

в девопсе поиск дал скорее отрицательные результаты...

А подача интересная, да

исинга и кактус, но нет пачки Z, это подозрительно))

он нас с тобой переживет

Полгода назад, он говорил, что ему два года осталось

Полгода назад, он говорил, что ему два года осталось

ну не 2, лет 8-10, про 2 ты загибаешь

Полгода назад, он говорил, что ему два года осталось

это все равно, что поверить девушке что ты у нее второй

> закончил институт вышка обязательна?

вышка в некрекер обязательна, там любят вышки попонтовее и серты из вузов

ну не 2, лет 8-10, про 2 ты загибаешь

Блин, ты говорил два. Тогда отмена

Блин, ты говорил два. Тогда отмена

где я говорил 2?

про 2 я ничего не писал

ты с кем то попутал

где я говорил 2?

Года пол назад в @ru_devops

надо было скриншоты у нотариуса делать))

кого вы тут так активно хороните то, а то мож и мне надо?

Вышка обязательна, к сожалению, это корпоративное требование Но бауманка неа Любая вышка На серты пофиг В остальном главное опыт ну и желание, во Короче, если есть вопросы - пишите в личку

хочу 250к в воронеже

на руки

(на самом деле нет)

хочу 250к в воронеже

хотеть не вредно =)

ERROR: S client not available

Всем привет. В графане есть возможность настроить алерты при использовании переменных окружения в шаблонах дешбордов. Выдает ошибку: Template variables are not supported in alert queries. Что то похожее на это: https://github.com/grafana/grafana/issues/9334

Всем привет. В графане есть возможность настроить алерты при использовании переменных окружения в шаблонах дешбордов. Выдает ошибку: Template variables are not supported in alert queries. Что то похожее на это: https://github.com/grafana/grafana/issues/9334

>В графане есть возможность настроить алерты при использовании переменных окружения Нет такой возможности!

надо бы в фак добавить

Если мониторишь кластер кубертениса и поды часто меняются. Прописывать вручную это капец

Если мониторишь кластер кубертениса и поды часто меняются. Прописывать вручную это капец

Разверните рядом moira, в нее закидываете трафик от графита, настраиваете алерты по группам и радуетесь

Ну или не радуетесь если не используете графит

А у прома есть алерменеджер

и сервис дискавери чтобы не прописывать инстансы руками

prometheus operator же есть

prometheus operator же есть

вот скажите, вы его юзаете с промом внутри куба?

или снаружи?

Я не юза его. Но знаю тех, кто юзает для прома внутри. С которого пром снаружи забирает

никто не замечал, что графана с 5-ой версии стала менее отзывчивой?

Замечали, при этом ничего не менялось, кроме самой графаны с 4.х на 5.х. База тоже в лайте, но хз чему там тормозить можно.

Более того, на бубунте хром начинает не в себя ядра жрать, если в каком дашборде активном выскакивает аларм.

Более того, на бубунте хром начинает не в себя ядра жрать, если в каком дашборде активном выскакивает аларм.

Но это с тех пор как алармы появились было

Чат, вопрос немного не по теме, а может кто посоветовать графовую БД, из условий, 700кк вершин и где-то 1.5ккк ребер. По этому нужно считать запросы.

Чат, вопрос немного не по теме, а может кто посоветовать графовую БД, из условий, 700кк вершин и где-то 1.5ккк ребер. По этому нужно считать запросы.

отправлю вот сюда, поскольку не в теме и здесь офтоп https://fosdem.org/2018/schedule/track/graph_processing/

Чат, вопрос немного не по теме, а может кто посоветовать графовую БД, из условий, 700кк вершин и где-то 1.5ккк ребер. По этому нужно считать запросы.

я думаю лучше в ru_devops пойти с этим

Подскажите. Если prometheus как datasource у Grafana. Возможно ли с него тянуть все метрики по какой-нибудь Job (мы не знаем, какие они там будут), и выводить их, каждую на отдельном графике?

Подскажите. Если prometheus как datasource у Grafana. Возможно ли с него тянуть все метрики по какой-нибудь Job (мы не знаем, какие они там будут), и выводить их, каждую на отдельном графике?

На отдельном графике или на отдельной панели?

Подскажите. Если prometheus как datasource у Grafana. Возможно ли с него тянуть все метрики по какой-нибудь Job (мы не знаем, какие они там будут), и выводить их, каждую на отдельном графике?

можно послать запрос {job="jobname"}

Подскажите. Если prometheus как datasource у Grafana. Возможно ли с него тянуть все метрики по какой-нибудь Job (мы не знаем, какие они там будут), и выводить их, каждую на отдельном графике?

Думаю, да, через переменную и repeat panel

Спасибо, почитаю подробнее про все варианты

Но это с тех пор как алармы появились было

Та же фигня. Пойду сломаю Алерты.

А что делать, если у тебя прометеус, но ты хочешь мониторить кастомным скриптом что-то изнутри машины? Ставить sensu? Писать свой экспортёр?

А что делать, если у тебя прометеус, но ты хочешь мониторить кастомным скриптом что-то изнутри машины? Ставить sensu? Писать свой экспортёр?

писать экспортер или использовать tx_collector из node_exporter

А что делать, если у тебя прометеус, но ты хочешь мониторить кастомным скриптом что-то изнутри машины? Ставить sensu? Писать свой экспортёр?

Причём тут сенсу?

мне приходится мониторить некоторые системные вещи которые node_exp не видит - у меня tx-collector для этого

А что делать, если у тебя прометеус, но ты хочешь мониторить кастомным скриптом что-то изнутри машины? Ставить sensu? Писать свой экспортёр?

Для большинства яп и фреймворков есть либа, писать 2 строчки

концептуальный вопрос. есть 2 способа опроса любой метрики. Первый способ pull - постоянно опрашивает объект мониторинга - изменилось ли что-то. к примеру счетчик трафика или загрузка цпу. второй способ event - подписываемся на определенное событие, и при изменении его состояния получаем сообщение. Есть какой либо третий способ опроса метрик?

комбинированный

Ещё push