Зачем графит-веб пробует подключить Falsh? https://gyazo.com/33e46ea7daf32a847f6278ba9da0d0b9

это ваш файрфокс вместе с протрояненным сайтом флэш себе придумал ?

с каким это ещё протрояненным сайтом?

ну вот точно не было никакого флэша никогда

Флэш на графане. Забавно

А кто прометея пользует? Там есть типа визарда для ямла?

Или все руками?

там столько делов что визард будет сложнее

там столько делов что визард будет сложнее

Понял. Значит пилим дальше. Адовая штука )

Какой ещё визард? Бери да генерируй конфиг своим любимым языком

Я генерю пупетом

Какой ещё визард? Бери да генерируй конфиг своим любимым языком

Блин, у меня хапэ всегда были. Вот заббикс еще подлетел в нагрузку. И надо прометея запилить еще вчера

Я генерю пупетом

Нет у нас паппета насколько я знаю. По артефактам на серваке кто-то баловался ансибл

Блин, у меня хапэ всегда были. Вот заббикс еще подлетел в нагрузку. И надо прометея запилить еще вчера

честно, прометей намного проще

главное - понять концепцию

главное - понять концепцию

Ну хз. В хапэ тэкнул пыкнул и нашел, что поправить.

тут еще проще. Есть текстовый файл и все сразу понятно. Единственное, что было для меня неочевидно - правила алертинга (там документация сильно хромает)

тут еще проще. Есть текстовый файл и все сразу понятно. Единственное, что было для меня неочевидно - правила алертинга (там документация сильно хромает)

У меня как раз по оповещениям жопа получается. Нормал не пришел, сразу ругаются

у прометея на сайте есть тулза для отладки она весьма кривая, но лучше, чем ничего

Причем оповещалки по сложным диапазонам и с проверкой на предыдущий стейт метрики. В доках нехрена не нашел

Кто-нибудь с питона отправлял кастомные метрики? Создаю вот так metric = prometheus_client.Gauge( 'ansible_manager_template_last_task_success_{}'.format(template.pk), 'Status last task', ) metric.set(metric_value) prometheus_client.generate_latest()При первом подключении все ок, а вот при последующих ловлю такую ошибку ValueError: Timeseries already present in CollectorRegistry: ansible_manager_template_last_task_success_1

Кто-нибудь с питона отправлял кастомные метрики? Создаю вот так metric = prometheus_client.Gauge( 'ansible_manager_template_last_task_success_{}'.format(template.pk), 'Status last task', ) metric.set(metric_value) prometheus_client.generate_latest()При первом подключении все ок, а вот при последующих ловлю такую ошибку ValueError: Timeseries already present in CollectorRegistry: ansible_manager_template_last_task_success_1

Ты случаем не в банке работаешь? )

Ты случаем не в банке работаешь? )

Это какой-то рофел? Нет

Не угадал. Осталось две попытки )

Кто-нибудь с питона отправлял кастомные метрики? Создаю вот так metric = prometheus_client.Gauge( 'ansible_manager_template_last_task_success_{}'.format(template.pk), 'Status last task', ) metric.set(metric_value) prometheus_client.generate_latest()При первом подключении все ок, а вот при последующих ловлю такую ошибку ValueError: Timeseries already present in CollectorRegistry: ansible_manager_template_last_task_success_1

Просто щас в маленьком банке работаю и навеяло. Мы там все сами пилим. Не нашей стороне проблема уже не канает, а ты пытаешься сделать, что я пытаюсь ))

https://github.com/influxdata/telegraf/blob/master/docs/CONFIGURATION.md#output-configuration-examples можно телеграфом в разные базы писать с разными rp

Кто-нибудь с питона отправлял кастомные метрики? Создаю вот так metric = prometheus_client.Gauge( 'ansible_manager_template_last_task_success_{}'.format(template.pk), 'Status last task', ) metric.set(metric_value) prometheus_client.generate_latest()При первом подключении все ок, а вот при последующих ловлю такую ошибку ValueError: Timeseries already present in CollectorRegistry: ansible_manager_template_last_task_success_1

Попробовать почитать доку и не созбавать метрику на каждый запрос?

Попробовать почитать доку и не созбавать метрику на каждый запрос?

А как я тогда узнаю кол-во метрик? По факту у меня на каждый запрос может быть разное кол-во метрик

Как это?

Я метрики отправляю по состоянию моих объектов в бд, в теории каждый раз оно может меняться, на практике очевидно, это будет происходить не столь часто. По запросу я создавал метрики, вносил нужные значения и регистрировал их. Я предполагаю, что на самом деле я не так отправляю метрики, как нужно. Помимо моего создания метрик в цикле registry = prometheus_client.CollectorRegistry() metric = prometheus_client.Gauge( 'ansible_manager_template_last_task_success_{}'.format(template.pk), 'Status last task', registry=registry ) metric.set(metric_value)Я еще юзаю django-prometheus, который тоже отправляет свои метрики https://github.com/korfuri/django-prometheus Указание registry это по факту и есть отправка?

@Andorka в чём суть проблемы? Ты пишешь свой экспортёр на питоне для какой-то БД, правильно?

не я

Ооокеееей

@Andorka в чём суть проблемы? Ты пишешь свой экспортёр на питоне для какой-то БД, правильно?

Я пишу

Проблема в том, что мой способ не работает)

Я пишу

Гениально сделать ник '.'

Чтобы ничего непонятно было

Я пишу

Так ну хорошо, ты понимаешь как работает экспортёр?

Принцип

Так ну хорошо, ты понимаешь как работает экспортёр?

скорее нет чем да, я смотрел на код django_prometheus и пытался повторить что-то похожее

Стартует http сервер, в нём любое кол-во метрики, могут появляться новые, значение обновляется опять таки асинхронно (только когда тебе надо у конкретной)

https://github.com/prometheus/client_python

вот либа готовая

Да, ты сложно начал решать, возьми выше простой пример и быстро поймёшь о чём речь.

Окей, щас попробую без django_prometheus запилить

'Three Step Demo'

Тебе должно хватить https://github.com/prometheus/client_python/blob/master/README.md, экспортёр за 3 минуты короче и пихай туда запросы к БД свои и генерацию новых метрик

А кто прометея пользует? Там есть типа визарда для ямла?

Консул?

Просто щас в маленьком банке работаю и навеяло. Мы там все сами пилим. Не нашей стороне проблема уже не канает, а ты пытаешься сделать, что я пытаюсь ))

Причём тут вообще банк на самом деле непонятно)

А как я тогда узнаю кол-во метрик? По факту у меня на каждый запрос может быть разное кол-во метрик

Короткий ответ, прометею и не нужно знать сколько у тебя метрик вообще или сколько в данный момент ты хочешь обновить значения

Причём тут вообще банк на самом деле непонятно)

Похожий вариант сейчас пилю. Думал кто-то из знакомых

Похожий вариант сейчас пилю. Думал кто-то из знакомых

Похожий - это простейший экспортёр для запросиков к БД, мне кажется таких людей дофига кто такое делал, ничего необычного

Короткий ответ, прометею и не нужно знать сколько у тебя метрик вообще или сколько в данный момент ты хочешь обновить значения

Щас попробую ещё разок примером из доки без django_prometheus

Щас попробую ещё разок примером из доки без django_prometheus

Там ctrl +C ctrl +v

Похожий - это простейший экспортёр для запросиков к БД, мне кажется таких людей дофига кто такое делал, ничего необычного

Дофига может кто и делал. На пару тысяч метрик

Экспортёру пофиг, это совсем немного

Надо с учетом масштабирования. Систем чуть ли не каждый день подваливает.

Надо с учетом масштабирования. Систем чуть ли не каждый день подваливает.

Тогда я думаю это не похоже на то, что делает мистер точка

Тянуть все из бд, не ахти вариант. Я бы по возможности это до минимума урезал

Короткий ответ, прометею и не нужно знать сколько у тебя метрик вообще или сколько в данный момент ты хочешь обновить значения

окей, пример работает, но все равно один вопрос остается. Тут мы изначально знаем, что у нас всего 1 метрика, в моем же случае, я не знаю сколько у меня метрик. Т.е. получается мне по запросу нужно будет рассчитывать свое кол-во метрик? Но это же вроде так не работает

окей, пример работает, но все равно один вопрос остается. Тут мы изначально знаем, что у нас всего 1 метрика, в моем же случае, я не знаю сколько у меня метрик. Т.е. получается мне по запросу нужно будет рассчитывать свое кол-во метрик? Но это же вроде так не работает

Что возвращает запрос?

Метрики должен возвращать вроде

Ключ - значение?

Я к сожалению под капот client_python не заглядывал, так что не знаю. Я имел в виду, что когда мы обращаемся к нашему экспортеру, он возвращает все наши метрики.

ERROR: S client not available

https://github.com/prometheus/client_python Если смотреть на пример отсюда, мы при запросе знаем, что существует одна метрика, в моем же случае при запросе мы не знаем сколько метрик существует

Я про запрос к бд

Что возвращает запрос к БД?

Я вытаскиваю из бд объект, провожу с ним некоторые манипуляции и на выходе получаю 1 или 0

Это ключ значение или нет?

нет

Как ты в скрипте собираешься создать набор ключ - значение в первый проход?

Давай ещё проще, без экспортёра, ты можешь скриптом сделать текстовый файл, где будет строчками нужные тебе Ключ - значение ?

Да

А в виде цикла можешь

в виде цикла это и происходит

Тип метрик - counter?

Тип метрики Gauge, но вполне возможно это моя ошибка. По факту я буду возвращать либо 0 либо 1

Ну вот смотри, если текстовый файл, каждый ключ в цикле, у тебя File append (ключ значение) Так?

С экспортёром это будет gauge set(значение) Gauge создаёшь, если такой ещё не создан (новая метрика) Всё.

А если создан? И как понять, что он создан?

В лоб можно

Пробуй сделать set, если не получается, создать и сделать set

А если создан? И как понять, что он создан?

Ещё примерах есть 'Increment when entered, decrement when exited.'

Пробуй сделать set, если не получается, создать и сделать set

я видимо не понимаю какого-то ключевого, очевидного момента. Вот у меня нет никаких метрик, но у меня есть файл заполненный моим значениями (имя метрики и её значение предположим что в конце значения у нас всегда перевод строки) Теперь я вычитываю этот файл итерируясь по каждой строчке. Теперь в цикле мне нужно понять, существует такая метрика уже или нет. Узнаем мы это применяя set, 1)Никакой метрики не существует, т.е. непонятно к чему мы будем пытаться применить сет 2)Даже если какая-то метрика существует мне нужно обновить там значение, и вроде как это я тоже должен делать через set. И в моей голове все опять сводится к тому, что мы в цикле создаем Gauge

я видимо не понимаю какого-то ключевого, очевидного момента. Вот у меня нет никаких метрик, но у меня есть файл заполненный моим значениями (имя метрики и её значение предположим что в конце значения у нас всегда перевод строки) Теперь я вычитываю этот файл итерируясь по каждой строчке. Теперь в цикле мне нужно понять, существует такая метрика уже или нет. Узнаем мы это применяя set, 1)Никакой метрики не существует, т.е. непонятно к чему мы будем пытаться применить сет 2)Даже если какая-то метрика существует мне нужно обновить там значение, и вроде как это я тоже должен делать через set. И в моей голове все опять сводится к тому, что мы в цикле создаем Gauge

Вычитывать файл не нужно

Напиши код, который переписывает файл каждый раз полностью

Удаляет старый, если так удобнее

Потом

Ну вот смотри, если текстовый файл, каждый ключ в цикле, у тебя File append (ключ значение) Так?

С экспортёром это будет gauge set(значение) Gauge создаёшь, если такой ещё не создан (новая метрика) Всё.

В лоб можно

Пробуй сделать set, если не получается, создать и сделать set

1) создаёшь gauge, я уже сказал как, в цикле через эксепшен к set 2) да

# du -sh /var/log/go-carbon/ 29G /var/log/go-carbon/ Это за 2 дня. Каждый запрос к карбонсерверу логируется с уровнем INFO @Civiloid кто это у нас такой фанат логирования?

# du -sh /var/log/go-carbon/ 29G /var/log/go-carbon/ Это за 2 дня. Каждый запрос к карбонсерверу логируется с уровнем INFO @Civiloid кто это у нас такой фанат логирования?

Я