ну дофига кто юзает графит и кликхаус

cadvisor не решает задачу мониторинга контейнеров, по крайне мере в моем случае. Он слишком overpowered + не может нормально отдать статус контейнера, например)

а кубер?

Как говорится. свой велосипед роднее

У меня нет системы оркестрации)

то есть у тебя есть докеры, но нет оркестрации для них?

чувак, лучше этим займись, легче жить будет

инфа 100%

Наличие докеров без оркестрации звучит как "выкинем все плюсы контейнеров, и будем героически жить с минусами"

Непонятно чем оно в таком виде лучше lxd/ovz/kvm

Но я не знаю всех подробностей, конечно, так что могу быть неправ.

мы так жили с наколенным подобием оркестрации

Ну, у меня ansible + docker-compose. На количество серверов, которые у нас тащить оркестрацию не вижу смысла. Кубер слишком мощный, nomad на одном сервере не подержишь и так далее.

это большая боль в попе

бывают такие вопросы, которые быстрее попробовать и узнать, чем спрашивать :)

попробовалю без job_name нельзя

без job_name конечно нельзя, но перепишется ли оно значением из файла из file_sd_configs?

так а мне был смысл чтобы один раз прописать file_sd_config и чтобы там job_name дефайнить

но раз нельзя - я придумал для своего случая другую схему

задача была чтобы максимально не трогать prometheus.yml

другой вопрос - что будет если положить невалидный файл в file_sd_config определённую директорию?

помешает ли это рбаботе других scrapeов?

Он проигнорит его.

он не прочитается

Скорее всего.

вопрос сталкивался ли кто с этим

прометей если запущен, то не перечитает конфиг (целиком), а если не запущен, то не запустится с ошибкой конфига

нжинкс например сделал бы так же

Все что касается file-sd он перечитывает же

целиком все файлы указанные в джобе

так

проверим

У меня вот так: file_sd_configs: - files: - hosts.yml refresh_interval: 10m

и вот щас игрался с лейблами для хостов - ошибся в синтаксисе и все таргеты отвалились почти сразу из конфига

Правда пром на это никак не отреагировал, просто пересстал скрапить

проверил

просто игнорит

а чо такой refresh_interval большой?

Да не особо часто добавляются хосты, нет смысла в большой динамике.

В целом, это можно сделать только через поиск по внутренностям. Пришлось так и делать, а жаль(

Да не особо часто добавляются хосты, нет смысла в большой динамике.

всё равно нет смысла делать большой интервал, прометей файл может через inotify подхватывать при изменении

Ну вообще да, и правда.

Коллеги, нужен совет. Задача простая - есть сеть из серверов, надо замерять между ними латенси сети и показывать. Но не между какой-то парой, а все со всеми. Если конкретно - ceph кластер и надо смотрит латенси между серверами, какие задержки каждый сервер имеет с другими серверами

А как замерять между всеми? Это получается должна быть у каждого сервера отдельная метрика, в количестве равном количеству серверов соседей.

Т.е. есть 10 серверов, и соответственно у каждого собирается 9 метрик, каждая из которых отображает латенси от текущего, до 9ти остальных

Коллеги, нужен совет. Задача простая - есть сеть из серверов, надо замерять между ними латенси сети и показывать. Но не между какой-то парой, а все со всеми. Если конкретно - ceph кластер и надо смотрит латенси между серверами, какие задержки каждый сервер имеет с другими серверами

smping именно то, что вам нужно. Но настраивать его вы будете долго

smping именно то, что вам нужно. Но настраивать его вы будете долго

а линк что за зверь, а то что то гуглу от такого нехорошо

а линк что за зверь, а то что то гуглу от такого нехорошо

https://oss.oetiker.ch/smokeping/

древний, как мамонт, но очень полезный софт

иссью там огонь :) https://github.com/oetiker/smokeping-3.x/issues/1#issuecomment-150937894

древний, как мамонт, но очень полезный софт

Спасибо, посмотрю!

иссью там огонь :) https://github.com/oetiker/smokeping-3.x/issues/1#issuecomment-150937894

он никогда на гитхабе не разрабатывался... Да и dead слишком громкое слово – то, что мертво, умереть не может

он примерно так же dead, как RRDTool. Разработку там, по-моему, уже никто не ведет. Но своб задачу выполняет, кушать не просит

Коллеги, нужен совет. Задача простая - есть сеть из серверов, надо замерять между ними латенси сети и показывать. Но не между какой-то парой, а все со всеми. Если конкретно - ceph кластер и надо смотрит латенси между серверами, какие задержки каждый сервер имеет с другими серверами

Так делает консул. Я уже разок в шутку советовал. Оказалось подошло

Так делает консул. Я уже разок в шутку советовал. Оказалось подошло

Смотрел на него, но у него вроде этот фунционал не основной, а «побочный»

Смотрел на него, но у него вроде этот фунционал не основной, а «побочный»

"Вам шашечки, или ехать?"

Смотрел на него, но у него вроде этот фунционал не основной, а «побочный»

Так и есть

Главное чтоб работало же

https://fosdem.org/2018/schedule/event/google_go/ там заявлена трансляция

и ваще мониторинг деврума

ERROR: S client not available

(и всего фосдема)

Спасибо!

https://fosdem.org/2018/schedule/track/monitoring_and_cloud/ вот если что

уже началось и идёт

google go которая

у них потом запись будет

угу

а я пытаюсь в канальчик заметки вести

гуд

там про OpenCensus говорят по факту

то есть больше девелоперам

наверное

хотя подход интересный

Ну, девелоперам это кто то продать должен :)

Почему бы не мы

ну я тока за, я такое хочу пару лет уже

то есть больше девелоперам

Мы все тут уже девелоперы... метаться поздно

Мы все тут уже девелоперы... метаться поздно

есть те кто еще в стадии отрицания

и кому до принятия еще далеко

Они вымрут. Мы потом посмотрим на них в музее

дык отрицание-гнев-торг-депрессия-принятие

вот все тут на разной стадии просто)

кто-то пока в отрицании

кто-то уже в депрессии

Мы все тут уже девелоперы... метаться поздно

А может инженеры?)

А может инженеры?)

Вот только не надо себя обманывать

сомневаюсь что тут прямо все инженеры :)