http://docs.grafana.org/http_api/data_source/

спасибо!

начал курить за prometheus, поставил node-exporter на несколько хостов, с 2 хостов отсутствуют метрики node_filesystem_blabla

Всем доброго дня. Господа хорошие, у меня возникла необходимость чем-то снимать простейшие системные метрики (CPU, RAM, net) с виндового хоста и отправлять их в формате Graphite на ноду с метриками (может, масло и масляное, но место ему всё равно в маслёнке). Подскажите пожалуйста, существуют ли "искаропковые" бесплатные решения?

телеграф?

https://github.com/peschuster/graphite-client/wiki/System-Metrics

начал курить за prometheus, поставил node-exporter на несколько хостов, с 2 хостов отсутствуют метрики node_filesystem_blabla

везде ubuntu 16.04, коллектор включен по дефолту

куда копнуть дальше?

телеграф?

благодарю!

настройки идентичные

https://github.com/peschuster/graphite-client/wiki/System-Metrics

тоже благодарю!

коллектд же емнип еще

куда копнуть дальше?

есть универсальный путь - tcpdump и посмотреть что там ваще творится. Ну и руками экспортер потыкать

дык, руками потыкал в порт

нет там метрик

коллектд же емнип еще

да я вчера на его репу смотрел-размышлял, хочу возюкаться или нет.

но тож спасибо ?

там же http на порту, браузером глянул

collectd хорош, но это C. Если среда гомогенная, то можно.

блин, видимо придется в исходники коллектора лезть ((

блин, видимо придется в исходники коллектора лезть ((

strace it!

и посмотри что он вообще читает

запускаю не сервисом из-под рута - все ок

запускаю не сервисом из-под рута - все ок

в докере небось?

нет, по старообрядчески - из репы ставил

apt install ... двухперстный =))

ну запусти руками

на дефолтах

мож там в collectors.enabled дичь какая

запускаю не сервисом из-под рута - все ок

а в логах есть чо?

похоже в правах где-то дело

time="2017-07-19T16:57:38+04:00" level=error msg="ERROR: filesystem collector failed after 0.000252s: Statfs on /run/user/1000/gvfs returned permission denied" file="node_exporter.go" line=97

сейчас надо найти, какой опцией его пнуть, чтобы gvfs исключить

collector.filesystem.ignored-fs-types

collector.filesystem.ignored-fs-types

collector.du-all-izkaropki =)

collector.filesystem.ignored-fs-types нет такой опции в 0.11

collector.filesystem.ignored-fs-types нет такой опции в 0.11

Чето старое, из реп ставил? Собери с гита тогда в пакет, если бинари не принято таскать

collector.filesystem.ignored-fs-types нет такой опции в 0.11

0.11 - это 27 июля 2015 года. две тысячи пятнадцатого, Карл! А чо не 0.1 версия? :D

0.11 в репе убунты

я ж не гентушник, все руками собирать =)

браза, ты выбрал ээээ... как бы сказать... слишком свежий и развивающийся софт. чтобы сидеть на репах убунты

но тут видимо придется пакет смастрячить в локальную репу

поставь какти или заббикс, там давно всё утряслось, гг

стояло и то и то =)

80к метрик тащит на лохматых сервачках, сойдет

вообще интересно, в дебиановском пакете -collector.filesystem.ignored-mount-points=^/(sys|proc|dev|run)($|/)

вроде не должно было их брать

угу

я с этим параметром уже поигрался ))))

если его не трогаешь, оставляешь дефолт

time="2017-07-19T17:03:08+04:00" level=error msg="ERROR: filesystem collector failed after 0.001130s: Statfs on /run/user/1000/gvfs returned permission denied" file="node_exporter.go" line=97

то это

если меняешь

time="2017-07-19T17:17:23+04:00" level=error msg="ERROR: filesystem collector failed after 0.001003s: Statfs on /sys/kernel/debug/tracing returned permission denied" file="node_exporter.go" line=97

то это

в общем, на серваках гном не стоит, поэтому по дефлоту все типа ок

ты лучше конфиги покажи с какими запускаешь

неактуально, снес и пакет собираю 0.14 сейчас

люблю такое

"не разобрался, почему не работает, решил обновиться!"

хипстота

да почему. разобрался он. коллектор пытается лезть во всякое гамно, которое не нужно (и куда не хватает прав), отключить это в старье - нет ручки. собирает новое - вполне норм выход )

Народ, кто использует clickhouse в качестве хранилища метрик, отзавитесь

@rlomonosov

?

ERROR: S client not available

?

выше чувак спрашивал про тебя

на 1 пост от моего

Как из кликхауса дронуть метрики которые там больше не нужны, или по ошибке туда попали?

rm -Rf /var/lib/clickhouse

Как из кликхауса дронуть метрики которые там больше не нужны, или по ошибке туда попали?

а что используется в качестве обертки над кликхаусом? (пишет/читает) в общем случае только дропнуть партицию (месяц)

Carbon-clickhouse пишет, graphite-clickhouse + carbonapi читают

тогда лишние метрики можно просто скрыть - останутся хранится, но перестанут отсвечивать

INSERT INTO graphite_tree SELECT Date, Level, Path, 1 AS Deleted, toUInt32(now()) AS Version FROM graphite_tree WHERE <УСЛОВИЕ>

вот так примерно

и послать HUP carbon-clickhouse-у. Он забудет известные ему метрики (хранит в памяти) и если метрика придет снова, то заинсертит опять с Deleted=0

Спасибо, решение так себе конечно, но что делать

Как из кликхауса дронуть метрики которые там больше не нужны, или по ошибке туда попали?

а из прометея? например, грохнуть все метрики определенного инстанса в доке пример мутный, из него можно только перебор метрик придумать

Ещё вопрос что делать, если надо внести изменения в имена метрик.

Так сказать "перенести"

а из прометея? например, грохнуть все метрики определенного инстанса в доке пример мутный, из него можно только перебор метрик придумать

никак. они умрут сами

никак. они умрут сами

а когда?

а когда?

это зависит от retention. По умолчанию там 15 суток

-storage.local.retention ключик

ну это значит "примерно никогда", если стоит год - вопрос собсно не про retention был, конечно

ну прометей не позволяет удалять из себя данные

они только сами если помрут

ну это значит "примерно никогда", если стоит год - вопрос собсно не про retention был, конечно

а как часто вы снимаете, и сколько примерно метрик и хостов у вас?

и нафига вам год?

короче, понятно, никак судя по встречным вопросам не по существу

никак да

так же как в кликхаусе никак.

так же как в инфлюксе никак

"не позволяет, пропадут только если сами помрут" - в общем тоже ответ лишние метрики попали (вон выше например было, как накидали левых файловых систем до того, как подправили ignore в exporter) - будут лежать, пока сами не протухнут нууу, такое (с) конечно

везде есть варианты но все они в конечном счете упираются в дроп партиций или кусков или вот это вот всё

типа "убирайте в графане", в общем ))

На удивление, но удаление это очень дорогая операция в стороджах