А почему кстати ты топишь по сей день за collectd?

А чего нет-то?

На языке це писать я умею

но на сколько я помню вариант ника не делает вобоще переграгацию

это то, как у нас сейчас? Там не переагрегация, а рассчет среднего по большим таймфреймам и он делается сразу и хранится в параллели.

покажите чотеньких дашбордов для графаны?

Но последний раз я писал плагин для CollectD в 2007-м, когда у Фила работал

А так - ну не надо было, все есть уже

В чем проблема у collectd с масштабами? Какие там у него масштабы прости?

на хабре были статьи как всё плохо, когда данных много

пром не очень будет жрать

За долго хранить? Будет

покажите чотеньких дашбордов для графаны?

https://grafana.net/dashboards вот тут посмотреть можно

https://grafana.net/dashboards вот тут посмотреть можно

про тут я и сам знаю

А чего нет-то?

Ну там достаточно сложно внедрять плагины из-за аутотулс. А разве всякие экспортеры прометея и телеграфа не?

За долго хранить? Будет

ну что ты опять начинаешь, нормально же общались :) сказал буду хранить 90 дней. как будет приближаться скажу

на хабре были статьи как всё плохо, когда данных много

Каких в жопу данных? Отсылай сразу их висперу

помню смутно, вроде коллектд просто не успевал за минуту всё собрать

у меня сейчас вот сборщик уже на текущих данных не всё за минуту успевает собрать

ну что ты опять начинаешь, нормально же общались :) сказал буду хранить 90 дней. как будет приближаться скажу

@knutov 90 дней - бери прометеус и не мучайся. За год+ - Wisper (т.е. этот кусок графита) без вариантов

у нас сейчас 10 лет хранится

помоему даже в деталях

завидую такому колву бабла выкинутому в трубу...

но жест засчитан...

там всё довольно хорошо сделано и стоимость почти нулевая

помню смутно, вроде коллектд просто не успевал за минуту всё собрать

Нет, он пишет в rrd, если ты ему скажешь. И вот там всё плохо. Используй collectd только как поставщик метрик графиту. У него есть плагин соответствующий. Графитом в виспер собирай. Графаной смотри

там всё довольно хорошо сделано и стоимость почти нулевая

Поверю только если без детализации

смотреть то я всё-таки наверное в json буду, но ладно. а графану можно как-то отдельно высунуть отдельный график чтобы показывать клиенту данные по его источникам, не давая доступ к остальному?

или просто сразу брать данные в json и рисовать через D3.js?

смотреть то я всё-таки наверное в json буду, но ладно. а графану можно как-то отдельно высунуть отдельный график чтобы показывать клиенту данные по его источникам, не давая доступ к остальному?

хз. ты можешь ходить чем-то своим в виспер и рисовать что угодно как угодно

помню смутно, вроде коллектд просто не успевал за минуту всё собрать

waaat?

смотреть то я всё-таки наверное в json буду, но ладно. а графану можно как-то отдельно высунуть отдельный график чтобы показывать клиенту данные по его источникам, не давая доступ к остальному?

можно

Я наверное чего-то не понимаю, но чего вы такое собираете, что оно аж минуту собирается?

У меня коллектд метрики собирает раз в две секунды и успевает

сотни вдс, десятки метрик

ну дак на каждом ВДС свой коллектд же

нет?

ну у меня нет коллекд, и в моему случае - один снаружи

Пермская тусовочка ширится, хехе :)

но чтобы получить некоторые метрики - неисключено, что придется зайти в вдс и сделать аж форк

сейчас больше минуты - собираются разные данные по серверам шаред хостинга, но там некоторое нужно локально посчитать и просуммировать, прежде чем отправить

sounds legit

тогда не знаю, пожалуй

на хабре были посты про замену коллектд на что-то более быстрое я большими примерами когда начинаются проблемы. нагуглить не могу, возможно авторов забанили и посты съело нло

на хабре были посты про замену коллектд на что-то более быстрое я большими примерами когда начинаются проблемы. нагуглить не могу, возможно авторов забанили и посты съело нло

Ничего быстрее collectd нет в природе. Слушай же меня а не голоса в своей голове :) Медленная у collectd запись rrd. Не пиши ничего collectd в rrd. Пихай сразу или графиту, или инфлюксу, или прометею.

На самом деле, во времена докера ты можешь все предложения попробовать у себя на ноуте

я не умею докер ) и не хочу уметь.

Метрики с OpenVZ можно собирать как-то самим, без collectd

я не умею докер ) и не хочу уметь.

Кого ебёт что ты умеешь или хочешь? :)

[@knutov судя по всему осваивает на ноуте докер, ох]

фу, нет

ухо чешу

не буду я это сам трогать

ты сам не настраивай. ты для себя прикинь. настривать кому-нибудь дай. вот я в Сан-Диего например хочу

фу, нет

А @spiculator кстати повелся ))

котаны, а можно как-то в графане нарисовать индекс Римана?

чё там уметь, тяп ляп и готово :)

позавчера в первый раз команду запустил, сегодня уже использую :)

кстати, а есть гдето коллекции графиков для графаны? а то вот тут cpu от инфлюкса который туда cadvisor шлет мне по нарастающей рисует. не хочу ничего знать о простейших графиках

и второй вопрос, как можно автоматизировать добавление хостов в графану

э ?

тебе просто нужен темплейтинг

ман темплейтинг?

ну тип того

http://docs.grafana.org/reference/templating/

погляди там гифочки. оно ?

Не совсем. По гифкам

И меня наверное в перву очередь интересуют какие-то готовые графики. Хочу взять опыт чей-то

готовые даши все унылые что я вдел

И меня наверное в перву очередь интересуют какие-то готовые графики. Хочу взять опыт чей-то

у тя же collectd ?

готовые даши все унылые что я вдел

Меня не знаю как это в терминах графаны называется - графики интересуют. Я какти неасилил, потому что не смог придумать графики а потом мне наскучило

у тя же collectd ?

Да. Но эксперименты я ставлю на cadvisor->influxdb->grafana

инфораструктура сбора сильно фрагментирована

а значит нейминг и формулы

врятли что то лучше теплейлов на графана орг ты найдешь

А есть хоть какие-то?

вот у меня два последних совпадают

а собираю я телеграфом

значит мои дашборды тебе надо будет переделывать напрочь :)

а собираю я телеграфом

Вопрос в сторонку - а ты следишь за развитием телеграфа?

да

да

Там либа, которой он собирает метрики была... ну там частично сисколлами, а частично внезапно шелл экзеками была. Они что-то с этим сделали? Например во FreeBSD они реально запускали sysctl с параметрами и парсили выход

оно так и осталось

Но при этом часть уже брали сисколом sysctlbyname и так далее

охохо

плагин procstat работает через pgrep

например

даже в птицуксе?

да

а роадмап какой есть или надежда умирает?

Фил, ему чуть больше года. он на гошечке.

я чуть меньше года хочу на гошечку collectd перекатать.

не вижу проблемы

Я видишь, даже в либу внутрь зашлядывал.

Некстати, чем телеграф функционально лучше collectd?

да ничем. collectd если примерится с xml норм.

просто у меня была возможность взять современный стек технолггий и я взял.

жалею только об инфлюксе

да ничем. collectd если примерится с xml норм.

чо? какой xml?

жалею только об инфлюксе

А что у тебя с ним?

А что у тебя с ним?

падает. жрет память. долго поднимается. сыпет ошибками. устраивает циклические ребуты

чо? какой xml?

может я чо то путаю