@ru_docker

Страница 61 из 610
Semyon
26.07.2016
17:07:30
или допилили?

yopp
26.07.2016
17:07:34
инфлюкс-же

Semyon
26.07.2016
17:07:40
чо инфлюкс-то

оно вроде unstable

Google
yopp
26.07.2016
17:07:45
в него лонгтерм

Semyon
26.07.2016
17:07:54
в смысле не он

а его совокупление с прометеем

я в итоге курю Римана

yopp
26.07.2016
17:11:43
ptchol
26.07.2016
17:11:47
прометей, кстати, охуительный до нельзя. всем заббикс
он же метрики не жмет ? Как жит ьс таким ?

ptchol
26.07.2016
17:12:21
ну всмысле у тебя серия с резолюшеном в секунду очень большая за год )

yopp
26.07.2016
17:12:25
ты доку плохо по нему читал, видать :B

Semyon
26.07.2016
17:12:33
кого?
http://riemann.io/

yopp
26.07.2016
17:12:35
не надо в нём хранить серии с разрешением в секунду

Semyon
26.07.2016
17:12:39
к нему уже цепляешь чо хочешь

yopp
26.07.2016
17:12:41
он не для этиого вообще

Google
Ivan
26.07.2016
17:12:52
На самом деле абсолютно нормальный подход, но циничный, этого не отнять
Никто, кроме меня, не сидят в тематических чатах в телеграмме. Тут сидят, имхо, больше ради трёпа, чем ради чего-то технического. Только появился новый проект на работе, и в девопсах я даже и не появлялся. За всё время сидения в этих группах услышал ровно ноль новой полезной информации. Как-то так :/

ptchol
26.07.2016
17:13:00
ну тогда он идет туда же куда и заббикс )

ptchol
26.07.2016
17:13:18
уху

Ivan
26.07.2016
17:13:35
Или на обслуживание Чистякову :)

yopp
26.07.2016
17:14:15
а я хочу.
через год приходи, вероятно мы таки запилим свою tsdb

Ivan
26.07.2016
17:14:56
а я хочу.
А зачем тебе? Не вижу изкейза

yopp
26.07.2016
17:15:06
потому что прометей пиздат для «сдесь и сейчас» и «а чо было вчера». и не подходит для «а давай сравним чо было вчера и пять лет назад в это день»

плюс метрики с разрешением в секунду, это редкий кейс на самом деле

ptchol
26.07.2016
17:15:59
А зачем тебе? Не вижу изкейза
потому что в агрегации за 10сек теряется больше, а за минуту там совсем. А в гистограммы пока не умеем )

yopp
26.07.2016
17:16:03
в смысле которые реально меняются раз в секунду

это я тебе как разработчик аналитки для скады говорю :)

ptchol
26.07.2016
17:16:47
всмысле ? у меня на метрику валится 800 значений примерно за секунду

yopp
26.07.2016
17:17:07
давай начнём с терминологии

ptchol
26.07.2016
17:17:13
давай !

yopp
26.07.2016
17:17:24
метрика это временная линия. у тебя в секунду на временной линии 800 событий происходит?

Evgeny
26.07.2016
17:17:33
Вот прямо не хочется прерывать годный спич, но...

ptchol
26.07.2016
17:17:36
да.

yopp
26.07.2016
17:17:37
ты рисуешь 800 точек в секунду?

Google
yopp
26.07.2016
17:17:41
чем?

ptchol
26.07.2016
17:17:54
я не рисую, я их агрегирую за секунду и рисую одну точку.

yopp
26.07.2016
17:18:06
что это за точки? какой у них физический смысл?

ptchol
26.07.2016
17:18:07
точнее рисую 5 точек на 5 линиях, для одной метрики.

yopp
26.07.2016
17:18:14
точка это _изменение_ значения

Ivan
26.07.2016
17:18:21
Dan
26.07.2016
17:18:29
зачем тебе нужен владелец этой группы?

yopp
26.07.2016
17:18:54
А зачем сравнивать "десять секунд назад" с 31234567 секунд назад?
очень часто надо. простой кейс, а давайте посмотрим сколько воды город потребил в прошлый засушливый день

ptchol
26.07.2016
17:18:58
А зачем сравнивать "десять секунд назад" с 31234567 секунд назад?
незачем, потому и хочется агрегировать спустя некоторое время. для сохранения истории трендов.

Semyon
26.07.2016
17:19:04
зачем тебе нужен владелец этой группы?
будет тебя царицами соблазнять

Dan
26.07.2016
17:19:27
я вам уже кидал смешную ссылку про заббикс с графаной в докере?

yopp
26.07.2016
17:19:35
В день! Не в секунду!
скорость изменений тоже роль играет

Dan
26.07.2016
17:19:44
вот вместо цариц идите и смотрите. а я пока в докер сую icinga2

yopp
26.07.2016
17:20:12
например давайте посчитаем сколько воды выливалось в секунду

из нашего водохранилища

Ivan
26.07.2016
17:20:36
скорость изменений тоже роль играет
Я об агрегации. Что хранишь сырые данные немного, потом агрегируешь из, потом ещё больше и ещё

Ivan
26.07.2016
17:21:01
например давайте посчитаем сколько воды выливалось в секунду
Кол-во вылитой воды за минуту разделить на 60?

ptchol
26.07.2016
17:21:11
погоди, метрика может изменяться сильно чаще чем раз в секунду, но хранить ее так часто сложно.

Google
yopp
26.07.2016
17:21:23
скорее всего ты просто смотришь на это не совсем так

ptchol
26.07.2016
17:21:41
ну к примеру респонс тайм какого то сервиса 3й стороны на который я хожу.

Ivan
26.07.2016
17:21:46
в скадах хранят сырые данные :)
И кому нужны эти сотни триллионов значений?

yopp
26.07.2016
17:21:55
например НИИ всяким, которые потом всякие железки оптимизируют

Dan
26.07.2016
17:22:34
хм. я её там нашёл по-моему

а сюда кидал потому что докер.

Ivan
26.07.2016
17:22:56
например НИИ всяким, которые потом всякие железки оптимизируют
Ну у них там наверняка не такое количество инфы. Иначе это было бы хлеще Яровой

Admin
ERROR: S client not available

yopp
26.07.2016
17:23:17
Ну у них там наверняка не такое количество инфы. Иначе это было бы хлеще Яровой
на самом деле быстрых физических процессов очень мало, в основном электрика

всё остальное очень медленное

и данных не так много

ptchol
26.07.2016
17:23:36
всё остальное очень медленное
я тебе ответил, а ты нет )

yopp
26.07.2016
17:23:44
я тебе ответил, а ты нет )
я тебе думаю, погоди

Ivan
26.07.2016
17:23:59
Ну вот для них тогда и имеет смысл хранить. Раз данных мало. Мы же о "здоровье сервиса" сейчас

yopp
26.07.2016
17:24:27
за исключением может сотни метрик

почему бы и не хранить. сегодня ты никогда не знаешь что тебе надо будет завтра

Google
yopp
26.07.2016
17:25:07
так что пиши всё, завтра понадобится

я тебе ответил, а ты нет )
наиболее оптимальный способ в твоём случае, как ты сам выше сказал — гистограммы с высоким разрешением. наприер миллисекундным в жестком диапазоне.

если тебе прямо так важно до миллисекунд.

мы с таким боролись очень просто: многоуровневая аггрегация

сырые данные пре-аггреровались в пяток разрешений и в зависимости от масштаба при чтении, брались из нужного разрешения

или сырые

задача покажи мне с точностью до события в масштабе год, тоже плохо решалась, но в общем случае такое никому и не надо было

мы по сути в аггрегации хранили некое подобие римской свечи

last+t, first+t, min+t, max+t, avg, среднеквадратичное, медиану

Ivan
26.07.2016
17:29:19
Эх, развели тут второй девопс. Йопп, тебя там второй раз забанили?)

yopp
26.07.2016
17:29:32
да там хуями меряются

тут тихо и приятно

Ivan
26.07.2016
17:30:21
тут тихо и приятно
Тебе нужна слака. Там можно самому с собой говорить :)

yopp
26.07.2016
17:30:48
да и тут можно!

ptchol
26.07.2016
17:31:59
наиболее оптимальный способ в твоём случае, как ты сам выше сказал — гистограммы с высоким разрешением. наприер миллисекундным в жестком диапазоне.
зачем мили ? в секундном, на то они и гистограммы что зная count за интервал, можно будет восстановить данные с заданной точностью.

в хангопсе тихо и приятно, тока Денис достает )))

Dan
26.07.2016
17:33:19
тут поступило предложение всем переехать на Rancher

yopp
26.07.2016
17:33:26
заебок идёт

Dan
26.07.2016
17:33:46
rly?

стоит ?

ptchol
26.07.2016
17:33:50
а какую проблему он решает, подскажите ?

я вот смотрел смотрел да не высмотрел

Страница 61 из 610