@metrics_ru

Страница 10 из 681
Dmitry
26.08.2016
13:18:24
а если ранить точное время, то приходится интерполировать результат

Dmitry
26.08.2016
13:18:25
но в базе данные хранятся в сыром виде

Dmitry
26.08.2016
13:18:49
на питоне оно заметно тупило

я делал линейную интерполяцию там

Google
Dmitry
26.08.2016
13:20:12
а данные хранились в монге или в роксе

Dmitry
26.08.2016
13:22:38
retention policy есть 2х видов: 1) сделай сам - есть база, скрипт, который будет делать rollup помещается в 2 экрана аккуратного кода 2) использовать движок в ch merge с правильной функцией схлопывания

Алексей
26.08.2016
13:23:49
подсказка - второй вариант лучше да ?

Dmitry
26.08.2016
13:24:03
AggregatingMergeTree

Dmitry
26.08.2016
13:24:20
а просто дропать можно?

Dmitry
26.08.2016
13:24:37
просто дропать можно

где то там был движок специально под данные графита

но сейчас не могу найти в доке) походу убрали почему то

Алексей
26.08.2016
13:25:43
вроде бы движок под графит не опенсорсили

сначала по крайней мере

Dmitry
26.08.2016
13:26:08
вполне может быть

но для "своих" тоже нет

Dmitry
26.08.2016
13:27:19
И, стоит ли косить под render?

Google
Dmitry
26.08.2016
13:27:32
может проще добавить новый тип базы в графану?

Алексей
26.08.2016
13:27:48
так это селектилку писать

мордочку для графаны делать

Dmitry
26.08.2016
13:28:10
"можно вообще всё" (ц)

Dmitry
26.08.2016
13:28:19
леша, js программеры дешевле

Алексей
26.08.2016
13:29:03
тогда есть ли смысла вообще мимикрировать под графит ?

Dmitry
26.08.2016
13:29:15
я и спрашиваю

Алексей
26.08.2016
13:29:16
может надо мимикроровать под инфлюкс

и на вставке и на выборке

оно я так понимаю гораздо нативнее ляжет на уже имеющийся движок sql-я

Dmitry
26.08.2016
13:29:55
вставка - пофиг

стоит ли мимикрировать, когда можно фалломорфировать

Алексей
26.08.2016
13:31:52
@dkulikovsky а поверх этого дела есть алёртилка ?

Vladimir
26.08.2016
13:32:33
Алексей
26.08.2016
13:33:07
ну вот вопрос про алертилку он как раз про легаси или интегрированные системы

Dmitry
26.08.2016
13:33:20
легаси нет, у нас полностью интегрированое решение

Алексей
26.08.2016
13:33:51
я так понимаю что вопрос совместимого стораджа встал в яндексе именно потому что 100500 систем уже пишет в ег оформате

и не факт что их стоит переписывать для поддержки более другого формата сообщений

ну а дальше по накатанной. положить положили. а доставать удобнее в том виде в котором уже есть готовые инструменты.

Dmitry
26.08.2016
13:36:50
Алертилки в открытом доступе нет

Google
Dmitry
26.08.2016
13:36:55
Инфлукс на 2 порядка медленней ch

И в ch есть вполне удобный sql из коробкт

Vladimir
26.08.2016
13:37:33
Инфлукс на 2 порядка медленней ch
Ты слишком хорошего мнения о Influx'е

Dmitry
26.08.2016
13:37:40
:)))

Алексей
26.08.2016
13:38:26
алертилки в открытом доступе нет, но вообще она есть и полагается на ch ?

или это "не корректный" вопрос :) ?

Dmitry
26.08.2016
13:38:56
на ch нет, на графит - да

Алексей
26.08.2016
13:39:04
ага ок

Dmitry
26.08.2016
13:39:11
на графит у нас их штук 5 разных

в общем и целом скрипт для этого тривиальный

Алексей
26.08.2016
13:39:29
ну и часть видимо своя ,а часть опенсорс ?

Dmitry
26.08.2016
13:39:52
всё своё

просто разной стеройдности системы и скрипты)

Алексей
26.08.2016
13:40:28
аа

понятно

Dmitry
26.08.2016
14:00:53
как сравнивали ch с influx?

Dmitry
26.08.2016
18:47:40
Это тебе к @Civiloid

Vladimir
26.08.2016
18:49:49
Я не сравнивал кликхаус ни с чем же )

Просто инфлюкс не очень перспективная база для мониторинга

Аналитика может быть

Google
Dmitry
26.08.2016
18:50:39
эээ

Vladimir
26.08.2016
18:50:41
Или мониторинг погоды на raspberry pi

Dmitry
26.08.2016
18:51:01
откуда такой вывод?

Vladimir
26.08.2016
18:51:23
откуда такой вывод?
Я раз в год тыкаю в него и прогресса за последние 3 года 0

Последний раз смотрел 0.13 версию

откуда такой вывод?
Просто авторы сделали базу которая не имеет преимуществ перед тем же opentsdb, а по single node скорости хуже виспера с его питоном

А кластеризация у них за деньги

ptchol
26.08.2016
18:55:16
с другой стороны hbase простой как отвертка.

Vladimir
26.08.2016
18:56:22
Dmitry
26.08.2016
18:57:08
голословно очень

ptchol
26.08.2016
18:57:19
тю http://opentsdb.net/docs/build/html/user_guide/backends/cassandra.html

Vladimir
26.08.2016
18:57:38
голословно очень
А как будет не голословно?

Dmitry
26.08.2016
18:57:55
результаты тестов

Vladimir
26.08.2016
18:58:05
а, ну когда оформлю их, тогда будут

ptchol
26.08.2016
18:58:05
Ну да. Есть такое
мне тут надо было базу с одного кассандра кластера мувнуть на другой, в старом было 3 ноды, в новом 7. как думаешь как это делается ? )

Dmitry
26.08.2016
18:58:27
вполне нормальная база

Vladimir
26.08.2016
18:58:33
а оформлю их не раньше чем найду какую-то адекватную замену виспера и начну реальный трафик на нее переводить

Dmitry
26.08.2016
18:58:40
но к ней есть претензии

Google
ptchol
26.08.2016
18:59:05
дамп-рестор? )
там вобще нельзя снять консистентный дамп по кластеру, тока по ноде каждой.

Vladimir
26.08.2016
18:59:20
ну я с кассандрой плохо знаком, у меня ее нету

ptchol
26.08.2016
18:59:31
с 3 на 3 еще можно

Dmitry
26.08.2016
18:59:47
https://www.evernote.com/l/ADnckwK0Be5E97cZpD2V2BOwQFyJG5sJHjI

вот из моего древнего

ptchol
26.08.2016
18:59:53
с 3 на 7 проще данные просто перелить какой нить тулхой

Dmitry
26.08.2016
19:01:14
у influx достаточно интересное хранилище

Vladimir
26.08.2016
19:01:19
вот из моего древнего
Ага, но я пока не начинал ничего писать. Если будет тест, то будет полноценная статья или серия статей - а это куда больше чем 1 база.

Dmitry
26.08.2016
19:01:25
но очень сырая реализации

Vladimir
26.08.2016
19:01:48
но очень сырая реализации
Они формат хранения меняли 3 или 4 раза за последние 2 года

Dmitry
26.08.2016
19:01:54
мне не нравится ее надежность

я знаю

я конкретно про TSM1

но там куча проблем с локами, жрет память за себя и за того парня

и, банально, может не взлететь

ptchol
26.08.2016
19:03:13
У него проблема что он жрет памяти адски много

Dmitry
26.08.2016
19:03:20
мы в курсе

ptchol
26.08.2016
19:03:41
ну вот как починят тогда и можно жить

Dmitry
26.08.2016
19:03:56
равно как и то, что он может просто не смочь обработать WAL после рестарта

ptchol
26.08.2016
19:03:59
как бы время идет а ОЗУ до сих пор самый дорогой ресурс

Dmitry
26.08.2016
19:04:00
из-за нехватки памяти

Страница 10 из 681