ну тогда посмотреть в метрики хадупа про скорость чтения и все такое

@mangoat по скорости чтения мало кто сможет поспорить с whisperом.

но в минус пойдет странная кластеризация графита, странные тулзы управления, отсутствие тэгов

потому что это по сути упрощенный вариант ррд

с более правильным кэшированием

short term выходит

то что на базе кассандры - там надо внимательно смотреть на реализацию, у многих хромает скорость чтения. да и скорость записи

зато почти все умеет кластеризацию

в том или ином виде

@mangoat https://docs.google.com/spreadsheets/d/14zMImj6LwDZcgH1-WBThRwrgZdgcV2NJjjtKkN3SbLI/edit?usp=sharing - на правах саморекламы, я тут списочек того что может подойти под хранение Time Series составляю, если будет что дописать - будет здорово

я правда намеряно опускаю характеристики по скорости, потому что это значило бы тестирование каждого пункта по паре недель руками у себя

я правда намеряно опускаю характеристики по скорости, потому что это значило бы тестирование каждого пункта по паре недель руками у себя

Спасибо!

@mangoat я б сказал, что если хочется cassadnra-based - смотри в сторону metrictank, правда он может быть еще сыроват

мне самому интересно было бы потыкать m3db

Мне очень НЕ хочется Явы

TimescaleDB, SiriDB на бумаге выглядят хорошо

Сцилла?

Мне очень НЕ хочется Явы

metrictank, m3db - golang

Сцилла?

это кассандра на сях

точнее на плюсах

раньше была нестабильной, но я давно за проектом не следил

В общем я бы потыкал: m3db, metrictank, timescaledb, siridb, clickhouse - что-то из этого списка, оно на мой вкус кажется перспективнее

или взял бы go-carbon если нужно прямо ща и тэги не нужны

Тэги нужны

А Clustering в табличке это Scalability ?

А Clustering в табличке это Scalability ?

Встроенные механизмы масштабирования какие либо

Репликация, шардирование

Лучше чтоб все

У всего поверх Кассандры оно есть для стораджа

Но не факт что для того что принимает данные

Тэги нужны

Тогда хреново тебе

Да дадно, очередной челлендж

Да дадно, очередной челлендж

Просто хороших стораджей с тегами я не знаю

И даже сносных

Именно чтение обычно большая проблема

раньше была нестабильной, но я давно за проектом не следил

Оно и щас не стабильно, да и касандра я б не сказал что стабильна

Постоянно нетти какое то дерьмо подсовывает

Постоянно нетти какое то дерьмо подсовывает

что такое "нетти" ?

netty

netty

а какое отношение этот фреймворк имеет к Casandra ?

я без понятия о чем вы говорите, но возможно такое https://github.com/datastax/java-driver/blob/3.x/pom.xml#L54

я бы даже сказал https://github.com/apache/cassandra/blob/trunk/src/java/org/apache/cassandra/transport/Server.java#L33

Ну, Кассандра оверолл стабильна, особенно 2.х или 3.0.х, если осторожно. На сцилле я б ничего критичного строить не стал, а поэкспериментировать можно. Другое дело что для timeseries почти везде нужен TWCS, а его в сцилле вроде как нет.

https://www.pythian.com/blog/cassandra-version-production/

Статье хоть и год, но тем не менее

Ну, Кассандра оверолл стабильна, особенно 2.х или 3.0.х, если осторожно. На сцилле я б ничего критичного строить не стал, а поэкспериментировать можно. Другое дело что для timeseries почти везде нужен TWCS, а его в сцилле вроде как нет.

да, обещают в 2.1 только, то есть где-то в 2018

да, обещают в 2.1 только, то есть где-то в 2018

зато сцилла на С, а это большой плюс, а кассандра вообще странная барышня

зато сцилла на С, а это большой плюс, а кассандра вообще странная барышня

Нестабильное нефункциональное нечто не может иметь плюсов

Нестабильное нефункциональное нечто не может иметь плюсов

кассандра тоже не ахти, я столько читал про настройки и тп, а оказалось на них посрать, купи ssd на 1400 чтение и всё, и на дефолте запускай, смысла менять 0

кассандра тоже не ахти, я столько читал про настройки и тп, а оказалось на них посрать, купи ssd на 1400 чтение и всё, и на дефолте запускай, смысла менять 0

У вас фуллскан

У вас фуллскан

ну сейчас у меня 6 нод делают на кассандра стресс 160, наши нагрузку по 90к в сек, при назгрузке в 4 плеера, больше уже в сеть упираемся, ибо сейчас размер большой у пакета

ну сейчас у меня 6 нод делают на кассандра стресс 160, наши нагрузку по 90к в сек, при назгрузке в 4 плеера, больше уже в сеть упираемся, ибо сейчас размер большой у пакета

Отключи durable writes, just for fun ;)

Нестабильное нефункциональное нечто не может иметь плюсов

Scylla DB написана на С++14 а не на Си, без единого гвозд^W голого поинтера. Я изучал исходники Scylla и Seastar, если что.

Scylla DB написана на С++14 а не на Си, без единого гвозд^W голого поинтера. Я изучал исходники Scylla и Seastar, если что.

я по этому поводу с хрычом уже не спорю )

https://github.com/prometheus/alertmanager/releases/tag/v0.6.2

Scylla DB написана на С++14 а не на Си, без единого гвозд^W голого поинтера. Я изучал исходники Scylla и Seastar, если что.

сигфол рожают не только "голые" указатели, к сожалению

Ну, Кассандра оверолл стабильна, особенно 2.х или 3.0.х, если осторожно. На сцилле я б ничего критичного строить не стал, а поэкспериментировать можно. Другое дело что для timeseries почти везде нужен TWCS, а его в сцилле вроде как нет.

как то это не по "блидингэджовому" сидеть на 3.0.х ветке ) мы вот на 3.10

точнее не "мы вот" а мы пытаемся и пока огребаем то там то сям

проказники

нетерпеливые

сигфол рожают не только "голые" указатели, к сожалению

В современном С++ получить SEGFAULT не проще чем в джаве NullReferenceException (по факту, последнее случается чаще).

prometheus/prometheus: 1.5.3 / 2017-05-11 was tagged

prometheus/prometheus: 1.6.2 / 2017-05-11 was tagged

народ, а поделитесь правилом для alertmanager для свободного места на диске?

есть правило вида (node_filesystem_size-node_filesystem_free)/node_filesystem_size*100 но оно почему то не совпадает с выводом df

ERROR: S client not available

а существует вообще какой-то репозиторий правил для прометея, чтобы под тот же node exporter все веши не писать с нуля самому ?

не видел таких, максимум люди делятся в своих гитхабах

не совпадает с df потому что надо использовать node_filesystem_avail а не free

не совпадает с df потому что надо использовать node_filesystem_avail а не free

интересно, но с avail теперь обманывает в большую сторону

IF 100 *(1 - (node_filesystem_avail / node_filesystem_size) ) > 80

все равно врет, точнее не совпадат выводы

где-то +2%, где-то +4% эта конструкция показывает

все равно врет, точнее не совпадат выводы

устрой краш тест, попробуй забить весь диск)

устрой краш тест, попробуй забить весь диск)

можно конечно, но чет я надеялся что это известная тема )

а есть решение типа statsd_exporter для накопления счётчиков и хранения гауджей, но с возможностью использовать семантику прометея, а не точечную нотацию statsd? и если нет, то почему, интересно

Добрый день! помоги плиз с метриками от прометея, у меня приложение отдает state{host="9b83b37f3ebc",service="wint"} 1

Получаю ошибку text format parsing error in line 1: unexpected end of input stream

то есть обращаюсь я на хост server:5000/health, получаю метрики

не пробовал метрику называть my_new_metric_state ?

то есть state поменять на my_new_metric_state?

ааа понял

Добрый день! помоги плиз с метриками от прометея, у меня приложение отдает state{host="9b83b37f3ebc",service="wint"} 1

Либа прометея?

да

У любой либы пример есть, запускал?

Text format details The protocol is line-oriented. A line-feed character (\n) separates lines. The last line must end with a line-feed character. Empty lines are ignored.

но если либа нативная то оно по дефолту использует Protocol buffer

то есть state поменять на my_new_metric_state?

там ещё начиная с какой-то версии прометей требует #HELP и #TYPE указывать, забыл номер версии.

# HELP my_new_metric_state Takoe-to opisanie # TYPE my_new_metric_state gauge

то есть обращаюсь я на хост server:5000/health, получаю метрики

попробуй чтобы приложение отдавало ещё HELP/TYPE если \n не поможет.

тут всё написано про форматы: https://prometheus.io/docs/instrumenting/exposition_formats/

при использовании оф. библиотеки о форматах париться не нужно

и ещё нужно учесть что в самом прометее не сразу метрика начинает отдаваться на graph, надо выждать минут 10-15.

и ещё нужно учесть что в самом прометее не сразу метрика начинает отдаваться на graph, надо выждать минут 10-15.

Ээ, у меня сразу показывается, чяднт?

Ээ, у меня сразу показывается, чяднт?

у меня такое было на прометее (правда, месяца 3-4 назад, до обновления) и я понял что не надо спешить :) наверное это ещё зависит от кол-ва метрик.

Text format details The protocol is line-oriented. A line-feed character (\n) separates lines. The last line must end with a line-feed character. Empty lines are ignored.

Alexander Orlovskiy - Спасибо Вам большое!