вот скажите мне куда инфлюксу память ?

он что с ней делает вообще ?

тупо жрет ?

ну и таки упал.

[write] 2016/08/24 11:39:45 write failed for shard 254: [shard 254] error opening memory map for file /var/lib/influxdb/data/noc/d90/254/000000081-000000003.tsm: indirectIndex: not enough data for max time

ну и всё. хана. не поднимается опять

он жрет когда не может писать насколько я помню

в смысле "ой, чот не записавыается так быстро, покоплю пока в памяти"

так норм ?

ну вот кажется что это насыщение у него

преодолел насыщение и стал его забивать

вот он и скопытился

нее

он при этом еще сгенерировал ошибку

закинул им на медитацию https://github.com/influxdata/influxdb/issues/7202

[write] 2016/08/24 11:39:45 write failed for shard 254: [shard 254] error opening memory map for file /var/lib/influxdb/data/noc/d90/254/000000081-000000003.tsm: indirectIndex: not enough data for max time

хм... а примерно что она может значить?

https://github.com/influxdata/influxdb/blob/65536676a46c720deed6b4afe8d6b9ef13431e65/tsdb/engine/tsm1/reader.go#L891

никаких идей

Меня слово shard настораживает

инфлюкс все шардами пишет

А

ну что... втянул... очередь разгреб полностью всего с 3 вылетами.

более привычный термин ИМХО bucket

или там схема как в риаке?

ну что... втянул... очередь разгреб полностью всего с 3 вылетами.

Работает?

более привычный термин ИМХО bucket

не уверен. у нас именно очередь на nsq. vмы в нее метрики швыряем. а дальше писатель складывает в базу на примелимоцй для базы скорости.

у меня получилось что в пике он писал 30к в секунду.

а привычный поток 5к

при том что писатели могли отдавать куда больше... но он тупил и не хотел...

а какое железо?

чтоб понимать

ibm hs22, 96gb mem, дисковая полка

за полку конкретную модель не скажу

а это по цпу что?

а то я ibm по памяти не знаю

X5675

одын?

не первой свежести...

два

а, ок

но на него нагрузка и не ложилась.

появлюсь возле компа по нормальному буду дальше смотреть чег ои куда.

вобще честно говоря не очень понятно во что он упирался.

проц под 70% каждый был. память даже free была немножко.

по сети многовато до 300к pps

ну и по iops многовато... 12к

Всем вновь прибывшим хочу напомнить, что у нас есть традици^W тьфу пропасть... в чатике есть библиотека в разделе "Shared media". Можно поискать по хэштегу book и/или pdf например. Нет книжки? Ищи и читай. Есть книжка которой нет у нас по теме? Лей её и ставь хэштег book

@demeliorator а можно сюда твой файлик на арт фо мониторинг положить ?

Господа, помогите заполнить ?

https://www.mindmup.com/#m:a1b6bdce704d020134729031f761d42e4b

Господа, помогите заполнить ?

http://www.iamsysadmin.ninja/2014/12/graphite-scaling-and-my-evaluation-of.html к графиту

угу, одно из самых адекватных описаний как поставить и из чего состоит букинговский стек (ну или около букинговский)

да и по обычному стеку замечания ок

хорошо почитаю щас спасибо

хочу понять чего делать со стораджем нам

opentsdb = hbase = минимум 3х данные, зато хорошо когда нужна точность

3x данные это что такое?

тройное хранение ?

да

из-за репликации

скорее есть несколько подходов. Ты можешь хранить только данные, это легко записать, легко прочитать, но сложно строить сами графики (начинают быть нужны какие-то метаданные поверх)

это подход всего вокруг графита в общем

с методаынми вопрос решается легко

второй подход это то что у OpenTSDB, Influx'а и пр. - хранить time-series обогащенные метаданными. Медленее на запись, медленее на чтение, но гибкость есть

плюс у всяких OpenTSDB проще с масштабированием

у графаны есть же templated dashboards и dynamic dashboards

можно пойти по пути какого-нибудь Druid'а - хранить не совсем time series метрики, а скорее эвенты и делать агрегации и пр. по запросам

on demand

с записью там обычно все более-менее, а вот скорость чтения очень сильно зависит от, обычно низкая

у графаны есть же templated dashboards и dynamic dashboards

гибкости все равно не хватит

тебе вот может захотеться получить список хостов в продакшене где заканчивается место

а что такое driud ?

а что такое driud ?

Druid и Clickhouse - базы для real-time аналитики которые можно приспособить под графики всякие

но я б вероятнее взял кликхаус )

про друида первый раз слышу

он банально проще

druid.io

такая вот поделка

красивый интерфейс

а про кликхаус же они еще не выпустили ту часть которая про графит

много мышкотыканья

а про кликхаус же они еще не выпустили ту часть которая про графит

есть уже