@metrics_ru

Страница 5 из 681
Алексей
22.08.2016
16:58:59
ты не ощутишь грабли пок аданных не будет нормлаьно

5-9 гигов в день и начинается...

а еще все плохо с памятью.

просто абзац как плохо.

Google
Алексей
22.08.2016
17:00:22
а еще плохо с временем старта.

и с тем фактом что он может не подняться.

это была последняя капля

Semyon
22.08.2016
17:03:03
я пока только заметил, что оно CPU жрёт

но в пределах приличий

Алексей
22.08.2016
17:09:25
долго он у тя ?

и каков поток метрик ?

Semyon
22.08.2016
17:15:07
Месяц где-то

Поток очень маленький, 150/с

ptchol
22.08.2016
17:15:20
=)

Semyon
22.08.2016
17:15:34
Я ж на него смотрю

Алексей
22.08.2016
17:19:14
вот пока смотришь все ок.

данных пульни.

Google
Алексей
22.08.2016
17:19:31
и с нагрузкой он не справится

хотя он может и месяц отработать норм

и даже хер с ним два месяца

Vladimir
22.08.2016
18:43:26
вообще мне инфлюкс нравится (not gay)
проблема инфлюкса в том что там до недавнего времени разработчики творили непотребства со стораджем в особо извращенной форме

и увлеклись подходом аля metrics 2.0 настолько, что убили производительность. У них их сторадж на mixed read/write менее вменяемо себя ведет чем питонячий графит

но пока потоки порядка 30-40к в секунду на машину он ок (если делать бэкапы и иметь реплику)

Semyon
22.08.2016
18:45:35
30-40k/sec

мне кажется пока я до таких объёмов доеду, они уже всё починят

Vladimir
22.08.2016
18:46:04
ну все так думают, да

первые год-два

ты зря думаешь что они уперлись в эту производительность только недавно ) у них оно в таком районе держится начиная с 0.8

т.е. примерно 2 года как

2 года назад было хуже с чтением, если mixed делать то оно загибалось, это починили с трудом

Vladimir
23.08.2016
06:44:35
и с нагрузкой он не справится
А у тебя случайно не сингл нода?

Vladimir
23.08.2016
06:52:48
А у тебя случайно не сингл нода?
У инфлюкса ж кластеризация платная, разве нет?

И толку то если даже одна нода хуже графита

Vladimir
23.08.2016
06:54:03
И толку то если даже одна нода хуже графита
Я вот как раз не знаю но собираюсь пробовать

И толку то если даже одна нода хуже графита
А вот с графитом гемор огребал уже

Vladimir
23.08.2016
06:55:07
Какой?

ptchol
23.08.2016
06:55:11
типа ? )

Google
Dmitry
23.08.2016
08:41:54
у графита один фатальный недостаток

но решаемый :)

Vladimir
23.08.2016
08:44:26
какой?

Dmitry
23.08.2016
08:59:29
рендерер

то есть - кривое говно на, внимание, джанге

сами по себе carbon и whisper терпимы. но это ...

поэтому первое что я сделал году в 2012, выпилил нахрен эту дрянь. сделав себе drop in replacement, чтобы само лазало в whisper и по тем же урлам (чтобы стандартные морды работали) рендерило потом, кстати, чоткие пацаны сделали то, что мне лень было доделывать :))) http://graphite-api.readthedocs.io/en/latest/

Paul
23.08.2016
09:11:45
Dmitry
23.08.2016
09:12:14
это whisper-то терпимый?
я не сказал, что он хороший. но он в целом предсказуемый

проблема графита не в сторадже

Phil
23.08.2016
09:12:39
это whisper-то терпимый?
а что не так? у прометеуса думаешь както иначе?

Paul
23.08.2016
09:15:54
а что не так? у прометеуса думаешь както иначе?
ну прометеус, как минимум, в 100 раз быстрее. Это не фигура речи.

Phil
23.08.2016
09:16:30
ну прометеус, как минимум, в 100 раз быстрее. Это не фигура речи.
потому что лн в памяти все держит. что стремно. и таки не 100

Dmitry
23.08.2016
09:17:01
держать в памяти - наука невелика

Paul
23.08.2016
09:17:31
потому что лн в памяти все держит. что стремно. и таки не 100
таки в сто. При в 10 раз меньшей нагрузке на whisper-е у меня диски просто сдохли. При нынешней (в 10 раз больше) нагрузке на прометей - нагрузка на диск порядка 3-5 процентов

Vladimir
23.08.2016
09:21:09
Какой?
16 метров на каунтер - а кол-во каунтеров стало стремительно расти в сторону 1/2ляма

Google
Vladimir
23.08.2016
09:22:26
*на точку

Paul
23.08.2016
09:23:29
может ты просто не настроил?
в этом-то и проблема. Изначально он даже 1/10 нужных мне метрик держать не мог. После танцев с настройками удалось поднять нагрузку, но диск из записи просто не выходил

а прометей из коробки поглощает в 10 раз больше метрик и при этом почти не трогает диск. Чудеса.

lastsky
23.08.2016
09:25:38
http://www.slideshare.net/alexclear/my-talk-on-monitoring-systems-at-rootconf-2016 всё разжевано, кстати

Paul
23.08.2016
09:26:03
я охотно допускаю, что я не умею готовить графит, но я так и не смог найти материал, где об этом более-менее внятно рассказано

lastsky
23.08.2016
09:27:43
да там есть “но почему?”, зачем видео

Semyon
23.08.2016
09:29:22
Vladimir
23.08.2016
09:30:29
да там есть “но почему?”, зачем видео
послушать, вероятно ржачно-с будет

Алексей
23.08.2016
09:30:33
чистяков потом на луге сказал историческую вещь.

он не умеет якобы читать доку

и на настроил один параметр

lastsky
23.08.2016
09:30:58
я вот что хотел спросить. кто-нибудь дружил grafana с ldap? грабли, подводные камни в ldap.toml?

Алексей
23.08.2016
09:31:11
а именно iops от диска

и графит все затрахал

Paul
23.08.2016
09:33:48
и графит все затрахал
я весь интернет перерыл в поисках священного знания о том, как настроить шепот так, чтобы он iops не жрал. Все рекомендации сводились к снижению watermark, отключению синхронной записи и ретеншном подлиннее

Magistr
23.08.2016
09:34:07
а можно на церес жить

Алексей
23.08.2016
09:34:12
а там был какой то один параметр всего

Google
lastsky
23.08.2016
09:34:21
Dmitry
23.08.2016
09:34:39
thanks
надеюсь у тебя нормальный ldap, конечно, а не Active Directory, господи прости :)

Алексей
23.08.2016
09:35:32
@demeliorator

lastsky
23.08.2016
09:36:00
надеюсь у тебя нормальный ldap, конечно, а не Active Directory, господи прости :)
ну… не Acitve Directory, конечно, ну и не совсем нормальный, тесты всё покажут.

Semyon
23.08.2016
09:39:22
Я очень удивился

lastsky
23.08.2016
09:39:43
thanks. я тож удивиться хочу.

Semyon
23.08.2016
09:40:06
У меня AD, кстати

Magistr
23.08.2016
09:40:38
но это старый яндексовский графит с их патчами

Vladimir
23.08.2016
09:44:32
но это старый яндексовский графит с их патчами
ну для single-node варианта наверное единственное усовершествование которое можно сделать это воткнуть pypy там

Magistr
23.08.2016
09:44:50
ну да с pypy уже

Vladimir
23.08.2016
09:47:42
и в принципе оно может больше чем 1.5М в минуту )

Magistr
23.08.2016
09:49:19
ну диски и иопсы да )

Paul
23.08.2016
10:29:33
мы 1.5М метрик в минуту в графит вливали, на стеке carbon-c-relay - 8x carbon-daemon (ceres) + graphite-api
о чем и речь. Там выше пытаются доказать, что whisper - это очень даже и хорошо. А получается, что первое, что надо сделать с графитом - это выкинуть из него, собственно, графит.

Страница 5 из 681