Алексей
22.08.2016
16:58:59
ты не ощутишь грабли пок аданных не будет нормлаьно
5-9 гигов в день и начинается...
а еще все плохо с памятью.
просто абзац как плохо.
Google
Алексей
22.08.2016
17:00:22
а еще плохо с временем старта.
и с тем фактом что он может не подняться.
это была последняя капля
Semyon
22.08.2016
17:03:03
я пока только заметил, что оно CPU жрёт
но в пределах приличий
Алексей
22.08.2016
17:09:25
долго он у тя ?
и каков поток метрик ?
Semyon
22.08.2016
17:15:07
Месяц где-то
Поток очень маленький, 150/с
ptchol
22.08.2016
17:15:20
=)
Semyon
22.08.2016
17:15:34
Я ж на него смотрю
Алексей
22.08.2016
17:19:14
вот пока смотришь все ок.
данных пульни.
Google
Алексей
22.08.2016
17:19:31
и с нагрузкой он не справится
хотя он может и месяц отработать норм
и даже хер с ним два месяца
Vladimir
22.08.2016
18:43:26
и увлеклись подходом аля metrics 2.0 настолько, что убили производительность. У них их сторадж на mixed read/write менее вменяемо себя ведет чем питонячий графит
но пока потоки порядка 30-40к в секунду на машину он ок (если делать бэкапы и иметь реплику)
Semyon
22.08.2016
18:45:35
30-40k/sec
мне кажется пока я до таких объёмов доеду, они уже всё починят
Vladimir
22.08.2016
18:46:04
ну все так думают, да
первые год-два
ты зря думаешь что они уперлись в эту производительность только недавно ) у них оно в таком районе держится начиная с 0.8
т.е. примерно 2 года как
2 года назад было хуже с чтением, если mixed делать то оно загибалось, это починили с трудом
Vladimir
23.08.2016
06:44:35
Vladimir
23.08.2016
06:52:48
И толку то если даже одна нода хуже графита
Vladimir
23.08.2016
06:54:03
Vladimir
23.08.2016
06:55:07
Какой?
ptchol
23.08.2016
06:55:11
типа ? )
Google
Dmitry
23.08.2016
08:41:54
у графита один фатальный недостаток
но решаемый :)
Vladimir
23.08.2016
08:44:26
какой?
Ivan
23.08.2016
08:56:16
Dmitry
23.08.2016
08:59:29
рендерер
то есть - кривое говно на, внимание, джанге
сами по себе carbon и whisper терпимы. но это ...
поэтому первое что я сделал году в 2012, выпилил нахрен эту дрянь. сделав себе drop in replacement, чтобы само лазало в whisper и по тем же урлам (чтобы стандартные морды работали) рендерило
потом, кстати, чоткие пацаны сделали то, что мне лень было доделывать :))) http://graphite-api.readthedocs.io/en/latest/
Paul
23.08.2016
09:11:45
Dmitry
23.08.2016
09:12:14
проблема графита не в сторадже
Phil
23.08.2016
09:12:39
Paul
23.08.2016
09:15:54
Phil
23.08.2016
09:16:30
Dmitry
23.08.2016
09:17:01
держать в памяти - наука невелика
Paul
23.08.2016
09:17:31
Phil
23.08.2016
09:19:43
мля, Чистяков выпилился
Vladimir
23.08.2016
09:21:09
Какой?
16 метров на каунтер - а кол-во каунтеров стало стремительно расти в сторону 1/2ляма
Vladimir
23.08.2016
09:22:20
Google
Vladimir
23.08.2016
09:22:26
*на точку
Paul
23.08.2016
09:23:29
может ты просто не настроил?
в этом-то и проблема. Изначально он даже 1/10 нужных мне метрик держать не мог. После танцев с настройками удалось поднять нагрузку, но диск из записи просто не выходил
а прометей из коробки поглощает в 10 раз больше метрик и при этом почти не трогает диск. Чудеса.
lastsky
23.08.2016
09:25:38
http://www.slideshare.net/alexclear/my-talk-on-monitoring-systems-at-rootconf-2016 всё разжевано, кстати
Paul
23.08.2016
09:26:03
я охотно допускаю, что я не умею готовить графит, но я так и не смог найти материал, где об этом более-менее внятно рассказано
lastsky
23.08.2016
09:27:43
да там есть “но почему?”, зачем видео
Semyon
23.08.2016
09:29:22
Vladimir
23.08.2016
09:30:29
Алексей
23.08.2016
09:30:33
чистяков потом на луге сказал историческую вещь.
он не умеет якобы читать доку
и на настроил один параметр
lastsky
23.08.2016
09:30:58
я вот что хотел спросить. кто-нибудь дружил grafana с ldap? грабли, подводные камни в ldap.toml?
Алексей
23.08.2016
09:31:11
а именно iops от диска
и графит все затрахал
Paul
23.08.2016
09:33:48
и графит все затрахал
я весь интернет перерыл в поисках священного знания о том, как настроить шепот так, чтобы он iops не жрал. Все рекомендации сводились к снижению watermark, отключению синхронной записи и ретеншном подлиннее
Magistr
23.08.2016
09:34:07
а можно на церес жить
Алексей
23.08.2016
09:34:12
а там был какой то один параметр всего
Dmitry
23.08.2016
09:34:12
Google
lastsky
23.08.2016
09:34:21
Dmitry
23.08.2016
09:34:39
thanks
надеюсь у тебя нормальный ldap, конечно, а не Active Directory, господи прости :)
Алексей
23.08.2016
09:35:32
@demeliorator
lastsky
23.08.2016
09:36:00
Phil
23.08.2016
09:38:23
Шта?
хм... глючит мой клиент
Semyon
23.08.2016
09:39:22
Я очень удивился
lastsky
23.08.2016
09:39:43
thanks. я тож удивиться хочу.
Semyon
23.08.2016
09:40:06
У меня AD, кстати
Magistr
23.08.2016
09:40:38
но это старый яндексовский графит с их патчами
Vladimir
23.08.2016
09:44:32
Magistr
23.08.2016
09:44:50
ну да с pypy уже
Vladimir
23.08.2016
09:47:42
и в принципе оно может больше чем 1.5М в минуту )
Magistr
23.08.2016
09:49:19
ну диски и иопсы да )
Paul
23.08.2016
10:29:33