
Vladimir
31.08.2016
22:46:25
я про их протокол "влоб"
я не знаю что есть surf

ptchol
31.08.2016
22:46:45
serf )

Vladimir
31.08.2016
22:46:49
они при реализации влоб предлагают хранить массив NxN

Google

ptchol
31.08.2016
22:46:49
хашимотинка
ну это влоооб
слушай, там студенческая идея

Vladimir
31.08.2016
22:47:07
интересно
ну короче надо подумать
влоб не работает
но может можно идеи потырить
p2p мониторинг это вообще идея интересная

ptchol
31.08.2016
22:47:43
serf же использует госсип для дискавери тоже
и чо то по тестам они там на 1к хостов рассылают на 99% за 3 сек эвенты
вполне ок циферка

Paul
31.08.2016
22:48:15

Vladimir
31.08.2016
22:48:27

Google

ptchol
31.08.2016
22:48:31
и фейлурт детекшен там есть тож, врядли они хранят всю стеку в себе

Vladimir
31.08.2016
22:48:40
не выпустили потому что так и не смогли отпилить от внутренних систем так чтобы оно осталось юзабельным
на питоне
с каким-то алгоритмом арбитража
3 мастера
чеки шлются на каждый
потом голосование
и по результатам алерт-неалерт
точнее 3-5-7-9...

Paul
31.08.2016
22:49:42
я не настолько погружен в тему
увы

Vladimir
31.08.2016
22:49:44
написано все на питоне было

Dmitriy
01.09.2016
05:18:53
хорошо вас почитать утречком, пока завтракаешь

Magistr
01.09.2016
05:34:24
алсо sensu умеет распределенность

Phil
01.09.2016
06:23:59
А напомните мне, что такое распределенный анализ метрик

Dmitriy
01.09.2016
06:34:50
sensu вообще лапочка

Phil
01.09.2016
06:44:41
Чем?

Dmitriy
01.09.2016
06:45:29
масштабируется, куча плагинов, система подписок
апишечка опять же, просто автоматизировать

Google

Dmitriy
01.09.2016
06:49:12
мне там очень нравится фича с подписками.
ты на сервере определяешь, что вот есть подписка "вебсервер", для неё есть вот эти 25 проверок, из которых 10 - это съем метрик и пересылка их в графит
на клиенте ты просто говоришь сервер очередей - вон там, твоя подписка - "вебсервер" и "общее"
дальше магия и всё работает
конфигурится файликами в json, накидал их в определенную папочку - оно всё там схлопнулось в один - и заработало. очень хорошо поддается шаблонизации
один минус - на руби написано

Maxim
01.09.2016
06:53:05
а в чем минус?

Dmitriy
01.09.2016
06:58:19
в руби

Maxim
01.09.2016
06:58:41
мде
haters gonna hate

Dmitry
01.09.2016
07:24:55
Я вот тоже так думал
Поставил гитлаб
Оно съело все два гига рамы
На вмке

Semyon
01.09.2016
07:25:42
ну два гига рамы, камон

Dmitry
01.09.2016
07:25:47
Это так руби работает?

Semyon
01.09.2016
07:25:48
я бы их из принципа съел
у меня он на 4 работал полтора года на 150 разработчиков
на 200 начал не влезать, дали ему 8

Dmitry
01.09.2016
07:26:41
Ну четыре еще ладно
Надеюсь что сиай там не начнет жрать

Google

Semyon
01.09.2016
07:27:16
ну ты раннеров на том же хосте не запускай и не будет

Dmitry
01.09.2016
07:27:33
Ох. Даже так

Ivan
01.09.2016
07:27:37

Semyon
01.09.2016
07:27:46
там не жалко
на самом деле раннеры очень мало памяти жрут сами по себе
смотря как у тебя билд устроен

Dmitry
01.09.2016
07:28:15
Дженкинс думаю будет жрать один черт больше

Vladimir
01.09.2016
07:52:00

Nick
01.09.2016
12:42:08
Посоветуйте, нужно собирать и хранить очень долго метрики с сотен вдс, чем это лучше собирать и в чем хранить? И нужно иметь возможность относительно быстро посмотреть графики за заданные промежутки времени

Magistr
01.09.2016
12:43:17

Nick
01.09.2016
12:43:34
не уверен что понимаю вопрос
смотреть нужно каждую отдельную вдс. Редко. Но когда смотреть - это дожно быть относительно быстро
шаг снятия метрик - каждую минуту или каждые пять

Magistr
01.09.2016
12:45:14
вопрос в том что метрики допустим снимаються раз в минуту и хранятся так неделю, затем они усредняються до 10 минут и с такой точностью уже месяц и тд

Nick
01.09.2016
12:45:39
а, ну так можно, но настраиваемо.

Magistr
01.09.2016
12:45:51
Отказоустойчивость хранилища нужна ?

Nick
01.09.2016
12:45:55
скорее всего мне нужны детальные данные по крайней мере за последние три месяца
скорее нет - эта задача решается внешними средствами и в целом потеря даже всех данных некритична

Alex
01.09.2016
12:47:47

Nick
01.09.2016
12:48:30
а коллектд - выбрать любую быструю альтернативу, когда возникнут проблемы с маштабами, или в нем это уже пофиксили, или есть рекомендованные альтернативы?

Google

Magistr
01.09.2016
12:49:17
diamond на питоне, или вариант diamond на го

Nick
01.09.2016
12:49:37
и я вот графит вроде трогал как веб интерфейс, а можно к нему будет сходить своими скриптами и получить набор данных примерно так же, как я бы брал их из мускля?
(сейчас у нас всё в мускле и самописное, но масштабы растут и надо сокращать количество подпорок)

Dmitry
01.09.2016
12:50:59

Алексей
01.09.2016
12:51:08
ник, да. и выбрасывай уже свою поделку на муське...

Magistr
01.09.2016
12:51:42
графит это carbon-c-relay + 16x carbon-writer (daemon писалка в хранилку ceres или whisper) + graphite-api (читалка рендерер) + grafana (уже сама морда) + cabot (опциональная алертилка)
я вот такое поднимал на 200 нод
а ну diamond как собиралка метрик

Nick
01.09.2016
12:54:15
дальше затраты на её оптимизацию сравнимы с переходом на что-то другое

Алексей
01.09.2016
12:54:47
в пределах сотни источников метрик хорошо даже rrd

Nick
01.09.2016
12:54:57
нет, жрет проц. много
а еще я уже много лет не могу найти как у него в новых версиях отключить сглаживание у картинок

Phil
01.09.2016
12:55:48

Nick
01.09.2016
12:56:03
в рассылках все сходятся во мнении, что никак, а он в итоге рисует мне моснтроподобные png на 200+ килобайт с убогим сглаживанием, вместо прелести на 6кб как было раньше

Алексей
01.09.2016
12:56:05
инфлюкс будет жрать.
пром не очень будет жрать

Phil
01.09.2016
12:56:32

Алексей
01.09.2016
12:56:38
но переаграгация данных всегда будет жрать
но на сколько я помню вариант ника не делает вобоще переграгацию

Phil
01.09.2016
12:57:04