@metrics_ru

Страница 84 из 681
Vladimir
03.02.2017
12:34:45
желательно мегабыстрая
Графит достаточно быстр :)

Если с ним покопаться

Magistr
03.02.2017
12:35:09
Графит достаточно быстр :)
это а зиппер стек уже юзабелен ?

Vladimir
03.02.2017
12:35:20
Google
Vladimir
03.02.2017
12:36:13
это а зиппер стек уже юзабелен ?
В декабре автору го-карбона законтрибьютили поддержку нашего хозяйства

Magistr
03.02.2017
12:36:14
а то я счас тот твой билд скрипт под центось допиливаю, и инит скрипты пишу ))

Vladimir
03.02.2017
12:36:30
С зиппером беда в том что это всё тот же виспер

Magistr
03.02.2017
12:36:58
ну вот да

Vladimir
03.02.2017
12:37:02
Любит ссд

Magistr
03.02.2017
12:37:17
а церес на го некому написать ?

Vladimir
03.02.2017
12:37:21
А тот мой скрипт это карбон стандартный на pypy

а церес на го некому написать ?
Кажется что смысла нет

Vladimir
03.02.2017
12:38:17
кх лучше ?
Если менять хранилище, то уж чтоб тэги не на костылях были

Magistr
03.02.2017
12:38:25
))

Google
Vladimir
03.02.2017
12:38:51
Ну и да, кх по производительности чисто записи лучше чем церес и виспер и вероятно лучше чем прометей

Хотя они слегка под разное

Алексей
03.02.2017
12:38:59
выглядит будто можн ов кликхаус просто сложвитьвсе теги рядом с данными и будет типа хорошо

Vladimir
03.02.2017
12:39:30
выглядит будто можн ов кликхаус просто сложвитьвсе теги рядом с данными и будет типа хорошо
Минус в том что не так легко добавлять тэги так чтоб незаметно

Но ваще да

Чуваки из мэил.ру сделали уже простую реализацию тэгов

Алексей
03.02.2017
12:40:09
берешь 100500 тегов лепишь и на лету при получении данных синкаешь схему и теги

Vladimir
03.02.2017
12:40:11
Под себя

Алексей
03.02.2017
12:40:37
можно даже протокол отсавить как у инфлюксе

он довольно простой

я так понимаю основаня проблема будет в том что надо как то налету делать альтер

@dvolodin

Vladimir
03.02.2017
12:41:43
Сейчас тем более в кх появились нуллы

Pablo
03.02.2017
12:42:09
а чо не тарантул то например

Vladimir
03.02.2017
12:42:21
Алексей
03.02.2017
12:42:29
тоесть писатели должны не только писать но и поддерживать в голове атуальную схему и синхрить ее между собой.

если их много

Vladimir
03.02.2017
12:42:35
И его структура не катит под тайм сириес

Pablo
03.02.2017
12:42:53
"синхрить между собой" - это всё. приехали.

Google
Алексей
03.02.2017
12:43:03
быть может использовать на эту тему какое общее хранилище схемы ? и данные тчо бы в писталеи поступали через что нить типа очереди

Pablo
03.02.2017
12:43:33
*кхе-кхе*kafka*кхе-кхе*

Алексей
03.02.2017
12:43:47
ну у нас nsq есть.

тоже очередь вполне

но как заставить их иметь общее понимание схемы это вопрос

Vladimir
03.02.2017
12:44:22
У нас в графите сейчас тэги на кафке

Алексей
03.02.2017
12:44:37
эта как ?

Pablo
03.02.2017
12:44:41
Whaaaaaat?

Vladimir
03.02.2017
12:44:42
Есть скрипт который берет графитный поток

Доставка тэгов

На кафке

В отдельную штуку

Vladimir
03.02.2017
12:45:07
Которая строит индекс уже и ищет

Неправильно выразилчя

Pablo
03.02.2017
12:45:26
ищет и что возвращает?

Алексей
03.02.2017
12:45:28
@Civiloid хочу от тя полуторо часовую лекцию про эту схему

Vladimir
03.02.2017
12:45:33
Скрипт берет поток имен метрик и приклеивает тэги

Алексей
03.02.2017
12:45:46
а криетрии приклейки какие ?

Vladimir
03.02.2017
12:45:48
Если повезёт то видео не пролюбят

Google
Pablo
03.02.2017
12:46:10
запиши на телефон)

Vladimir
03.02.2017
12:46:14
а криетрии приклейки какие ?
Там все через задницу

Алексей
03.02.2017
12:46:16
вот да

Vladimir
03.02.2017
12:46:18
Если кратко

Алексей
03.02.2017
12:46:22
Pablo
03.02.2017
12:46:28
?

Vladimir
03.02.2017
12:46:31
это понятно.
Есть у нас ряд сервисов

Алексей
03.02.2017
12:46:32
но какая имено задница интересно

Vladimir
03.02.2017
12:46:50
И скрипт ходит раз в энное время в эти сервисы и собирает инфу о машинке

Admin
ERROR: S client not available

Vladimir
03.02.2017
12:46:51
Роли

Ос

Железо

Статус

Дц

И пр

И делает несколько jsonов

Которые через кафку идут на фронтэнды

В зиппером есть хак

Если ему даешь в find или render таргеты вида virt.v1.*.tag:value.tag:value.text-match: substring

Google
Алексей
03.02.2017
12:48:31
ну тоесть теги из внешней системы .

Vladimir
03.02.2017
12:48:47
То он отдаст это в carbonsearch

А тот вернет реальный список метрик что сейчас на это матчится

Я думал еще историю и персистентность на базе кх к этому делать

Pablo
03.02.2017
12:49:39
а реальные как выглядат?

Vladimir
03.02.2017
12:51:05
а реальные как выглядат?
virt.V1.*.Role:graphiteRelay.status:live.dc:ams.text-match:metricsRecived

Виталий
03.02.2017
12:52:13
https://github.com/influxdata/telegraf/issues/2104 давно не обновлялся. Эта штука напрягала,поэтому забросил временно. На сл. неделе проверю что и как.

Vladimir
03.02.2017
12:52:16
Пока лучше чем ничего

Алексей
03.02.2017
12:52:56
тогда понятно. такая схема ясна. но мне кажется ужасна. ибо пролюблена историчность данных

Алексей
03.02.2017
12:53:15
ибо тачила может переехать из стейдж среды в продукт

ну или еще чего там такого

Vladimir
03.02.2017
12:53:39
ибо тачила может переехать из стейдж среды в продукт
У нас это обязательно через сдачу железа и получение нового

У нас к физ машинам подход как к виртуалкам

Алексей
03.02.2017
12:53:59
ну это административное решение технической проблемы да

Vladimir
03.02.2017
12:54:04
Не нужна тут - сдал

Нужна новая - взял из пула

При сдаче все к чертям форматиться, биос сбрасывается

Алексей
03.02.2017
12:54:43
всё праивльно говоришь да.

Vladimir
03.02.2017
12:54:52
Но историю тоже хочется, да

Алексей
03.02.2017
12:55:04
видимо в кликхаусе нужен типа alter on insert :)

Страница 84 из 681