мне не нужны алерты. я хочу только аналитику по таймингам из логов.

майминг? майнинг по таймингу?

майминг? майнинг по таймингу?

тайминг да

при этом у меня в стеке уже есть кликхаус и нет ничего явовского

logshash - ява :)

хуже. это рубиява

jruby я же даже сказал

время старта контейнера в районе 20 секунд. сам контейнер 800 мегов.

даже кофе непопить

я сначала собрал схему полностью на mtail + prom. она вполне жизнеспособна

а что за схема такая? mtail

а что за схема такая? mtail

https://github.com/google/mtail

Список релизов у них просто божественный :)

у них будто бы не было еще релизов

но у меня эта штука тарабанит только в путь

так и не было да

Там было целых 14 rc релизов! Правда, в github отмеченных как нормальные.

публиковать метрики через балансировщик. Или впн, да

а открыть доступ к ним через iptables?

а открыть доступ к ним через iptables?

зависит от вашей конфигурации. У кого-то воркеры не имеют публичных адресов вовсе

зависит от вашей конфигурации. У кого-то воркеры не имеют публичных адресов вовсе

понял

господа, нашел такую вот пипятку. https://www.altinity.com/blog/2017/12/18/logstash-with-clickhouse

О!

О!

ы ?

А есть чатик по golang в телеге?

Есть

слак точно есть

@gogolang

Есть тут умные? подскажите, можно ли в одну переменную условно uint64 запихнуть два значения uint32 через сдвиг, а потом их прочитать?

язык?

golang, но для этой задачи по идее не важно

Разрешаю

ну если вы пишите и вы же читаете, то в чём техническая сложность?

Какое отношение к метрикам?

ну я считаю метрики в памяти и хочу в качестве клдюча метрики использовать гне стрингу, а чиселку, но ключ у меня составной

хочу из двух ключей uint32 сделать один uint64, но потом этот ключ прочитать и разедить обратно на uint32

Чатикоппрграммистов и в правду подойдёт лучше.

Есть тут умные? подскажите, можно ли в одну переменную условно uint64 запихнуть два значения uint32 через сдвиг, а потом их прочитать?

через механизмы битовых масок запросто

часть в старший 32 часть в младший 32

при этом у меня в стеке уже есть кликхаус и нет ничего явовского

а зукипер?

Нет

Шардирование на источнике

Шардирование на источнике

Репликация же

а я смешал коней и людей

Репликация же

он про то что у него это разные кликхаусы а не кляйстер

Но для этой задачи ха вообще не требуется

ну меня она уже раза 4 от ручных действий "спасала"

точнее от бОльшего числа действий

благодаря компании самсунг пришлось протестировать на устойчивость много чего

и да, я шардирование сделал на источнике (распихиванием метрик джамп хешем по топикам кафки) и вычиткой этих топиков на нодах КХ + они к этому еще и с репликацией, что удивительно одно с другим не кофликтует

а почему логсташ а не флюентд?

Кликхауз ктото у себя в проде кроме яндекса использует на более 1к спрверов?

Не у многих столько данных есть

самая большая инсталляция сейчас вроде у CloudFlare, там че-то 2,5к или 1,5к железок или что-то вроде того

Ок, а сколько средние показатели по миру? 100-200

Ок, а сколько средние показатели по миру? 100-200

А что такое среднее по миру?

Попытка найти тут реальных пользователей этого продукта

Попытка найти тут реальных пользователей этого продукта

Выше сказали ж

Пара человек отозвалась

Не среднее, а медиану

А можно и перцентиль

ERROR: S client not available

по кликхаузу есть отдельный канал же

И еще такой)) https://t.me/milovidov_perls

по кликхаузу есть отдельный канал же

Я пока не понимаю к чему клонит @O01010000S

Под задачи мониторинга таки лучше сюда

Но вопроса не было пока. Только странная попытка узнать некое среднее колличество кликхаус серверов на весь мир

Интересует процент увеличения и быстроты локализации проблем с помощью этого инструмента

медиана наверно?))

В яндексе он с ректейблс интегрирован, и накладывает е2е на топологию сети

похоже на диалоги нейросети под веществами

Опять тест Тьюринга не прошел?

Есть сомнение в нужности этого инструмента, хочется узнать реальные юзерстори

Есть сомнение в нужности этого инструмента, хочется узнать реальные юзерстори

Ну это самая шустрая опенсорс база для аналитики. И сноснач как k-v append mostly сторадж

Если твой кейс не в этом - он не для тебя

А дальше твои проблемы построить сервис поверх

И еще такой)) https://t.me/milovidov_perls

/report

wft?

/report

А по моему это огонь)

И еще такой)) https://t.me/milovidov_perls

Огонь!!

но мало

И еще такой)) https://t.me/milovidov_perls

вы еще перлы Гугеля начните собирать, чесслово

/report

Лол

wft?

А нечего тут)

Кстати, если кто-то пользуется Testinfra и nagios, то у меня для него хорошие новости, у testinfra есть ключик --nagios для вывода результата в виде вывода от плагина nagios TESTINFRA OK - 2 passed, 0 failed, 0 skipped in 2.30 seconds

у goss тоже. и goss недавно немножко ожил

Кстати, если кто-то пользуется Testinfra и nagios, то у меня для него хорошие новости, у testinfra есть ключик --nagios для вывода результата в виде вывода от плагина nagios TESTINFRA OK - 2 passed, 0 failed, 0 skipped in 2.30 seconds

а что это за инструмент

вы еще перлы Гугеля начните собирать, чесслово

У вас аналогии сломаны слегка

а что это за инструмент

Тестирование инфраструктуры