заббикс уже релизнули

заббикс уже релизнули

As in "Аннушка уже разлила масло"?

что это значит?

это значит что если вы хотите хранить TS-data в CH или в ES, то CH выигрывает почти в любом кейсе.

Кто-то использует ES для хранения time-series data

Я нутром чую что ES не катит, но тут хочу понять почему.

As in "Аннушка уже разлила масло"?

ну так там же эластик как бэкенд для TS

это значит что если вы хотите хранить TS-data в CH или в ES, то CH выигрывает почти в любом кейсе.

Почему?

ну так там же эластик как бэкенд для TS

Раньше же MySQL был?

Раньше же MySQL был?

MySQL/Postgres

это значит что если вы хотите хранить TS-data в CH или в ES, то CH выигрывает почти в любом кейсе.

Медленный всос, поянтно. Больше никаких причин не видно на поверхности

Почему?

потому что байт на точку потому что скорость потому что этого достаточно

Ну а как репорты и прочее люди делают? Тут народ жалуется что почти ничего нет для нормальных query. через что-то еще?

Медленный всос, поянтно. Больше никаких причин не видно на поверхности

медленно на всос - про кх?

медленно на всос - про кх?

Наоборот, про ES

а кх ж батчем?

Ну а как репорты и прочее люди делают? Тут народ жалуется что почти ничего нет для нормальных query. через что-то еще?

как как, руками. CH это не специализированная база же. точнее, специализированная, но для другого.

ну пачкой любить инсертить?

как как, руками. CH это не специализированная база же. точнее, специализированная, но для другого.

Ну, соответственно ES это делает проще, нет?)

как как, руками. CH это не специализированная база же. точнее, специализированная, но для другого.

спешл фо анализирунг унд репортирунг

Ну, соответственно ES это делает проще, нет?)

что такое проще? аборигену из австралии будет и там и там тяжко

в том плане, что синтаксисом из коробки.

Но читая тут, понимаю что в KH тоже делается все встроенным синтаксисом нормально.

А есть что-то типа long-running queries?

типа кверя на стрим

я хз. я теоретик )

наверное в кх не будет логнов никогда

@kireevco а какие у ES гарантии и что там со всякими stale reads и пр.?

я про консистентность, доступность и пр.

а зачем она?

@kireevco а какие у ES гарантии и что там со всякими stale reads и пр.?

гарантий тоже мало.

оно не для того

ты говорил про важные данные, а мне кажется гарантии там на первом месте

и там и там мало

и все что их не имеет идет лесом

ты говорил про важные данные, а мне кажется гарантии там на первом месте

ну. спорное утверждение. если рассматривать бд как бд для аналитики то важна скорость. а данные перезальются

ты говорил про важные данные, а мне кажется гарантии там на первом месте

ты щас договоришься до того что надо хранить точки в мускуле

ты щас договоришься до того что надо хранить точки в мускуле

человек пришел с запросом "хранить важные данные"

в сейф

и все что их не имеет идет лесом

Да, разумно. KH, я так понимаю, хорошо в ZK кладет локи, так что может гарантировать, да?

не

@kireevco у КХ четко прописанные гарантии, они впрочем недостаточные для хранения важных данных

ты щас договоришься до того что надо хранить точки в мускуле

cockroach :)

cockroach :)

кокоач.

давай развернем что ли, попробуем туда насрать

давай развернем что ли, попробуем туда насрать

у нас как раз в середине января хакатон)

типа кверя на стрим

Нет это за пределами идеологии как я ее понимаю

Нет это за пределами идеологии как я ее понимаю

ок. тогда нужно ловить данные до попадания типа через kafka

Кх просто не обламается поднять с диска нужные части и пересчитать :)

Ответ от кх в любом случае от 50мс согласно гарантиям. Но правда редко на линейных запросах более 150

ну. спорное утверждение. если рассматривать бд как бд для аналитики то важна скорость. а данные перезальются

Скорость и аналитика!

@Civiloid в ES eventual consitency, так что stale reads возможны в теории, если не читать через роутер.

@kireevco https://aphyr.com/posts/323-call-me-maybe-elasticsearch-1-5-0 увы он более новые не тестил

но фишка в том что он тогда терял данные)

но фишка в том что он тогда терял данные)

там улучшилась ситуация в 2ке, дав дикое пенальти на скорость записи, она просела раз в 10

но кардинально проблема не решена.

ну в смысле что надо перетестировать

но вероятно оно там так и осталось

потому что не это была цель

я правда удивляюсь какие человеки изорбертательные. и кривая адаптации технологии им по видимому не известна.

а когда они попадают на misuse они почему то не осознают себя в этой кривой

Короче да, достаточно доводов против ES на большом скейле в качестве TS.

Спасибо за мозговой штурм

Прошу прощения, я вообще не понимаю, зачем TSD пихать в ES

Наверное, я плохо воспитан

Прошу прощения, я вообще не понимаю, зачем TSD пихать в ES

Авторы ElasticSearch говорят что из него отличная TSDB и офигенный APM!

я про вот это если чего

http://ok-t.ru/mydocxru/baza6/656337914963.files/image005.gif

Авторы ElasticSearch говорят что из него отличная TSDB и офигенный APM!

Еще бы!

ERROR: S client not available

ну шутите не шутите а к примеру из коробки их heartbeat + kibana + es + борды пресобранные, позволяют заменить web checks заббикса и выкинуть его до конца )

ну шутите не шутите а к примеру из коробки их heartbeat + kibana + es + борды пресобранные, позволяют заменить web checks заббикса и выкинуть его до конца )

Ну это как раз о том, "что есть в ES"

но для большого объема думаю умрет

надо тестить. а так просто суждения

Ну моя теория была что "фиг с ним с bpp, а для ingest я добавлю шардов локальных"

Но и распределенность кликхауса меня прельщает тоже)

блин, выпал из жизни на эти 3 часа.

Распределенность КХ гораздо хуже распределенности ES имхо

Другое дело что ES масштабируется похуже

Парадокс :)

Как так?

КХ же с ZK работает

а ES просто сам кворум мутит

По опыту КХ масштабируется более линейно, но руками

У ES масштабируемость сильно падает с размером кластера, но зато все автоматом

да у кх все так себе с тулингом

и чертова зависимость от зукипера

не так уж много сишных приложений зависит от явовых сервисов

тут тот случай ага да

да какая разница если это всё в контейнерах живёт

хбз.

и чертова зависимость от зукипера

Ну если на стеке от апач, то норм.

а тулинг это проблема яндекса извечная

ну видимо в яндексе админы которые умеют руками и им тулинг нужен только к виде mssh

или они не готовы делится тулами

Ну разве у apache foundation есть тулинг?

такие себе слова ага.

ту же kafka сообразить и запустить чего стоит)

апач в мире серверов как trunk в мире сетей.

100500 разных слов этим транком зовут

А какие особенные проблемы с запуском кафки?

А какие особенные проблемы с запуском кафки?

давай не тут ?