ClickHouse конечно привлекает своей скоростью, простым языком и русской документацией. Но видимо не по моей задаче решение

Поднимается она минут за 5 с нуля

ClickHouse конечно привлекает своей скоростью, простым языком и русской документацией. Но видимо не по моей задаче решение

Единственный минус кассандры. Если тебе записаные данные могут понадобиться прям вот сразу. То лучше не надо. Иногда у ней уходит несколько милисекунд пока они станут доступны для чтения

Кассандра?

для аналитики?

Но это в случаях когда пишешь в нее прям в упор под i/o

@AlexCAD Не, мне даже в полминуты пойдёт delay

@etkee именно

Есть большая MYSQL, которая уже аналитику очень не тянет. Вот надо куда-то оттуда данные гнать

я спойлерну: на пятый день чтения документации начнет закрадываться мысль, что ни агрегаций, ни нормальных селектов там нет, что, безусловно, является правдой

без агрегаций больно

Есть большая MYSQL, которая уже аналитику очень не тянет. Вот надо куда-то оттуда данные гнать

https://engineeringblog.yelp.com/2016/08/how-we-scaled-our-ad-analytics-with-cassandra.html

я спойлерну: на пятый день чтения документации начнет закрадываться мысль, что ни агрегаций, ни нормальных селектов там нет, что, безусловно, является правдой

Потому что нужно продумывать схему. Это же nosql

Но не все догоняют :)

Ибо если схема продумано то уже назад в sql больно

Ладно, посажу кого-нить изучать. Спасиб.

Ладно, посажу кого-нить изучать. Спасиб.

дофига описаний и примеров даже пошаговых. правда на англицком

главное не пытатся структуру sql впихнуть в схему nosql без изменний

Я вообще бы в идеале одной коллекцией всё запихнул. Т.к. выборка может идти по любому критерию.

Я вообще бы в идеале одной коллекцией всё запихнул. Т.к. выборка может идти по любому критерию.

дык запихивай как угодно. просто саму схему данных их хранение и выборку нужно переосмыслить и накорябать софтинку которая организует безболезненую конвертацию одного в другое

За софтиной дело не постоит?

с кликхаусом таже фигня по сути

Ладно, посажу кого-нить изучать. Спасиб.

скоро до манагера дорастешь

не, я ещё себя уважаю?

Просто времи изучать что-то в корне другое совсем нет пока

прям скажем пока не заметил

Не понял твоего сарказма.

Не понял твоего сарказма.

он про корень :)

Беда в том, что даже удаление ClickHouse поддерживает через жопу. Вот и думаю... Там есть приятные фишки типа CollapsingMergeTree, которые вроде как проблему решают. Но не очень понятно, как это будет в реальности, вот понадеялся, что кто-то пробовал уже.

Vertica, но больше 1 тера несжатых данных платно...

Всем привет. Кто нибудь знает что делает CHECKSUM TABLE в MariaDb?

И реально ли он помогает для тех кто хочет отследить с помощью скрипта и функции измении таблицы?

Всем привет. Кто нибудь знает что делает CHECKSUM TABLE в MariaDb?

https://mariadb.com/kb/en/library/checksum-table/

И реально ли он помогает для тех кто хочет отследить с помощью скрипта и функции измении таблицы?

встречный вопрос. ты понимаешь что такое checksum и зачем его применяют?

встречный вопрос. ты понимаешь что такое checksum и зачем его применяют?

Я не силен в базе данных,админ. Я нашел от гугления. Я пхп разработчик. Мне посоветовали ее на пхп группах и в stack overflow. Не суди строго.

Я не силен в базе данных,админ. Я нашел от гугления. Я пхп разработчик. Мне посоветовали ее на пхп группах и в stack overflow. Не суди строго.

а какой стороной вообще CHECKSUM к базам данных?

а какой стороной вообще CHECKSUM к базам данных?

Я не знаю. Но мне сказали,если хочешь узнать и отследить были ли какие то изменения в базе данных и в таблице. То вот тебе CHECKSUM. Читаю,документацию,не понимаю чем она мне поможет.

Я не знаю. Но мне сказали,если хочешь узнать и отследить были ли какие то изменения в базе данных и в таблице. То вот тебе CHECKSUM. Читаю,документацию,не понимаю чем она мне поможет.

ты понимаешь что такое checksum? вообще?

ты понимаешь что такое checksum? вообще?

Неа. Даже не углублялся так далеко в DBA

такое впечатление что человек никогда ничего не скачивал из инета и не пвроерял checksum у файлов

такое впечатление что человек никогда ничего не скачивал из инета и не пвроерял checksum у файлов

Аа ну это знаю

Аа ну это знаю

ну так и какая разница?

@AlexCAD что-то ты сегодня злой

ну так и какая разница?

Он проверяет если таблицы одинаковы,вот и все что я понял от документации

Он проверяет если таблицы одинаковы,вот и все что я понял от документации

нет. он считает CHECKSUM для таблицы

Он проверяет если таблицы одинаковы,вот и все что я понял от документации

Тебе нужно сравнить таблицы на разных серверах в репликации? Или просто понять изменялась ли таблица?

Тебе нужно сравнить таблицы на разных серверах в репликации? Или просто понять изменялась ли таблица?

если ты ему скажешь то он так и не поймет

Тебе нужно сравнить таблицы на разных серверах в репликации? Или просто понять изменялась ли таблица?

Просто отследить изменилась ли таблица,если в нее внесли данные. Если нет,так и не делай ничего.

@AlexCAD что-то ты сегодня злой

следствие зашло в тупик. бесят китайцы со своими хитровыковыряными схемами

Ну на самом деле ты немного не прав, с помощью контрольной суммы можно проверить

Просто отследить изменилась ли таблица,если в нее внесли данные. Если нет,так и не делай ничего.

и вот тут мы приходим к вопросы. ЗАЧЕМ после скачивания файла с инета проверяют CHECKSUM?

Просто отследить изменилась ли таблица,если в нее внесли данные. Если нет,так и не делай ничего.

Есть служебная бд information_schema, там есть стата по таблицам

и вот тут мы приходим к вопросы. ЗАЧЕМ после скачивания файла с инета проверяют CHECKSUM?

Если файл изменился. Я ж в такие подробности не лезу.

Если файл изменился. Я ж в такие подробности не лезу.

ну то есть если ты посчитаешь CHECKSUM таблицы сегодня. запомнишь. и посчитаешь CHECKSUM завтра для этой же таблицы.. сможешь ли ты сравнить два числа и узнать ИЗМЕНИЛОСЬ ЛИ ЧТО ТО В ТАБЛИЦЕ?

ну то есть если ты посчитаешь CHECKSUM таблицы сегодня. запомнишь. и посчитаешь CHECKSUM завтра для этой же таблицы.. сможешь ли ты сравнить два числа и узнать ИЗМЕНИЛОСЬ ЛИ ЧТО ТО В ТАБЛИЦЕ?

Да

я худею от нынешних разрабов

)))

я худею от нынешних разрабов

Дак я впервые так глубоко копнуд в DBA

Дак я впервые так глубоко копнуд в DBA

млять а ДБА тут вообще причем?

млять а ДБА тут вообще причем?

Ой все.

Дак я впервые так глубоко копнуд в DBA

Это ты еще даже лопату в руки не взял)

Это ты еще даже лопату в руки не взял)

угу и голову дома в тумбочке забыл

Тебя сегодня видимо пехапе девелопер покусал. Как твой трак? Бегает?

Тебя сегодня видимо пехапе девелопер покусал. Как твой трак? Бегает?

понятия не имею. я ж типа последний день в отпуске сегодня

млять а ДБА тут вообще причем?

Да потому что админ,до этого я не знал что вообще такая вещь есть в БД. Ты думаешь я настолько умный,чтоб читать и изучать все про все? На это уйдут годы и годы. Для меня CHECKSUM в БД это уже вау,немыслимое. Я не могу винить себя в том,что я ничего не знаю в ДБА. Кроме select,where,insertи тд.

понятия не имею. я ж типа последний день в отпуске сегодня

Так вот откуда ноги растут)

Поэтому и сижу у вас,читаю. Интересуюсь. Мне интересно изучаю

ERROR: S client not available

Да потому что админ,до этого я не знал что вообще такая вещь есть в БД. Ты думаешь я настолько умный,чтоб читать и изучать все про все? На это уйдут годы и годы. Для меня CHECKSUM в БД это уже вау,немыслимое. Я не могу винить себя в том,что я ничего не знаю в ДБА. Кроме select,where,insertи тд.

ДБА ТУТ ПРИЧЕМ? CHECKSUM он и в африке CHECKSUM... ты же знаешь что это и зачем применяют

Так вот откуда ноги растут)

да не. просто не могу понять почему не работает. вот вчера работало. а сегодня не работает. и я не могу найти что изменилось за ночь

уже на составляющие разобрал и собрал обратно раза 3

а оно один хрен прикидывается мертвым

А ты поспи

ДБА ТУТ ПРИЧЕМ? CHECKSUM он и в африке CHECKSUM... ты же знаешь что это и зачем применяют

Ясное дело. Но опять же для меня CHECKSUM не было великим таким словом. Часто это видел. Но я не углублялся до такой степени.

И не агрись

Для меня оно новое.

А ты поспи

дык время то 5 вечера всего

Бля, я и забыл где ты дислоцируешься

И не агрись

я пытаюсь. но он же даже намеков не понимает. как может быть разрабом челвоек которому уже все составляющие разложили а он один фиг застрял на теме Я НЕ ДБА

Вот щас буду после прочтения следить за checksum внимательнее.

я пытаюсь. но он же даже намеков не понимает. как может быть разрабом челвоек которому уже все составляющие разложили а он один фиг застрял на теме Я НЕ ДБА

Да потому что я не могу каждую вещь взять и читать

я пытаюсь. но он же даже намеков не понимает. как может быть разрабом челвоек которому уже все составляющие разложили а он один фиг застрял на теме Я НЕ ДБА

Да видел,да слышал. Знаю? Нет.

Ну вот почитаешь, поскилуешься

Не обязательно все знать, нужно быть в курсе и знать где подсмотреть, этого достаточно

Ну вот почитаешь, поскилуешься

Понятное дело. Для меня оно не новое,я ее по несколько сотен на дне вижу. Думаешь она меня интересовала до этого? Нет. В гробу я ее видел. Честно отвечаю. Я не интересовался.

Не обязательно все знать, нужно быть в курсе и знать где подсмотреть, этого достаточно

Еду в общественном транспорте. Позади меня - две базарные бабки (Б1 и Б2). То есть натурально базарные, обсуждают покупателей, цены и т.п. Входит модная девушка и одной из этих бабок наступает на ногу. Дальше следует долгий и шумный скандал, бабки сообща доводят девушку до слез и та бросается к выходу на ближайшей остановке. И тут одна из бабок кричит ей вслед: Б1: Загугли! Девушка убегает, я в непонятках. Б2: Что это за слово такое - "загугли"? Б1: не знаю, у меня старший все время так говорит. Я так думаю, это теперь по-ихнему "пошел на хуй"

Боян же)

Боян же)

зато про войну

Реально. Я ее вижу по нескольку сотен в день. Я не интересовался ДО ЭТОГО. Что то это было знакомо и где то ее слышал или видел. Мог ли я ее объяснить НЕ ЗНАЯ для чего она? Ну вот сам подумай. Не кипятись. Я ж не специально.

Реально. Я ее вижу по нескольку сотен в день. Я не интересовался ДО ЭТОГО. Что то это было знакомо и где то ее слышал или видел. Мог ли я ее объяснить НЕ ЗНАЯ для чего она? Ну вот сам подумай. Не кипятись. Я ж не специально.

прочитай как словарь обьясняет это слово

a digit representing the sum of the correct digits in a piece of stored or transmitted digital data, against which later comparisons can be made to detect errors in the data.

прочитай как словарь обьясняет это слово

Он проверяет на изменение,если были какие то изменения то это может считаться ошибкой при сравнении

прям простым английским языком написано

что циферка которая есть сумма всей фигни что бы позже можно было проверить ошибки в фигне

Да хватит уже контрольные суммы теребонькать...

Что-то я вижу, но не вижу