пиздец как профессионально

остынь, бро.

было интересно глянуть, что быстрее

монга быстрее за счет того, что сбрасывает данные на диск каждые 100мс, но и постгри тоже можно настроить подобным образом, как я понимаю так что все в итоге работает со скоростью диска

в долгосрочной перспективе я лучше поебусь с сетапом и буду понимать, как всё работает, чем положусь на "всё само работает" :) дело вкуса

так в случае проблем все то же самое будет - идешь и отлаживаешь. Там все просто готово уже и проблемы редко возникают

максимум сплитбрейн

ну мне интересно, где поднимал этот хуесос эластик, который топит за постгрю

максимум сплитбрейн

ммм, вообще сплитбрейн это очень неприятно

ну мне интересно, где поднимал этот хуесос эластик, который топит за постгрю

давай будем уважать друг друга. хотя бы без мата.

def test(): """Print hello world message.""" print 'hello world' dayte programmi exe

ммм, вообще сплитбрейн это очень неприятно

ну вот поэтому нечетное число нод рекомендовано обычно для nosql. Для эластика в режиме кластера - минимум три, а не две

давай будем уважать друг друга. хотя бы без мата.

ну так не пойдет. он сам начал

ну мне интересно, где поднимал этот хуесос эластик, который топит за постгрю

http://ruskolan.com/images/piramida.jpg

суть в том, что я другого способа не нашел с эластик + постгрес кроме как зомбодб

ммм, вообще сплитбрейн это очень неприятно

сплитбрейна можно избежать в схеме мастер + 2 слейва, собственно, такая сехма всегда и рекомендуется прямо в документации

а та использует версию старую

зачем нужна монга, если постгрес всё это умеет, работает лучше и стабильнее, да ещё и все бонусы РСУБД имеет?

сделай alter table на табличке в пару тб

я как бы не против

def test(): """Print hello world message.""" print 'hello world' dayte programmi exe

а с какой целью интересуешься?

суть в том, что я другого способа не нашел с эластик + постгрес кроме как зомбодб

риверы же. Или они устарели уже?

сделай alter table на табличке в пару тб

смотря какой alter table

тем более монга на таких объёмах уже загнётся

риверы же. Или они устарели уже?

а они работают с постгресом? я чот глянул мельком, даже не разобрался

а они работают с постгресом? я чот глянул мельком, даже не разобрался

работают, разумеется. Они для того и нужны - засасывать данные из постгри в эластик

думал, что они на монгу как раз

если грамотно придумать процесс миграции, то ничего лочиться не будет

эй шутник про мамку. как твоя бигдата?

сделай alter table на табличке в пару тб

(я уж не говорю, что таблица в пару ТБ это вообще говоря не очень правильно)

тем более монга на таких объёмах уже загнётся

давай конкретно, что именно загнется и почему

монга скейлится лучше постгри, но хуже большинства нормальных решений на рынке. Для некоторых задач "и так сойдет"

монга хороша для read mostly

давай конкретно, что именно загнется и почему

во, разговор по делу кстати. тесты реально было бы интересно глянуть

ну или попробовать потестить

а они работают с постгресом? я чот глянул мельком, даже не разобрался

а, слушай, я тебя дезинформировал. Там теперь встроенная JDBC-импортилка вместо риверов

давай конкретно, что именно загнется и почему

1) монга 2) от больших объёмов. у меня такое случалось уже при 300-400Гб пару лет назад

тем более монга на таких объёмах уже загнётся

нет. у нас 1Тб и где-то полмиллиарда документов в коллекции

а, слушай, я тебя дезинформировал. Там теперь встроенная JDBC-импортилка вместо риверов

ну значит я не ошибся. не страшно

и это не на 3.x

1) монга 2) от больших объёмов. у меня такое случалось уже при 300-400Гб пару лет назад

в чем выражалось?

ну значит я не ошибся. не страшно

https://www.elastic.co/guide/en/logstash/current/plugins-inputs-jdbc.html

эй шутник про мамку. как твоя бигдата?

https://www.nalog.ru/rn48/news/activities_fts/6133628/ 2млрд рублей за только 1 квартал

смотря какой alter table

любое изменение схемы - боль.

в чем выражалось?

не стартовал сервис после падения

любое изменение схемы - боль.

да руки надо прямые иметь и делать всё с самого начала нормально

нет. у нас 1Тб и где-то полмиллиарда документов в коллекции

сильно денормализованны данные?

и ничего болеть не будет

не стартовал сервис после падения

и быстро перепрыгнули на постгрес? некогда разбираться, надо искать другие решения!

неприятно, но не смертельно

https://www.nalog.ru/rn48/news/activities_fts/6133628/ 2млрд рублей за только 1 квартал

чот мало для такой страны

и быстро перепрыгнули на постгрес? некогда разбираться, надо искать другие решения!

никто никуда не перепрыгивал, я рассказал кейс

это не все налоги

чот мало для такой страны

а только нарушители

а, понял

ну тогда норм

на 2 млрд пытались наебать государство

да руки надо прямые иметь и делать всё с самого начала нормально

спасибо, кэп. но либо вмазываться в хранение xml/json в полях, либо менять схему.

сильно денормализованны данные?

нет.

спасибо, кэп. но либо вмазываться в хранение xml/json в полях, либо менять схему.

ну вот в постгре нет проблем с хранением json в полях :)

ну вот в постгре нет проблем с хранением json в полях :)

но есть проблемы со скоростью

самое смешное - в эластике есть. Например, если поле изначально задано, как дата, и должно индексироваться, как дата, то нельзя в одном из документов этому полю присвоить говно вместо даты.

но есть проблемы со скоростью

все проблемы решаются индексами и правильными запросами

но есть проблемы со скоростью

ну, в каких-то тестах они монгу били спокойно по скорости

если у вас везде full scan, то конечно всё будет тормозить

все проблемы решаются индексами и правильными запросами

не поверишь, в монге так же

какие-то более вменяемые решения - не знаю

индексы можно и по jsonb построить

и по полям внутри него

и работать это будет быстрее

потому что эту БД разрабатывают уже хер знает сколько лет

ERROR: S client not available

все проблемы решаются индексами и правильными запросами

если мне нужна выборка только по ключу?

индексы можно и по jsonb построить

а у всех в инфраструктуру завезли postgres 9.5 уже? :)

там всё оптимизировано шо пиздец

на центоси его можно поставить?

так скажешь, где у вас там эластик крутится с постгрей? или вы его даже не пользуете там?

ну то есть как крутится

на центоси его можно поставить?

есть репы официальные на сайте постгреса

для центоси есть

есть репы официальные на сайте постгреса

для седьмого только или для шестого тоже?

когда последний раз смотрел — были на 6 и на 7

6 centos много где используется в энтерпрайзе

отлично тогда

ну, в виде oracle linux, например

ну да, я про то и говорю. Просто со свежими версиями всего на центоси всегда проблемы

так скажешь, где у вас там эластик крутится с постгрей? или вы его даже не пользуете там?

я уже не на этом проекте, что сейчас там происходит, не знаю

я уже не на этом проекте, что сейчас там происходит, не знаю

ну а у тебя примерно какая задача была? на что индексировали? или это просто для тестов было?

ну да, я про то и говорю. Просто со свежими версиями всего на центоси всегда проблемы

если серверный, то всегда находил (полу)официальные репы новых версий

трогайте за генту, оно рулит

ну а у тебя примерно какая задача была? на что индексировали? или это просто для тестов было?

индексация химических структур

если мне нужна выборка только по ключу?

а если нету ключа, то тогда спасают спарсед индексы, поэтому я и спросил про денормализацию. что можно строить индексы только на чать документов - укоторых есть этот ключ :) простите за капитанство :)

если серверный, то всегда находил (полу)официальные репы новых версий

в серьезных конторах опсы не всегда берутся такое поддерживать

в серьезных конторах опсы не всегда берутся такое поддерживать

почему?

трогайте за генту, оно рулит

у нас в проде гента

трогайте за генту, оно рулит

иногда даже заебись

а иногда мне не привычно

почему?

а почему должны? мало ли что Вася там положил в свой PPA

или что там у центоси

а почему должны? мало ли что Вася там положил в свой PPA

ну тогда пусть сами rpm собирают )

к т ому же, обычно с бинарниками кладут и src файлы

ну тогда пусть сами rpm собирают )

для этого ресурсы нужны и вообще это довольно геморройная вещь. Поди скомпиль большой проект так легко

так что там вообще всё можно лежит в открытом виде и можно проверить

ну, я про спеки говорю