так это хорошо наоборот

так это хорошо наоборот

далеко не всегда, я вот из того что сейчас понял,у людей будет 2 ведущие ноды, чисто под конфиг как я понял, и 10 на которых данные, но теперь я совсем запутался, зачем нужно 2 тб места ноде, на которой нет данных

так это хорошо наоборот

теперь глупый вопрос

вот у меня 10 баз, и 2 ведущие ноды, предположим закончилась оперативная память, на всех нодах, базы стали больше чем оператива, монго будет тупо как и кассандра работать с диском? и каждая нода даст такое кол-во записей чтения в сек, сколько iops у дисков?

монга оптимизирует кеш таким образом, чтоб там находились горячие индексы и данные

если база стала больше оператива, это не проблема

а вот если индексы стали больше чем оператива, это проблема.

из твоего описания не очень понятна топология. Шард из 10 нод и ещё 2 ноды под конфиг?

чётное количество нод для конфига — уже плохая идея, будут проблемы с выборами

вот у меня 10 баз, и 2 ведущие ноды, предположим закончилась оперативная память, на всех нодах, базы стали больше чем оператива, монго будет тупо как и кассандра работать с диском? и каждая нода даст такое кол-во записей чтения в сек, сколько iops у дисков?

шо такое две ведущие ноды? для начала для конфигурации сделай отдельный реплика сет инмемори. Работать будет не тупо, но как точно чёт никто не рассказывает. В доке пишут про какую-то магию с XFS, но пруфов нет.

чётное количество нод для конфига — уже плохая идея, будут проблемы с выборами

у них 10 нод по 32 cpu и 64 ram, 500 гб sas диск типа у ноды, и 2 ноды ч 16 cpu и 32 гб рам

у меня в этом проекте вообще оракл и постгре

sas диски по 500гб в 2017 году?

но в любом случае, ничего не понятно

sas диски по 500гб в 2017 году?

нет, сас диски и 500 гб пространства на netapp

sas диски по 500гб в 2017 году?

верните мне мой 2007 (с)

sas диски по 500гб в 2017 году?

я вот тож сижу и гадаю по ттх что у них там творится

вот у меня 10 баз, и 2 ведущие ноды, предположим закончилась оперативная память, на всех нодах, базы стали больше чем оператива, монго будет тупо как и кассандра работать с диском? и каждая нода даст такое кол-во записей чтения в сек, сколько iops у дисков?

WT ?

WT ?

dhfqn nfquth bvttim ddble&

врайт тайгер имеешь ввиду?

ну

ты задал вопрос по оперативку, для WT это странно однако

нет, сас диски и 500 гб пространства на netapp

сетевое дисковое хранилище — путь вникуда

просто вот как себя ведут hbase/cassandra я понимаю после исчерпания оперативы, но ведь у монги тож sstable, и я хз как он без оперативы

ещё небось бекапы снепшотами

с фс

непонятно вообще шард там или репликасет

сними 10Тб с ноды дампом ;)

непонятно вообще шард там или репликасет

вот и я не понял, но на проекте, где налогичный ранее был 13 тб за 3 месяца, у них вообще странно

даже 500 гигов

сними 10Тб с ноды дампом ;)

какие предложения?

а сколько денег есть? :D

какие предложения?

у кассандры вообще бэкапа дампом нет

даже 500 гигов

это можно =)

по крайне мере рабочего

ток реплику делать

а сколько денег есть? :D

хехе, хитрый =)

просто вот как себя ведут hbase/cassandra я понимаю после исчерпания оперативы, но ведь у монги тож sstable, и я хз как он без оперативы

на сас дисках просто работать не будет, расслабься

на сас дисках просто работать не будет, расслабься

будет-будет

у перконы в монге норм дампилка

не надо

у меня 3 тб базы

на сас дисках просто работать не будет, расслабься

мне бы это обосновать, я просто по кассандре и hbase помня понимаю примерно это, но бля...

у перконы в монге норм дампилка

табу на их продукты, увы

табу на их продукты, увы

зря, по сути если нет денег на энтерпрайз монгу то безальтернативно

не надо

5000 на чтение и 3000 на запись в сек с 10 нод таких?

5000 на чтение и 3000 на запись в сек с 10 нод таких?

5000 чего? :)

3000 чего?

ты заявку на кластер делаешь?

или проверяешь чужую заявку?

зря, по сути если нет денег на энтерпрайз монгу то безальтернативно

шутка даже в том что ты шардированный кластер собрать на обычной монге не очень можешь. потому что они в доках просят использовать инмемори двигло для конфиг

или проверяешь чужую заявку?

чужую

зря, по сути если нет денег на энтерпрайз монгу то безальтернативно

не ко мне, вообще видел у перконы много фич, а у вас в проде?

шутка даже в том что ты шардированный кластер собрать на обычной монге не очень можешь. потому что они в доках просят использовать инмемори двигло для конфиг

ты чо несёшь вообще? :)

или проверяешь чужую заявку?

проверяю что за бред написан в преокте у нас в ттх

не ко мне, вообще видел у перконы много фич, а у вас в проде?

пока нет, тестим

ты чо несёшь вообще? :)

я тебе говорю то что в доке написано

в доке написано вынести на отдельный реплика сет с инмемори двиглом

ну там написано не так

шутка даже в том что ты шардированный кластер собрать на обычной монге не очень можешь. потому что они в доках просят использовать инмемори двигло для конфиг

я лично ранее считал всегда, что монга жива пока есть свободные 10% оперативы

там написано убедись что монга никогда не будет работать с диском

там написано убедись что монга никогда не будет работать с диском

+, тож когда то это видел

там написано убедись что монга никогда не будет работать с диском

ты где это нашел вообще?

ты где это нашел вообще?

в документации

не читал что ли?

ссылку дай

лан я до дома, потом продолжу

реально интересно

https://docs.mongodb.com/manual/tutorial/deploy-shard-cluster/

чет не вижу =)

конфиг сервера можно хоть на ардуине запускать, с sd карты

https://docs.mongodb.com/manual/administration/production-checklist-operations/ идёшь сюда и находишь много всяких странных штук без объяснений

Place your config servers on dedicated hardware for optimal performance in large clusters. Ensure that the hardware has enough RAM to hold the data files entirely in memory and that it has dedicated storage.

там же про то что работать нормально будет только на ссд(что реально правда) и т.д.

где тут про in-memory хранилище?

? чуваки, ну вы жжоте

сколько тб у тебя базы?

давайте с простого вопроса

сколько репликасетов по сколько тб?

потом продолжим

если вы говорите что у вас без ссд работает то у вас там базы гигов по 50-100

можете не продолжать

я такое на телефоне запущу

потом продолжим

спасибо, досвиданья.

если вы говорите что у вас без ссд работает то у вас там базы гигов по 50-100

А что всем нужно 50к рпс в монге? Зачем всем ссд, обычных хдд за глаза, когда ресурсы соотвествуют задаче

сколько тб у тебя базы?

300-600тб планируется в проекте

он вам уже не ответит, он забанен

Народ, хэлп. Как в MongoDB сделать запрос вида: SELECT * FROM A LEFT OUTER JOIN B ON A.uid = B._id WHERE A.__t = 'constant' AND B.mID = ?; Сейчас это делается через A.find({ uid: { $in: [ .... ] } }), но мне так не нравится, ибо иногда элементов коллекции B может быть слишком дохрена, при этом для B.mID = ? объект с __t = 'constant' будет всего один. Да, это из разряда преждевременных оптимизаций, но всё же хотелось бы сделать красивее, но чёт туплю.

Глеб, Монго это не реляционная ДБ со всеми вытекающими. Некоторую подобную функциональность (крайне неэффективную vs реляционные дб) можно посмотреть здесь: https://stackoverflow.com/questions/2350495/how-do-i-perform-the-sql-join-equivalent-in-mongodb

помогите плиз советом есть коллекция, к которой обращаемся с запросом $or согласно документации для такого запроса (если он долго выполняется) необходимо создать индекс на каждое из условий, которое указано в $or в $or указан поиск не просто по значениям, а разные комбинации отбираемых колонок каким образом в hint можно скормить три индекса, которые необходимо использовать?

или стоит вообще пересмотреть подход к подобному запросу и, возможно, стоит выполнить этот запрос три раза на каждое из указанных условий в запросе?

меня просто напрягает такая статистика во времени выполнения "executionTimeMillis" : 658, "totalKeysExamined" : 342702, "totalDocsExamined" : 56,

используется композитный индекс по 3 полям