но ты меня натолкнул на очень-очень-очень интересную мысль

на мой взгялд с ними проблема простая мелкие запросы основной трафик базы. они обычно укалыдываются в < 3ms. а если они вдруг подрастают до 5 ms. всё начинает быть плохо

очень интересную :D

ну есть мысль что для запросов которые top5 по колву надо предлагать выносить это в более дешевые кеши, конечно если такая возможность есть

пока не будет возможности шардить индексы — смысла не имеет

не понимаю почему после перехода на WT они не сделали это первым делом

я имеею ввиду за пределы монги вообще

я имеею ввиду за пределы монги вообще

зачем?

вынеси запросы на отдельный сервер, с кучей памяти и явно в клиенте выбирай сервер для исполнения

(в смысле отдельная реплика)

с нулевым приоритетом

ну мне иногда странно когда на базу идет нагрузка на коллекцию из 50 элементов. а запросов туда идет ацкий ад сколько

коллекция из 50 элементов будет 100% висеть в памяти

и работать это будет ровно как твой редис

будет висеть да.

может я просто не знаю чего. но когда у мен ятот раз была беда с одним отсутствующем индексом у меня ацццки все висело.

я зачем то в этот момент решил что лучше меньше запросов в монгу.

всем привет. подскажите пожалуйста в какую сторону копать, если сервер с монгой отжирает более 90% CPU, а вернее это проблема сервера или кривых запросов? Используем монгу 3.2.7, праймари сервер, это хетцнеровская виртуалка CX50 (4 vCores, 16GB RAM, 400GB SSD).

Вангую кривые запросы. влючить профайлер, посмотреть что в slowqueries

да, slowqueries есть над чем поработать, спасибо.

@dd_bb а вот чем ты свои монги бэкапишь?

@dd_bb а вот чем ты свои монги бэкапишь?

hidden member и там уже по обстоятельствам

господа, решил я значится сделать авторизацию в монге по юзеру паролю, достаточно ли просто запускать mongod —auth и создать в конкретной базе юзера с правами readWrite?

https://docs.mongodb.com/manual/tutorial/enable-authentication/

Там по шагам всё

УИИИИИИ https://jira.mongodb.org/browse/SERVER-19758

Resolution: Fixed Fix Version/s: 3.5.5

В 3.6 будет наконец стата по аггрегациям нормальная

Слушайте, я же вот не ебусь в глаза. https://docs.mongodb.com/manual/reference/method/sh.updateZoneKeyRange/#compound-shard-key Там есть (вызывающий теоретические вопросы, но мы это опустим) такой пример: sh.updateZoneKeyRange( "exampledb.collection", { a : MinKey, b : 1 }, { a : MaxKey, b: 10 }, "alpha" ); sh.updateZoneKeyRange( "exampledb.collection", { a : MinKey, b : 10 }, { a : MaxKey, b: 20 }, "beta" );

mongos> sh.updateZoneKeyRange( ... "foobar.rangefail", ... { a : MinKey, b : 1 }, ... { a : MaxKey, b: 10 }, ... "cold" ... ); { "ok" : 1 } mongos> sh.updateZoneKeyRange( ... "foobar.rangefail", ... { a : MinKey, b : 10 }, ... { a : MaxKey, b: 20 }, ... "hot" ... ); { "code" : 178, "ok" : 0, "errmsg" : "Zone range: { a: MinKey, b: 10.0 } -->> { a: MaxKey, b: 20.0 } on hot is overlapping with existing: { a: MinKey, b: 1.0 } -->> { a: MaxKey, b: 10.0 } on cold" }

mongos> db.runCommand("buildInfo")["version"] 3.4.3

При этом в протоколе такого примера нет, в js тестах такого примера нет, в cpp тестах такого примера нет.

а где можно подробнее почитать, как "Secondary members copy the oplog from their sync from source"? https://docs.mongodb.com/manual/core/replica-set-sync/#replication

оказывается, на гитхабе у них подробно всё описано https://github.com/mongodb/mongo/wiki/Replication-Internals

Вот суки

Лучше бы спеки нормально отредактировали: https://github.com/mongodb/specifications

The CollectionCloner then just runs find and getMore requests on the sync source repeatedly until it fetches all of the documents.

А кто-то помнит, в mmap у курсора как изоляция обеспечивалась при getmore?

В WT с CoW всё понятно, курсор открылся в одной сессии, сессия видит только свою версию дерева страниц. Пока открыта сессия, страницы не попадают в GC.

https://codewithintent.com/how-to-secure-mongodb/ /cc @stefanthegreat

Если у вас ещё не задеплоена аутентификация в монгу — идите и задеплойте.

ещё есть такие?

Тысячи их

ога, незадеплоенных

А, да, если вы считаете что раз у вас монга в мир не смотрит, значит это не для вас. Именно для вас.

https://codewithintent.com/how-to-secure-mongodb/ /cc @stefanthegreat

советы, кстати говно, лучше читать https://docs.mongodb.com/manual/tutorial/enable-authentication/

А, да, если вы считаете что раз у вас монга в мир не смотрит, значит это не для вас. Именно для вас.

Why?

Всем привет, подскажите пожалуйста как реализовать систему диалогов в mongo?

А причём тут монга?

Я абсолютно не понял вопрос.

я хочу на монге реализовать систему сообщений с потдержкой диалогов, и не очень бы хотелось хранить отдельно коллекцию дталогов и коллекцию сообщений, думаю может кто знает правильное решение этого вопроса

господа все мучает вопрос: помню раньше когда ставишь себе какую-нить joomla она в MySQL создает рандомно чуть символов и к названию базы дописывает. Что-то это было связано с секурностью, нужно ли делать точно так же в монге?

префикс - вот как это называлось

я хочу на монге реализовать систему сообщений с потдержкой диалогов, и не очень бы хотелось хранить отдельно коллекцию дталогов и коллекцию сообщений, думаю может кто знает правильное решение этого вопроса

берёшь, делаешь как можешь, а потом начинаешь решать возникающие проблемы

господа все мучает вопрос: помню раньше когда ставишь себе какую-нить joomla она в MySQL создает рандомно чуть символов и к названию базы дописывает. Что-то это было связано с секурностью, нужно ли делать точно так же в монге?

это звучит как норкоманский бред :)

"listDatabases"

а это для шаред хостингов было

что бы на одну муську можно было 5 сотен джумл поставить

тобишь вообще не нужно это для монги?

нет, вообще не нужно

это звучит как норкоманский бред :)

я поэтому и спросил, просто вопрос висит давно, решил точку поставить

я в монге новичок

монга тут не причем

я в монге новичок

https://docs.mongodb.com/manual/

почитай, у монги очень хорошая документация и нормальные туториалы

и даже крутые видяшки с обучением

в университете?

Ребят, я покурю, но чатик на то и чатик)

Чтобы оперативно найти информацию

А я думал документация для этого...

Ребят, я покурю, но чатик на то и чатик)

ты сначала покури, а потом задавай практические вопросы

привет. подскажите насколько далеко или близко от правды вот такая фраза(коллега выпалил): если индекс в документе создается на поле, которое всегда содержит разные значения, то вставка документа в коллекцию будет намнго медленне, чем если создать индекс на поле значения которого не всегда разные. В доке по индексам WT ничего похоже не удалось найти.

проверь на правктике, за одно и нам расскажешь

народ, а монга умеет искать в связанных документах? к примеру, есть коллекция заказов, у которой есть ссылка на владельца заказа и исполнителя заказа (обе сущности ссылаются на коллекцию контрагентов) как мне получить к какой группе контрагентов относится исполнитель (поле group_id у коллекции контрагентов)?

а точнее сделать выборку по заказам, у которых покупатели относятся к определенной группе

привет. подскажите насколько далеко или близко от правды вот такая фраза(коллега выпалил): если индекс в документе создается на поле, которое всегда содержит разные значения, то вставка документа в коллекцию будет намнго медленне, чем если создать индекс на поле значения которого не всегда разные. В доке по индексам WT ничего похоже не удалось найти.

Звучит как бред. Откуда ты это взял?

народ, а монга умеет искать в связанных документах? к примеру, есть коллекция заказов, у которой есть ссылка на владельца заказа и исполнителя заказа (обе сущности ссылаются на коллекцию контрагентов) как мне получить к какой группе контрагентов относится исполнитель (поле group_id у коллекции контрагентов)?

Нет, не умеет и не должна уметь. Это не реляционная субд. Меняй архитектуру данных

вот, я тоже самое сказал, что это хрень какая-то, а коллека аргументировал, что так как значения всегда разные у нас будет большая глубина дерева

Кек

И?

а если у нас значение не всегда разные, тот тут глубина маленькая и вставка будет быстрее

А какая разница какая глубина дерева?

якобы, чем глубже дерево, тем "дольше" будет вставлятся новый элемент в него

Почему?

вот внятный ответ он чет не смог дать

Даже если там есть разница, на фоне всего остального она будет совершенно не заметна. Но сделай бенч, да.

Вообще неселективный индекс — плохо.

ну тут вопрос что надо быстрая вставка или быстрое чтение имхо

ну тут вопрос что надо быстрая вставка или быстрое чтение имхо

это бред

потому что io будет дороже чем вся эта история с балансировкой дерева

парсинг и анализ bson

и вот это всё