да

если updateMany по всей коллекции то внутри каждого используйте своё значение _s

если внутри updateManyArray запросы на всю коллекцию, никакого профита не будет, один головняк

стоп, но монгошелл ведь синхронный. не потеряю ли я апдейты?

что?

что?

туплю, да?

не понимаю что вы имеете ввиду

пошел проверю и отпишусь ;)

bulkWrite вам никаких гарантий не даёт

это сетевое мультиплексирование: собрать несколько запросов в один пакет

а в монге они выполняются точно так-же как несколько отдельных запросов

очень плохое название для этой фичи :(

если updateMany по всей коллекции то внутри каждого используйте своё значение _s

замечательно отработало за исключением того, что пришлось переписать Object.entries )) ESCMAScript2017 ))

@dd_bb а есть какие-нибудь бест-практис для монги для версионирования изменений данных? к примеру, есть article, через какое-то время текст поправили, но нужен доступ к предыдущему варианту. м?

http://www.askasya.com/post/trackversions/

спасибо

Создать документ через upsert с телом { arr: {$push: [123]}} не получится, да? пишет MongoError: '$set' is empty.

{$push:{arr:[123]}

{$push:{arr:[123]}

спасибо 👌🏿

ещё один вопрос, если у меня хранится массив [{animal: String, paws: Int}], а мне нужно сделать push в него , я могу как-то дополнительно указывать, чттоб если animal такой есть, чтоб paws инткрементировался, а не добавлялся ещё один обьект?

посмотрите https://docs.mongodb.com/manual/reference/operator/update/positional-filtered/ и $inc

точно не помню, но вроде ваш сценрий можно реализовать

да там и апсерт есть

Сделал, существующие обновляет как надо, а вот новые не апсёртит😭😭😭 ZooList.updateOne({ zoo: req.params.zoo, }, { $inc: { [`mammals.$[elem].paws`]: req.body.paws, }, }, { arrayFilters: [{ "elem.animal": req.body.animal }], upsert: true, }); Если animal не существует, то просто пишет, что nModified: 0

а вторые квадратные скобки вокруг mammals.$[elem].paws зачем7

а вторые квадратные скобки вокруг mammals.$[elem].paws зачем7

ой, там вообще было вычисляемое поле внутри, [${class}.$[elem].paws], я убрал для простоты, оно пока константно.

Вообще у меня теперь непонятки, а как он вообще догадается, что именно я хочу upsert'нуть? Вроде же неочевидно совсем

текс а проверьте не появился ли каконйитьб док в базе только с этим полем?

Вообще у меня теперь непонятки, а как он вообще догадается, что именно я хочу upsert'нуть? Вроде же неочевидно совсем

Я же прошу проинкрементить, а не пушить, если нечего инкрементить

т.е. вам нужно инкрементить только если чтото нашлось?

тогда апсерт выкидывайте

текс а проверьте не появился ли каконйитьб док в базе только с этим полем?

неа, док только один существует. На всякий случай пояснение, использую драйвер монгуз, там мои вычисляемые поля записаны в схеме как массивы, и при создании они по дефолту [] будут все.

т.е. вам нужно инкрементить только если чтото нашлось?

Да, иначе просто пушнуть

тогда апсерт выкидывайте

а документа может и не быть ещё🤔

так если вы монугс используйте на кой вам это делать руками?

нашли док, поменяли как вам надо и сохранили

так думал можно в одну операцию, ясно что можно и в приложении описать все случаи) А так придётся сначала проверить, есть ли док, если нет, то сделать создание, а вот пуш то всё равно не работает, значит и его руками проверять( База надёжнее как-то

вы видимо не понимаете суть работы со всякими одм, вы все должны делать через них. в обход делается только реально мега сложная какаято дичь

вы видимо не понимаете суть работы со всякими одм, вы все должны делать через них. в обход делается только реально мега сложная какаято дичь

то есть правильнее будет 1) поискали есть ли такой обьект в коллекции, получили его, иначе пометили создание нового - запушили в массив обьект -сохранили 2) если нашли, то проанализировали массив на предмет совпадений, - если есть, то обновили, - если нет, то добавили -сохранили Так получается?

да

вы должны работать не с базой, а с монгусом, а если быть еще точнее с сущностями, а все связанное с изменениями берет на себя монгус

Ок, а в чём тут нюансы работы с одм, это просто апдейт на стороне приложения, такое и с нативным драйвером можно было замутить? Если работать с сущностью монгуса, то там просто вместо полей обьекта геттеры и сеттеры, в чём кардинальное отличие?

в уровне абстракции, вы работаете с объектами, а не с бд

Ну да, ещё раз, не могу понять: если я просто скачаю док из бд, переведу его в формат обьекта js, произведу операци обновления, а потом сохраню в бд (средствами нативного драйвера или ODM), в чём будет роль одм как абстракции? Управлять коннектом к бд?

не знаю внутрянок монгуса, но как минмум он предоставляет работу с объектом по схеме, которую обычный драйвер не гарантирует. Так же в особо интересных случаях избавялет от кучи бойлерплейта. К сожалению вы смотрите на монгус не с правильной точки зрения, т.к. он заточне исключительно под монгу. но если взять чтонить из мира орм заточенное на sql базы то там вы вообще абстрагируетесь от того в какой базе хранится, хоть в распределенной, хоть в ембеддед, хоть в постгре, хоть в оракле. вплоть до разрабатываете на одном, а в проде все гоняется на другом

не знаю внутрянок монгуса, но как минмум он предоставляет работу с объектом по схеме, которую обычный драйвер не гарантирует. Так же в особо интересных случаях избавялет от кучи бойлерплейта. К сожалению вы смотрите на монгус не с правильной точки зрения, т.к. он заточне исключительно под монгу. но если взять чтонить из мира орм заточенное на sql базы то там вы вообще абстрагируетесь от того в какой базе хранится, хоть в распределенной, хоть в ембеддед, хоть в постгре, хоть в оракле. вплоть до разрабатываете на одном, а в проде все гоняется на другом

круто, не знал. Не работал никогда с SQL👍🏿

Подскажите, как вернуть само свойство в mongo/mongoose? Возвращает со всеми параметрами (видимо, с прототипа)

CoreMongooseArray [ { percent: { value: 44, enter: true }, _id: 5c7e84200853dd5bfdebf554, campaignId: '5c7a952a39f1d6002e317028', updated: 2019-03-05T14:15:17.748Z }, _path: 'campaigns', toBSON: [Function: toBSON], _atomics: {}, _parent: { percent: { value: 36, enter: false }, .........

А в БД это массив объектов (первый элемент видно) [{ percent: {}, _id, campaignId }]

Вот мне нужно пройтись по этому массиву через .find()

Подскажите как отсеять элементы у которых images пустой? Пока выбираю так: .aggregate([ {$limit: 5}, { $lookup: { from: 'images', localField: '_id', foreignField: 'articleId', as: 'images' } } ])

{$match: {images: {$ne: []}}}

Оказалось проще чем казалось) Спасибо.

Только вот не эффективно :)

А можно как-то под запросы делать? SELECT id FROM articles WHERE id NOT IN (SELECT DISTINCT articleId from images);

проще сделать в два запроса

У меня images 6 лямов. даже distinct не влезает в 16МБ

@dd_bb change stream он ведь по времени отсортирован? Или может слать невпопад?

https://github.com/mongodb/specifications/blob/master/source/change-streams/change-streams.rst

Да чет... нету там ничего. https://docs.mongodb.com/manual/reference/change-events/#dropdatabase-event Тут вот про clusterTime есть но про порядок - ничего

https://docs.mongodb.com/manual/administration/change-streams-production-recommendations/#sharded-clusters Это к sharded-clusters но все равно: MongoDB guarantees the order of changes are preserved and change stream notifications can be safely interpreted in the order received.

Всем привет. Не подскажите пожалуйста , в монгодб сохранил следующее поля: { page: { course: [{ title: { type: String, required: 'Title is required' }, category: { type: String, required: 'Category is required' } }] } } - ну примерно так. Теперь когда я делаю запрос с Постмана: "params": { "title": "Языковые курсы", "category": "Немецкий" } на сервере функция выглядить так: await UserService.get(body.params); --> возвращает пустой массив.

В общем , монгус сам в массиве находит данный запрос. Так как в бд course - это массив, а я отправляю только объект , норм ?

ребят, а это нормальная практика retry-flow делать сначала retry на commit, и если ошибка не позволяет делать retry, то уже делать retry на всю транзакцию?

меня просто while true в примерах немного сбивает, может ли быть кейс, когда транзакция будет без остановки фейлиться

Здравствуйте, а правда что монго очень чувствительна к версии? что лучше не делать монгодамп версией 2.х с сервера 3.х или наоборот?

Здравствуйте, а правда что монго очень чувствительна к версии? что лучше не делать монгодамп версией 2.х с сервера 3.х или наоборот?

Я пока столкнулся только с разными UUID при разных версиях, так сказать переключили стандарт, в остальном BSON должен выглядеть так же. Разве что метаданные…

Сделал 2 отдельных запроса. Дождался distinct, и потом вставил в .find({_id: {$in: [ 1020180, 155808, … ]}, {_id: 1}) получил Error: Converting from JavaScript to BSON failed: Object size 54267426 exceeds limit of 16793600 bytes

Привет! Подскажите, плз, как найти количество групп после выполнения команды aggregate. Если вызвать count() после aggregate'a, то выпадает ошибка count is not a function

посмотрите тип полученного объекта и найдите у него соотвевующий метод

Здравствуйте, а правда что монго очень чувствительна к версии? что лучше не делать монгодамп версией 2.х с сервера 3.х или наоборот?

она чувствительна только к некоторым типам в bson

она чувствительна только к некоторым типам в bson

Он во время бэкапа ругнется чьо всё плохо? И как это отразится на восстановлении?

bson forward-compatible, а вот с backward-compatibility могут быть проблемы

т.е. из любой старой версии в любую новую вы дамп легко зальёте

а вот из новой в старую могут быть проблемы, которые вылезут в момент восстановления

к сожалению у bson всё очень плохо с «версионированием», тяжело сказать с какими типами могут быть прблемы

из головы, точно decimal128

и вероятно с некоторыми подтипами в binary

Всем привет! Коллеги подскажите столкнулся с ситуацией есть бэкапы шардов (консистентные) хочу восстановить их на единственный экземпляр монги, что бы вытащить допустим всего один документик. Как можно склеить бэкапы шардов в один? (тестирую бэкапы через утилиту Percona MongoDB Consistent Backups )

вливаете их в одну ноду и всё

но вы с перконой сами с собой останетесь