статистику чего?

а данных много?

Монго данных) А вообще под обработку будут уходить по 1.000 документов

может быть 5.000, зависит от ситуации

вероятно вам будет проще это сделать вне монги

если вам это надо однократно

Не желательно затягивать процесс больше чем на 0.5с, но можно обрезать ненужные поля

Думаю на лупбеке монга не отвалится от 1к документов =)

не уверен что возможно это реализовать через агрегацию. вероятно можно сочинить мап/редьюс

но если вам потом длинну интервалов считать, я бы это делал на бэкенде сразу

но вы выбрали совершенно не подходящую схему для этой задачи

Думаю вы правы, это нужно решать на бэкенде т.к. опыт не позволяет это сразу решить. А если уже возникнет проблема, то решу её по мере поступления

Благодарю)

ребят подскажите может есть какой-то правильный способ восстанавливать базу данных в монго, а то на не сильных серваках постоянно процесс заканчивается out of memory

ребят подскажите может есть какой-то правильный способ восстанавливать базу данных в монго, а то на не сильных серваках постоянно процесс заканчивается out of memory

Какой процесс? Монга или монгорестор?

Какой процесс? Монга или монгорестор?

mongorestore

А сколько памяти на сервере, на котором монгосерстор запускается?

А сколько памяти на сервере, на котором монгосерстор запускается?

4 гига

Монга на этом-же сервере?

Монга на этом-же сервере?

да

Монга на этом-же сервере?

но случаи бывали и когда не на том же

Можно попробовать восстанавливать по одной коллекции (nsInclude) и ограничить число соединений одним (numParallelCollections). Если дампы сжатые, то не использовать сжатие

А какая версия mongorestore?

3.4 на одном

А какая версия mongorestore?

но такая ситуация и на 4 версии тоже была но там монго в кубере для разработчиков(там вообще горе как сложно базу востановить)

В контейнерах процессы неверно определяют объём доступной памяти

Всем привет! Есть коллекция с неизвестным количеством документов. Подскажите, как читать ее не полностью, а по n-документов?

сделать find({}) и на получившимся курсоре установить batchSize

или смотреть как ваш драйвер устанавливает batchSize для find https://docs.mongodb.com/manual/reference/command/find/#dbcmd.find

В контейнерах процессы неверно определяют объём доступной памяти

ну а не в контейнерах

¯\_(ツ)_/¯

найдите условиях при которых проблема стабильно воспроизводится и засабмитьте в жиру

но вероятнее всего что в момент выполнения mongorestore (если у вас проблема именно с тем, что OOM хлопает именно его, а не mongod), у вас уже и так напряженка с памятью на сервере. дамп это просто bson блоб, где документы лежат один за другим. Т.е. для восстановления нужно памяти не больше чем число буферов под документы. Пусть там 4 потока для восстановления, то буффер будет 4*16Мб = 64Мб. Можно на 4 умножить, с учётом всяких побочных расходов. Ну тоесть не больше ~256Мб.

https://github.com/mongodb/mongo-tools/blob/3ad4e1118b958b1829bc68ccc6a21d2f2d2c94be/common/db/bson_stream.go#L85

вот тут можно ознакомится

я тебя забаню

ненада

если вы задали вопрос и нашли на него ответ, то не надо удалять свои сообщения

расскажите как решили свою проблему

https://www.youtube.com/watch?v=HaEPXoXVf2k

единственное что говорит он _очень_ быстро

смотреть можно в приципе с середины

Здраствуйте

как сделать схему масива Number и String

Всем привет как сделать схему масива Number и String

Всем привет как сделать схему масива Number и String

в монге нет схем, но если вы про монгус, то загуглите доку по нему

в монге нет схем, но если вы про монгус, то загуглите доку по нему

С 3.6 нативная валидация через JSON scheme

давно я про это не слышал))) наверное с выхода той самой 3.6

я не могу в доках найти Схему на масивы

если не сложно подскажыте кто нибуть

если не сложно подскажыте кто нибуть

https://mongoosejs.com/docs/schematypes.html

секция Arrays

@yatoba ничего не понял но спасибо)

numbers: [Number]

@yatoba вот смотри ща скину скрины я так делал

@yatoba

дефолт работает только

Ну так anyAnformation уже определен как массив чисел

Что еще требуется?

смотри делаю пост

сработал дефолт

@yatoba подскажы плиз

Проверте название полей

Гдето косяк, может русская буква

@yatoba

не было поля anyInformation)

Ребятки а что значит ключ

__v

версия

прочитайте доку по монгусу

всем привет! почему так работает: db.getCollection('profiles').update({ parsed: false, taken: true }, {taken: false}); а так нет: db.getCollection('profiles').updateMany({ parsed: false, taken: true }, {taken: false});

Error: the update operation document must contain atomic operators

$set видимо нет

да, нужен был $set, всем спасибо

Всем, такой ворос: допустим есть БД монго на mLab, так вот: REST API на express и Schema - этим занимается бэк?

вероятнее всего

Как можно создать уникальный числовой индекс в модели?

Начиная, например с 1