Всегда с момента запуска?

Всегда с момента запуска?

Нет не сразу, после поиска по базе, база большая, интересно как предотвратить чтоб не выгружалось все в оперативку .

чтобы они не конкурировали за ресурсы

я уже думаю может разбить одну большую коллекцию на несколько перестроить структуру бд подругому - чтоб динамически создавать коллекции - чтоб небыло такого что одна коллекция 30 гиг.

еще есть проблема - при таком размере бд - когда сильно нагружать бд - на запись образного говоря за 10-15 минут примерно 1 гигабайт информации загружать в бд - бывает вылетает бд в ошибку invalid BSON приходится запускать восстановление, в конкретно самой большой схеме из 20 полей схемы 5 с индексами. Я еще до конца не понял как с этим боротся - то ли из за большого обьема индексов база крашится то ли хз.

еще есть проблема - при таком размере бд - когда сильно нагружать бд - на запись образного говоря за 10-15 минут примерно 1 гигабайт информации загружать в бд - бывает вылетает бд в ошибку invalid BSON приходится запускать восстановление, в конкретно самой большой схеме из 20 полей схемы 5 с индексами. Я еще до конца не понял как с этим боротся - то ли из за большого обьема индексов база крашится то ли хз.

а вы уверены что все данные валидные попадают в базу в этот момент?

главное позаботиться чтобы на сервере помимо монги ничего не было особо

Ребят, в mongoose есть поле у коллекции, оно типа Object. Хочется чтобы быстро происходил поиск по значению какого-то ключа для этого Object. Поможет ли просто создать индекс для этого поля? application: { type: Object, index: true, default: null, },

еще вопрос - а если разбить одну большую схему на множество динамических - некоторые из них будут архивные к которым наврят будут запросы а другие активные - оперативки меньше будет процес монги сьедать ? если размер данных в схеме по которой идет поиск будет меньше ? или при поиске все схемы подгружаются в оперативку без разницы используют их или нет ?

Как вариант, если есть понимание, какие документы "архивные", например, документы, которым уже месяц от роду, то можно заюзать частичные индексы, и искать только по докам которые не старше месяца. Тогда будет использоваться только этот относительно небольшой индекс Про частичные индексы тут https://docs.mongodb.com/manual/core/index-partial/

спасибо

Но документы придется помечать, как архивные, либо обновлять индекс раз в определенное время. Насколько я знаю, нет возможности использовать в partial index динамическую переменную

получается монга сьедает так много оперативы из за индексов ?

получается монга сьедает так много оперативы из за индексов ?

Если у тебя простой запрос и есть возможность подключиться к базе напрямую через MongoDB Compass, то там есть удобная вкладочка Explain Plan. Это поможет отловить неэффективные запросы, например, блокирующую сортировку, которая читает все документы в базе О результатах explain можно почитать тут: https://docs.mongodb.com/manual/reference/explain-results/ и https://docs.mongodb.com/manual/tutorial/analyze-query-plan/ Но, вкратце, если ты видишь "winningPlan" : { "stage" : "COLLSCAN", то, вполне возможно, твоя проблема в этом.

еще вопрос - а если разбить одну большую схему на множество динамических - некоторые из них будут архивные к которым наврят будут запросы а другие активные - оперативки меньше будет процес монги сьедать ? если размер данных в схеме по которой идет поиск будет меньше ? или при поиске все схемы подгружаются в оперативку без разницы используют их или нет ?

еще вопрос - а если разбить одну большую схему на множество динамических - некоторые из них будут архивные к которым наврят будут запросы а другие активные - оперативки меньше будет процес монги сьедать ? если размер данных в схеме по которой идет поиск будет меньше ? или при поиске все схемы подгружаются в оперативку без разницы используют их или нет ?

внутренний менеджер монги выгружает на диски не используемые данные, поэтому разделение на холодные/горячие коллекции имеет смысл

Добрый день, а можно как-то грамотно сделать выборку из нескольких коллекций используя mongoose или лучше что-то по типу Promise.allSettled использовать ?

populate() если нужно связанные данные подгрузить

Всем привет! Подскажите пожалуйста, MongoDB в облаке, это Mongo Atlas ?

{chatmembers.username : {$in:[ req.username]}}

Всем привет! Созрела необходимость перенести коллекцию из одной базы в другую, не используя dump, а исключительно из IDE. Не подскажете, каким образом это можно провернуть? Версия монги 4.2.8

Только кодом всмысле?

Да

Можно попробовать вот это https://docs.mongodb.com/manual/reference/operator/aggregation/merge/ , но переносит только коллекцию, индексы не трогает

всем привет, а как можно посчитать колво строк при условие? db.getCollection("user_bonuses").find({is_finished: 0 }).count() Выдает count is not supported

Есть готовый метод .countDocuments()

а не подскажите, зачем создан метод getCollection? Можно ж просто название коллекции писать

есть системные коллекции со странными именами, типа rs.oplog

подскажите, как можно посмотреть дату создания документа?

подскажите, как можно посмотреть дату создания документа?

вреде нашел ObjectId ( "507c7f79bcf86cd7994f6c0e" ). getTimestamp () такая команда сейчас проверю,