Точнее да, но это практически не влияет на итоговую latency

Потому что и так copy on write и записи в хранилище будут в случайном порядке, более того, один документ в хранилище тоже может быть в случайном порядке, если он не влазит в одну страницу

Это by design

Всем привет. Как наименее затратно сделать запрос в монго если такая структура: коллекция фирмы , у фирмы есть автосалоны своя коллекция, у автосалона есть подписчики , коллекция юзеры. Нужно выдать для фирмы первые 5 подписчиков. Голову ломаю как оптимизировать запрос. Проект на yii2

Первые по какому параметру?

Любые в принципе первые

Вам необходимо выбрать свойство, по которому вы хотите упорядочить документы, так как в монге нет гарантированного порядка по умолчанию.

Вам необходимо выбрать свойство, по которому вы хотите упорядочить документы, так как в монге нет гарантированного порядка по умолчанию.

а правильно я понимаю, что если в коллекции 100500+ документов и я делаю по ним по всем выборку и потом делаю лимит, то сначала будут выбраны все записи и потом курсором просто отсечено все что больше индекса 4?

или там как-то хитрее?

Если не указана сортировка то будет использован негарантированный $natural порядок, который базируется на внутреннем номере документа. Afair, это не требует collscan, но это не точно. Если указано поле, то в случае с индексом будет выбрано первых пят ключей индекса и возвращены документы соотвествующие этим ключам, если порядок сортировки совпадает с порядком индекса. Без индекса или если порядок не совпадает, монга попробует отсортировать все документы в памяти и если памяти хватит, то вернёт первые документы.

Если не указана сортировка то будет использован негарантированный $natural порядок, который базируется на внутреннем номере документа. Afair, это не требует collscan, но это не точно. Если указано поле, то в случае с индексом будет выбрано первых пят ключей индекса и возвращены документы соотвествующие этим ключам, если порядок сортировки совпадает с порядком индекса. Без индекса или если порядок не совпадает, монга попробует отсортировать все документы в памяти и если памяти хватит, то вернёт первые документы.

о как интересно, спасибо!

Привет, делал кто-то в монге историю изменений? В апке есть проекты которые могут изменять статус, нужно отслеживать время изменения статуса проекта. Как правильно хранить историю изменний? Лучше в документе проекта или создать отдельный документ для истории?

Привет, подскажите, пожалуйста, есть ли в MongoDB готовый (нативный) механизм версионирования документов? Нужно для хранения истории изменений документа в rails приложении по истории в чате - нашел только ссылку http://www.askasya.com/post/trackversions/ но с тех пор прошло уже почти 6 лет

на самом деле я ожидал вот этот линк https://github.com/mongoid/mongoid-history

сделайте после матча $project где вы оставляете только ваши поля А и В, и после этого сделайте эксплейн без хинта

На мой взгляд не особо помогает https://gist.github.com/ufian/97334972e4b423625716747921bb14d0

На мой взгляд не особо помогает https://gist.github.com/ufian/97334972e4b423625716747921bb14d0

Ради эксперимента сделайте не партиал индекс а нормальный на три свойства

Здорово народ, просветите по mongoDB shell. Написал такую тему 1) Баш скрипт, устанавливает нужные приблуды и монго, стартует монго сервер и в конце пинает монго шелл скрипт mongo < mongo-create.js 2) Сам монго шелл скрипт создает базу и сует простой документ use blogdb; db.articles.insert([ { name: 'learn-react', upvotes: 0, comments: [] }, { name: 'learn-node', upvotes: 0, comments: [] }, { name: 'my-thoughts-on-resumes', upvotes: 0, comments: [] } ]); Все работает как надо, только сам монго шелл скрипт имеет расширение .js (по доке вроде это правослано) и ясное дело ругается на синтаксис, ведь он не знает что такое 'use' или 'db'. Как это подправить и стоит ли вообще?)

Привет всем! скажите я начал изучать mongo db и есть вопрос, как вы понимаете в каком проекте лучше использовать mongo db а в каком mysql ?

Привет всем! скажите я начал изучать mongo db и есть вопрос, как вы понимаете в каком проекте лучше использовать mongo db а в каком mysql ?

существуют 2 критерия: объективные и субъективные) к объективным как правила относятся входные требования проекта и эмуляции на тестовом стенде. к субъективным интерес к новым технологиям и управленческие решения сверху. вам про какой из вариантов интереснее послушать?)))

существуют 2 критерия: объективные и субъективные) к объективным как правила относятся входные требования проекта и эмуляции на тестовом стенде. к субъективным интерес к новым технологиям и управленческие решения сверху. вам про какой из вариантов интереснее послушать?)))

я хочу понять почему сейчас так все писают кипятком от mongodb

существуют 2 критерия: объективные и субъективные) к объективным как правила относятся входные требования проекта и эмуляции на тестовом стенде. к субъективным интерес к новым технологиям и управленческие решения сверху. вам про какой из вариантов интереснее послушать?)))

объективное

почему все "писают" не могу сказать, могу назвать те плюсы, которые есть для меня их по большому счету 2: реплика и шардирование из коробки, отсутствие жесткой схемы.

а, ну и если говорить именно о сравнение с mysql, то еще полноценная поддержка работы с json (я давно с мускулом не работал, но то что я видел в нем раньше про json очень сильно расстраивало)

просто те кто юзают mysql говорят что mongo не для крупных проектов

имхо, это из разряда холивара. 5 лет назад тоже самое говорили сравнивая pg и мускул. 10 лет назад сравнивая оракл и pg

как по мне, нравится что нету sql, так же простота и удобно работать с json так как всё же spa пытаются сейчас все юзать

ну и маштабируемость

плюс нету сложных запросов от которых может грузится контент 5 лет

Из крупных проектов в РФ если ничего не путаю к слову джум работает на монге и юла (из того что слышал)

я такое встречал из за не оптимизированных запросов контент 10 сек грузился

плюс нету сложных запросов от которых может грузится контент 5 лет

Это все от бизнес задачи зависит

я такое встречал из за не оптимизированных запросов контент 10 сек грузился

А такое можно сделать в принципе с любым стораджем)

=))

А такое можно сделать в принципе с любым стораджем)

спасибо за ответ !

благодарен

не за что, ибо ответа по сути не было, т.к. его нет в принципе и все сильно зависит от конкретной прикладной задачи, ну и вашего личного интереса)

В mysql 8, вроде, появилась поддержка json.

В mysql 8, вроде, появилась поддержка json.

вроде в 5.7 еще появилась

да, есть

в 5.7 я видел, но там поиск по полям json объекта это был всегда fullscan. но это не по теме канала если что)

я хочу понять почему сейчас так все писают кипятком от mongodb

Хм, мне казалось, что монга была хайповой пять лет назад и больше, а щас уже просто рабочий инструмент.

просто те кто юзают mysql говорят что mongo не для крупных проектов

Хз как остальные, но в компании которой работаю я используют монгу только для агрегации данных. Там где нужно много джойнов - делают коллекцию, все туда собирают и по одному ID это быстрее достается на хите чем в Sql БД. Как основную я пробовал монгу юзать - проклял все на свете

Хз как остальные, но в компании которой работаю я используют монгу только для агрегации данных. Там где нужно много джойнов - делают коллекцию, все туда собирают и по одному ID это быстрее достается на хите чем в Sql БД. Как основную я пробовал монгу юзать - проклял все на свете

а с чем вы столкнулись если юзать её как основную ?

а с чем вы столкнулись если юзать её как основную ?

подозреваю что с тем же что и все начав использовать nosql после рсубд) с тем что не привычно)

и сложно в понимание после того к чему привык

а с чем вы столкнулись если юзать её как основную ?

я был молод и глуп, и ТЗ было отстойное)

Я для парсинга сайтов использую монгу, удобно, что можно просто складировать данные в коллекции, не заморачиваясь на схемы. Ну и просто удобно, что можно пихать питоньи структуры как есть в коллекции монги.

> удобно, что можно пихать питоньи структуры как есть в коллекции монги.

> удобно, что можно пихать питоньи структуры как есть в коллекции монги.

😂

Что? )

Что? )

потому что в монге хранится bson, но ни как не структура питона (ну или любого другого ЯП), где-то там посередине есть еще транслятор вашей питон структуры в bson и называется он драйвером)

не понятноо

потому что в монге хранится bson, но ни как не структура питона (ну или любого другого ЯП), где-то там посередине есть еще транслятор вашей питон структуры в bson и называется он драйвером)

Ну, да, bson, пихаю то я структуру. Можно и в постгрес, в принципе пихать, говорят, у него неплохие возможности по работе с json.

а кто на каких языках работает ?

=)

Python, Ruby

Путон.

js node js =)

ищу ментора по mongodb crud, что бы объяснил простым языком принцип работы

За деньги?

За деньги?

за хлеб

За деньги?

любой труд должен быть оплачен

Ребят, подскажите, как удалять документ если к нему не обращались какой то период времени?

Ребят, подскажите, как удалять документ если к нему не обращались какой то период времени?

при обращении записывай в createdAt текущую дату

при обращении записывай в createdAt текущую дату

это как то можно в мидлваре запилить? А то прописывать в каждом запросе атас

это как то можно в мидлваре запилить? А то прописывать в каждом запросе атас

можно

это как то можно в мидлваре запилить? А то прописывать в каждом запросе атас

https://mongoosejs.com/docs/middleware.html#notes

https://mongoosejs.com/docs/middleware.html#notes

Спасибо, то что нужно!

привет, есть репликасет из 3х нод. 2 из них занимают порядка 7гб, а одна 10,5. при этом она не примари. почему такое может быть?

привет, есть репликасет из 3х нод. 2 из них занимают порядка 7гб, а одна 10,5. при этом она не примари. почему такое может быть?

https://docs.mongodb.com/manual/faq/replica-sets/#is-it-normal-for-replica-set-members-to-use-different-amounts-of-disk-space 😒

Скажите, если я делаю db.doc.count({foo: 'bar'}) и на поле foo нет индекса, монга прочитает все документы doc полностью или прочитает с диска только данные поля foo из каждого докумена?

Я сам думаю, что полностью, хотя бы потому, что чтение с диска идёт минимальными единицами какими-то (блоки там какие-то или что-то такое), а документы у меня маленькие. Но вот, если бы поля были очень большими, тогда как бы чтение происходило, одно поле или весь документ?

Скажите, если я делаю db.doc.count({foo: 'bar'}) и на поле foo нет индекса, монга прочитает все документы doc полностью или прочитает с диска только данные поля foo из каждого докумена?

емнип, профайлер вам выдасть COLLSCAN, можете посмотреть через db.collection.explain(«allPlansExecution»).count()

Не понял вас, а что там может быть ещё кроме COLLSCAN, если индекса нет?

ничего, I suppose, вторую часть вашего сообщения было мною увидено посмле того как отписался мною ответ….

но, вроде бы, на мой взгляд, все-таки монга будет читать весь документ, потому что COLLSCAN предполагает следующее: Collection scans indicate that the mongod had to scan the entire collection document by document to identify the results. This is a generally expensive operation and can result in slow queries. https://docs.mongodb.com/manual/tutorial/analyze-query-plan/

Тем самым, монга так или иначе даже с большими полями без всякого того индекса на это поле будет читать документ за документом

монга 4.2 const query = ctx.db.db.collection<DbPayment>(Cols.Payments).find( { status: 'created', optype: 'cashout', executor: 'leo', }, { session }, ); const count = await query.count(); if (!count) { return null; } const payments = await query.limit(count).toArray(); return payments; я правильно понимаю что вместо этого кода нужно использовать aggregate $match, $project ?

задача: выгрузить все элементы из коллекции по запросу

Всем привет, прошу подсказки. У меня 32 бит и ОС Xubuntu. Поставил монго 2.6. и вот он ну никак не реагирует на sudo service mongod start , пишет unit mongod.service not found. Прочитал про рецепт sudo systemctl unmask mongodb, в ответ mongod.service does not exist. Есть идеи?

Всем привет, прошу подсказки. У меня 32 бит и ОС Xubuntu. Поставил монго 2.6. и вот он ну никак не реагирует на sudo service mongod start , пишет unit mongod.service not found. Прочитал про рецепт sudo systemctl unmask mongodb, в ответ mongod.service does not exist. Есть идеи?

А просто mongo?