Для такой задачи лучше эластик присмотреть

Добрый день. Как реализовать поиск mongoose с текстовой оценкой результата? То есть поиск по не точным данным, например с ошибками. В каком направлении копать? Нашел вот такой пакет, но не уверен, что это лучшее решение https://github.com/VassilisPallas/mongoose-fuzzy-searching

как сказали выше копать в сторону от монги - в ней нет fuzz поиска на уровне БД, все что будет делаться это костыли

как сказали выше копать в сторону от монги - в ней нет fuzz поиска на уровне БД, все что будет делаться это костыли

Плохая идея использовать костыли, если это будет использоваться относительно редко?

да

Полудомашняя разработка так сказать.

Плохо, ладно Спасибо

если редко - значит можно вообще отказаться

Вам в @nodejs_ru

Всем привет, подскажите пожалуйста, что быстрее - обновлять документ в монго или делать его реплейс?

обновлять

А почему?

если в коллекции есть индексы, но обновление не затрагивает индексируемые поля, то индексы не будут обновлятся. в случае с replace они обновляются

плюс для репликации replace это дорогая операция, так как в оплог попадёт весь документ, а не фактические изменения

плюс для репликации replace это дорогая операция, так как в оплог попадёт весь документ, а не фактические изменения

Спасибо)

Подскажите, можно ли делать одновременно $push и $set по одному полю?

Точнее даже не так. Всегда ли можно делать $push и $set по одному полю одновременно в одном запросе. Почему спрашиваю? Вот здесь применяется такая логика: https://github.com/mongodb/mongoid/blob/master/lib/mongoid/atomic/modifiers.rb#L195 Вкратце - если нам нужно добавить в пуш поле, которое уже есть в сет или пул, то нужно направить его на второй запрос.

как правильнее, сначала добавлять рут юзера, потом собирать репликасет, или сначала репликасет, потом рута?

@dd_bb

как правильнее, сначала добавлять рут юзера, потом собирать репликасет, или сначала репликасет, потом рута?

От перемены мест слогаемых...

Господа, я написал свое небольшое "ОРМ" поверх монги и хочу его тестить. Есть ли какое-то state-of-art решение для симуляции монго? Или лучше поднять отдельную тестовую базу, где тестить этот ОРМ ?

Господа, я написал свое небольшое "ОРМ" поверх монги и хочу его тестить. Есть ли какое-то state-of-art решение для симуляции монго? Или лучше поднять отдельную тестовую базу, где тестить этот ОРМ ?

что такое "state-of-art" ? пример бы какойнибудь

что такое "state-of-art" ? пример бы какойнибудь

Субьективно для меня - стандартный способ решения типовой проблемы. Наверняка, я не первый с таким вопросом Собственно, это дало мысль посмотреть, как тестят опенсорс ОРМ

Субьективно для меня - стандартный способ решения типовой проблемы. Наверняка, я не первый с таким вопросом Собственно, это дало мысль посмотреть, как тестят опенсорс ОРМ

По живой базе

Поднимать mlaunch из mtools

Но зачем ещё один ORM

Но зачем ещё один ORM

Хороший вопрос. Он достаточно легковесный. Но скорее это адаптация старого "ОРМ", который я написал под Google Datastore. Ну и интересно самому закопаться в детали и тонкости БД

что-то я запутался... сделал replicaSet, теперь хочу добавить юзера, запускаю mongo —host node1,node2,node3, подключает, но при rs.status() говорит "errmsg" : "command replSetGetStatus requires authentication", и что ему скармливать? Нет ещё юзеров...

пробовал всякие форматы типа --authenticationDatabase admin --username root --password ""

без юзера-пароля тоже хочет авторизацию..

что-то я запутался... сделал replicaSet, теперь хочу добавить юзера, запускаю mongo —host node1,node2,node3, подключает, но при rs.status() говорит "errmsg" : "command replSetGetStatus requires authentication", и что ему скармливать? Нет ещё юзеров...

https://docs.mongodb.com/manual/tutorial/enable-authentication/#localhost-exception

Подключайся к праймари через локалхост и создавай юзера с правами на создание других юзеров как минимум. Эксепшн закрывается после создания первого юзера.

Стоит ли шардировать коллекцию сразу, если ожидается, что за год в нее попадет 15кк документов по 2кб (avgObjSize) или тут шардирование вообще не нужно?

Подключайся к праймари через локалхост и создавай юзера с правами на создание других юзеров как минимум. Эксепшн закрывается после создания первого юзера.

А не правильнее ли тогда сначала создать рута, потом уже собирать сет?

А не правильнее ли тогда сначала создать рута, потом уже собирать сет?

Я не понимаю проблемы. Делаете простейший конфиг без авторизации. Собираете кластер, накидываете юзеров/ролей, тушите все инстансы, включаете в конфиге всех инстансов авторизацию, поднимаете и вперед.

Я не понимаю проблемы. Делаете простейший конфиг без авторизации. Собираете кластер, накидываете юзеров/ролей, тушите все инстансы, включаете в конфиге всех инстансов авторизацию, поднимаете и вперед.

Проблема - автоматическая сборка сета при запуске новой группы серверов.

Суть - автоматическая

Результат не изменится от того, на каком этапе вы включите авторизацию. Даже набор действий не изменится. Вам все равно переваливать инстансы для включения авторизации. Любую удобную последовательность выбирайте.

Результат не изменится от того, на каком этапе вы включите авторизацию. Даже набор действий не изменится. Вам все равно переваливать инстансы для включения авторизации. Любую удобную последовательность выбирайте.

"набор действий" как раз меняется. Вот у меня 1 хост, я на нём (и это может быть ЛЮБОЙ хост) делаю рута, и с него же собираю кластер. Хотя я так понимаю, если я с этого хоста запускаю сборку сета, скорее всего именно этот хост и будет примари, но - это на 100% и отмечено в доке, или только "обычно"? Не хочется сначала проверять список хостов после создания сета для поиска мастера. Не понимаю момента про "переваливать инстансы для включения авторизации", сколько кластеров собирали - никогда этого не делали. Добавили рута в сете - он автоматом на все хосты применился. Добавили юзера и базу - они автоматом появились везде, переключили мастера - рут работает, юзер работает, базы есть

для работы просто сразу вытягивается mongod.key и правится конф через sed на тему bindIp, установку рабочей папки и ключа.

Добавили юзера в базу и включили авторизацию - это разные вещи!

cat /var/lib/own/mongo/templates/mongod-addroot.js use admin; config = {user: "root", pwd: "{{password}}", roles:[{role: "root", db: "admin"}]} db.createUser(config) это через sed копируется в tmp, заменяя пароль на взятый из секретов, и применяется как cat /tmp/mongod-addroot.js | mongo

кстати вопрос, почему оно не работает как mongo mongod-addroot.js - так заявлено в доке, но по факту не работает..

Добавили юзера в базу и включили авторизацию - это разные вещи!

чего ещё не хватает? можно линком в доку. В 3.4 - никогда ничего не делали, в 3.6 и 4.2 которые только осваиваем может что-то и упускаем.

Добрый день, не получается найти инфу в гугле по двум вопросам, может кто знает? 1. Можно ли в монге ограничить коллекцию по максимальной длине документов в ней (например, чтобы нельзя было добавить больше 20 документов) 2. Можно ли ограничить массив в документе по длине (например, чтобы максимальная длина массива была 10 элементов)

чего ещё не хватает? можно линком в доку. В 3.4 - никогда ничего не делали, в 3.6 и 4.2 которые только осваиваем может что-то и упускаем.

Вы подняли новый сервер, подключились к нему, сделали рута в базе admin и дальше администрируете этот сервер, подключаясь к нему рутовым юзером. Изначально в конфиге или при старте инстанса, если вы все опции указываете в строке при старте, нет авторизации, т.е. наличие пользователей в вопросе безопасности доступа к данным не имеет значения без взведенной опции авторизации в конфиге или при старте в строке. Пример security: authorization: enabled

security.keyFile Type: string The path to a key file that stores the shared secret that MongoDB instances use to authenticate to each other in a sharded cluster or replica set. keyFile implies security.authorization. See Internal/Membership Authentication for more information.

но на что обратить внимание я понял, спасибо за ликбез.

А я провтыкал, когда вы написали про ключ, видимо)

А я провтыкал, когда вы написали про ключ, видимо)

ну вот изначальный вопрос и был завязан на том, что authorization: enabled и постоянно вылезали хвосты как нужно делать безопасно и правильно )

но всё-равно, ещё раз перечитал доку, чуть больше про security понял

Подскажите, можно ли как-то сжать данные при передаче по сети в монго? Может ли монго выдавать данные в сжатом виде? Есть данные хранящиеся в файлах и их необходимо после преобразований сохранить в монго, иногда читаю данные порциями, но из-за объемного json создается трафик.

Есть сжатие у монги, для использования его должен поддерживать драйвер клиента, скорее всего для всех драйверов это вопрос свежести.

Подскажите, можно ли как-то сжать данные при передаче по сети в монго? Может ли монго выдавать данные в сжатом виде? Есть данные хранящиеся в файлах и их необходимо после преобразований сохранить в монго, иногда читаю данные порциями, но из-за объемного json создается трафик.

https://docs.mongodb.com/manual/reference/configuration-options/#net-compression-option

https://docs.mongodb.com/manual/reference/configuration-options/#net-compression-option

спасибо, промахнулся когда искал

Всем привет. Хочу обновить монго с 2.4 до хотяб 3.4. Как это можно сделать кроме как постепенный апгрейд? dump->restore может пройти?

Всем привет. Хочу обновить монго с 2.4 до хотяб 3.4. Как это можно сделать кроме как постепенный апгрейд? dump->restore может пройти?

да, дамп-рестор рабочий вариант

да, дамп-рестор рабочий вариант

Спасибо

Добрый вечер! Имеется массив из строк activeOffers в базе данных, необходимо к нему добавить новый offerID, вроде понимаю, как это делается, но, возможно, промахиваюсь по синтаксису. Подскажите, что пишу не так, язык Go

разобрался? Я всё в хоботах забыл ...

разобрался? Я всё в хоботах забыл ...

кстати нет) просто другими задачами занимался буду благодарен, если поправишь)

дай функцию полностью

интеграционный тест писал?

кстати нет) просто другими задачами занимался буду благодарен, если поправишь)

Мне надо видеть что ты там еще накалякал )

если в запросе стоит сортировка "sort": { "createEvent.dateWhen": -1 }, а индекс создан :1

влияет ли это как-то на скорость выборки ?

нет

спасибо

порядок влияет когда индексы из нескольких полей и по каждому делается своя сортировка

подскажите как можно в хосте выставить параметр сжатия данных. Поддержка есть, но пока в инете нагуглить не могу

вроде так можно ?compressors=snappy

Всем привет! У монго есть проблема при очень многом инсерте за короткое время?

вроде так можно ?compressors=snappy

Как передаешь параметры dbPath и т.п.? Если через конфиг, по ссылке которую я ранее давал, если передаются все параметры в командной строке, есть ключ который можно найти по табличке вот тут: https://docs.mongodb.com/manual/reference/configuration-file-settings-command-line-options-mapping/

Как передаешь параметры dbPath и т.п.? Если через конфиг, по ссылке которую я ранее давал, если передаются все параметры в командной строке, есть ключ который можно найти по табличке вот тут: https://docs.mongodb.com/manual/reference/configuration-file-settings-command-line-options-mapping/

через конфиг spring boot для моего сервера. Через http на сервере монги также параметры задавались

А, это ты уже на стороне приложения сжатие включаешь. Тут я не подскажу.

на стороне монги включал не я, но с монги когда трафик шел, сжатия не увидели

на стороне монги включал не я, но с монги когда трафик шел, сжатия не увидели

https://github.com/mongodb/mongo-java-driver/blob/master/docs/reference/content/driver/tutorials/compression.md

Всем привет! У монго есть проблема при очень многом инсерте за короткое время?

При определенных условиях у всех будут проблемы с этой операцией

Зависит от дисков, от общего объема данных, от размера документа, от наличия индексов и тд

В общем случае это обычная задача БД

привет. mongod не запускается. помогите разобратся, не знаю что с этим делать

Там же написана совершенно четко причина по критерию STORAGE