я потом понял это , что массив общий а объектов скок это надо узнать

Коллеги доброго дня, довольно простой вопрос, так как прогуглиные ответы не помогают у меня есть массив объектов у каждого из них есть _id = new ObjectId("63c7c38223f4418ac0fc991f") - вот такого формата как мне преобразовать дабы сравнить с 63c7c38223f4418ac0fc991f?? или второй id преобразовать как то

.toString()

Is there any way to transform data from any db to mongo without coding or stored data manually

export as json\csv and import

How

It is possible to load data through mongodb compass

It is possible to load data through mongodb compass

Подскажите в агрегациях { $match: { $text: ... } } нельзя использовать, кроме как в начале самой агрегации?

Привет. Подскажите корректный способ удаления большого набора записей из большой коллекции по фильтру неиндексированного поля. Поле фильтрации содержит дату. Запросы выполняются долго. Может есть какой нибудь вариант скрипта когда сперва выполняется запрос на выборку а потом удаляем по id найденым и все это в цикле до последнего батча поискового запроса?

Или если включить TTL насколько это повлияет на скорость работы с коллекцией? Насколько корректно выполнять такую операцию через TTL , а потом просто отключить?

Подскажите, пжл, по паймонго, где-то косяк... Делаю две временных засечки min_timestamp = ObjectId.from_datetime(datetime.datetime.now()) time.sleep(1) max_timestamp = ObjectId.from_datetime(datetime.datetime.now()) контрольный запрос по случайному айди работает print (list(my_collection.find({"_id": ObjectId('63516e23457b7c1b6aaef61b')}))) А вот так не работает, когда я фильтрую по этим засечкам print (list(my_collection.find({"_id": {"$gte": ObjectId(min_timestamp), "$lt": ObjectId(max_timestamp)}}))) непонятно - по идее, должны быть айдишники в заданном диапазоне, т.к. наполнение БД идет вот прямо в данный момент

хз как тут питон работает, но второй раз оборачивать в objectid действительно надо?

Привет. Подскажите корректный способ удаления большого набора записей из большой коллекции по фильтру неиндексированного поля. Поле фильтрации содержит дату. Запросы выполняются долго. Может есть какой нибудь вариант скрипта когда сперва выполняется запрос на выборку а потом удаляем по id найденым и все это в цикле до последнего батча поискового запроса?

я делал перезапись коллекции, у меня обновления каждые 15 минут, по 15-25млн объектов были. я делал следующее: 1. создаём новую коллекцию 2. наполняем ее нужными записями 3. удаляем старую 4. переименовываем новую в старую

Да такой вариант тоже рассматриваю, спасибо

при таком решении, если нагрузка большая на базу, коллекция может быть недоступна порядка 5-7 секунд, стоит отловить исключения в этот момент, что бы пользователи не испытывали дискомфорта

это пока причина, по которой не хотелось бы использовать этот способ. Думал может есть способ без остановки приложения запустить удаление не сильно влияющее на чтение из коллекции.

а приложение ни кто и не останавливает, просто обе коллекции блокируются на время переименования

один мудрец изощрился вообще прокидывать через трубы между процессами и шару памяти в приложении, менять конфиг приложения на лету, при этом просто изменяя название переменной хранящей название коллекции, на новое название коллекции "новая_2", старая называется "новая_1". недоступность коллекции при таком способе около 0.001 секунды, но это для какого-то космического владения языком и знанием его исходников

и для тестов используйте фиксированное время, а не вызов now

не понял пока почему, но именно это сработало. Почему то значения, полученные через datetime.datetime.now() не работали как диапазон

Всем привет - подскажите как в монге на лету (во время поиска/запроса) слить две коллекции вместе и делать по ним пагинацию ? Суть в том что есть две коллекции с тем же типом данных и мне нужно делать поиск по двум коллекциям, сортировку и пагинацию по результатам offset + limit, как можно на лету слить эти две коллекции в aggregation (или может есть другой вариант) и сделать по ним пагинацию/сортировку ? В доке не нашел подходящего ничего... подскажите кто шарит как это сделать ? Спасибо.

https://www.mongodb.com/docs/manual/reference/operator/aggregation/unionWith/

Приветствую всех, подскажите как можно вывести все строки содержащие все элементы запроса независимо от их расположения? к примеру у меня есть записи: Le Paul Vens, 123123 Vens Paul Le , 123123 Vens Le Paul , 123123 person Le Paul Vens, 123123 Denis Melnik , None мой запрос выглядит следующим образом: query = {"$text": {"$search": "\"Le Paul Vens\""}} он выводит все записи где встречается фраза: Le Paul Vens но мне нужно вывести все строки где встречается фраза Le Paul Vens независимо от расположения каждого слова. как мне составить запрос?

я делал: {'$match': {'$text': {'$search': "string"}}} всё работает. он разбивает поисковую фразу по пробелы по дефолту и вне зависимости от последовательности находит разные варианты. работает только для текстового индекса

у меня возникает ошибка unknown top level operator: $match. If you have a field name that starts with a '$' symbol, consider using $getField or $setField.

.aggregate({'$match': {'$text': {'$search': "string"}"}}}, {'$sort': {'score': {'$meta': "textScore"}}}) естественно

как я понял здесь используется метод поиска OR, можно ли сделать тоже самое с AND? чтобы не выводились строки где только один элемент из моей фразы

а как в монго можно посчитать кол-во строк, которые удовлетворяют условию? И вообще такое можно сделать?\

Подскажите, пожалуйста, по следующему вопросу: Планирую весь контент сайта разместить в БД MongoDB. Сайт у меня на трёх языках (русский, английский, испанский). Вопрос: нужно ли мне для каждой языковой версии создавать новую базу данных или достаточно в одной БД создавать разные коллекции для каждого языка по отдельности? Как правильнее или удобнее? Спасибо!

недавно занимался мультиязычностью задача была - статьи на 4х языках. с возможностью независимого редактирования и параметров у каждой, все языки должны находиться в 1 объекте, в итоге пришёл к такой структуре: {uuid: str, lang_1: {other fields}, lang_2: {other fields}, ... lang_100500: {other fields}} может есть решения и лучше, но пока не встречал, да и смотря какие задачи проводить требуется с объектами. лучше исходить от задач и прогонять use-case's, смотря соответствие модели данных

Это начально условие такое, что все языки должны находиться в 1 объекте? Или так удобнее было делать? Я то вообще рассматриваю - либо отдельную БД для каждого языка, либо коллекцию для каждого языка. А тут ты вообще предлагаешь всё в один объект. Даже не думал о таком решении. Надо подумать над таким способом. Спасибо за вариант!

Подскажите, пожалуйста, по следующему вопросу: Планирую весь контент сайта разместить в БД MongoDB. Сайт у меня на трёх языках (русский, английский, испанский). Вопрос: нужно ли мне для каждой языковой версии создавать новую базу данных или достаточно в одной БД создавать разные коллекции для каждого языка по отдельности? Как правильнее или удобнее? Спасибо!

В одной коллекции, локализуемые поля удобнее всего хранить как: field_i18n: [{lang: "en", value: "hello"}, {lang: "ru", value: "привет"}] тогда можно использовать индекс field_i18n.lang, field_i18n.value это самый гибкий из возможных вариантов, так как и хорошо индексируется и позволяет иметь произвольное количество языков и при желании в одном запросе можно сразу сделать fallback на нужный язык

Всем привет! Кто знает как делать поиск в монге по полному совпадению в массиве? Есть запись в базе { name: 'test', array: [{ key: 'test' }] } если я использую весь объект как фильр .find({ name: 'test', array: [{ key: 'test' }] } ) Не находит запись, как это исправить? В жини array может содержать N объектов и поиск будет осеществляться по полному совпадению. Это для проверке на полное совпадение

Всем привет! Кто знает как делать поиск в монге по полному совпадению в массиве? Есть запись в базе { name: 'test', array: [{ key: 'test' }] } если я использую весь объект как фильр .find({ name: 'test', array: [{ key: 'test' }] } ) Не находит запись, как это исправить? В жини array может содержать N объектов и поиск будет осеществляться по полному совпадению. Это для проверке на полное совпадение

Попробуйте .find({name:'test','array.key':'test'})

не срабатывает, пробовал и array.0.key':'test'

Ребят, как лучше делать админа в MongoDB? Специальное булевое значение в массиве пользователя, прям внутри кода точечно указав айди или токен?

лучше сделать роли

Есть какой-то кусок кода, для наглядности?

А по умолчанию, в начале юзера делать

roles managment ваш язык - и найдете

Подскажите, пожалуйста, по следующему вопросу: Планирую весь контент сайта разместить в БД MongoDB. Сайт у меня на трёх языках (русский, английский, испанский). Вопрос: нужно ли мне для каждой языковой версии создавать новую базу данных или достаточно в одной БД создавать разные коллекции для каждого языка по отдельности? Как правильнее или удобнее? Спасибо!

Если планируется очень высокая нагрузка разделённая по направлениям, то имеет смысл разделить. В других случаях просто увеличите сложность решения

Если планируется очень высокая нагрузка разделённая по направлениям, то имеет смысл разделить. В других случаях просто увеличите сложность решения

Ну на счет сложности я бы тут усомнился. Возьмем облако тегов, там есть теги на русском а есть на английском, и получается что нужен будет вместо простой выборке по массиву, выбирать из массивов объектов с фильтрацией по языку. Плюс если одновременно с документом работают разные контенщики каждый своего языка… Я бы взвесил, вынести по коллекциям языковым идея тоже жизнеспособна

обычный полнотекстовый поиск без указания дефолтного языка в поле, отлично работает с разными языками

Это как пример, мне например в интернет магазине приходится выносить поля фильтров в корень документа, так как с вложенными монга начинает захлебываться

индексы составные или обычные используются при этом? если не в корень выносить

Составные