python

Не удается удалить поля вложенных объектов. В чем я не прав, когда прошу монгу об этом?

"parts.summary":1

тебе 10?

не возымело эффекта

оч странно, попробовала с updateMany и updateOne, все получилось 🤔

то, что это массив как то влияет?

нет, не должно

Вообще не работает ))

так, а почему вставка идет в коллекцию hello, а удаление - из item?

сорян, конкретно в этом случае запарился

ага, но если попробовать из hello удалить, тоже никак?

а на item никаких индексов нету на parts? с индексами не знаю, как работает. по идее не должно мешать, но мало ли

народ, привет подскажите, пожалуйста, как вывести все документы из коллекции? на find() почему-то выдает Type "it" for more

Есть коллекция в базе - следующего вида: В ней находится несколько миллионов документов. (с полностью идентичной структурой) Вопрос: Можно ли с помощью только лишь агрегации(или методов базы - без ЯП) решить следующую задачу? : 1) Проитерироваться по каждым 5-ти элементам из этой многомилионной коллекции (начать с первых 5-ти) 2) сделать выборку из этих 5-ти елементов таким образов что бы на выходе получился 1 документ получишвший выжимку из вышеуказанных 5-ти 3) отправить эту выжимку в новую коллекцию 4) начать следующую итерацию из 5-ти елементов(тоесть повторить предыдущий весь алгоритм) - и так пока вся коллекция не будет профильтрована.

1) skip, take, limit 2) aggregate 3) тут вам понадобится язык уже или просто жс скрипт(если разово) 4) 1 пункт

тоесть без языка никак - я правильно понял?

Пишите скрипт

вы имеете ввиду обычный js скрипт или какой то скрипт монги?

Монга на жс и работает)

это понятно но я думаю вы поняли вопрос имел ввиду скрипт на языке бекенда или на языке самой технологии монги

Скрипт - я имею ввиду просто как файлик или кусок кода, который не будет на вашем беке. А в этом файле вы можете юзать как и операторы монго, так и обычный жс код

обычный жс код к сожаление не подходит - слишком медленно все работает

Что обычный?

обычный жс код

Если вы просто читали фулл бд и не использовали ничего, выше перечисленного, то великом почитать доки) а также о работе с большими объёмами данных, техники, которые не зависят от sql/nosql

1) skip, take, limit 2) aggregate 3) тут вам понадобится язык уже или просто жс скрипт(если разово) 4) 1 пункт

на счет 3-го пункта не совсем понял - вроде же есть какой то stage-метод - который заносит в коллекцию полученные данные

Мб, в документации, можно все найти)

но какого то аналога цикла не существует получается в методах базы - я правильно понял? допустим положить можно полученные данные но запустить из монги прямо новую итерацию не получится - правильно?

Если уж так хотите, то зачем вам цикл? Ложите весь свой aggregate response в другую коллекцию. Смысл от цикла тут?

ну смысл в том что я же положу только отфильтрованные первые 5 документов из базы - а мне же надо остальную часть из базы дофильтровать

https://stackoverflow.com/questions/31231872/mongodb-lists-get-every-nth-item Мб Вам нужно что то из этого рода или подобное погуглить. Либо просто вы неправильно поставили задачу

Также вам нужно прочесть про обработку батчами - это решит вашу проблему тоже

единственный нюанс - огромные документы с глубокой иерархией и массивами

уже сделано батчем все

Тогда в чем проблема?

в том что как я выше описал я делал батчем но не использовал агрегацию

Какой батчсайз, сколько батчей и сколько рекордов в бд?

какой батч сайз я не мерял - но я пробовал ложить по 1-му елементу и по 1000 и по 10 000 - там разница во времяни 20 сек не больше

Как можно "не мерять" батч сайз, если вы его и задаёте. После этих слов вывод прост- ни фига у вас нету обработки батчами

я не знаю что значит его мерять - а что это могло бы изменить допустим если я его померял?

Прочтите что такое батчи и не задавайте глупых вопросов

http://joxi.ru/ZrJBJPYTQYERjr это можно было сделать не читая?

У вас нету обработки батчей, то что вы создали переменную bulk, ничего не даёт

У вас нету обработки батчей, то что вы создали переменную bulk, ничего не даёт

Если вы хотите ансетнуть что то из массива, то вам надо указать индекс элемента в этом массиве.