в данном случае обычный update с выставленным upsert:true. главное задать корректный фильтр

если upsert:true то будет будет работать проверка существует ли запись или нет ?

да

да

благодарочка )) плюсик в карму )))

да

это я упустил про чтении документации ))

Гайсы, а если несколько клиентов одновременно меняют запись, что происходит в Монго?

В айти не бывает одновременно

я думаю ты понял, что имелось ввиду

в доках написано что update поддерживает атомарность в рамках одного документа

не могу понять как это?

это значит что только одна операция записи будет проводиться над одним документом в один момент времени. используются стандартные блокировки на запись

также это значит что если одновременно из двух разных мест делается изменение значения поля, то результатом будет выполнение записи от самого нового

и туда же, если вы указыаете для фильтра некоторую информацию, которая меняется из другого коннекта, то от очередности зависит выполнится ли изменение или нет

смотри логи монги

Ну вот и причина: не хватает дескрипторов.

https://docs.mongodb.com/manual/reference/ulimit

Всем привет! Прошу помочь с агрегацией данных. Есть несколько коллекций со строками, и нужно сгруппировать строки по некоторым (кастомным) признакам схожести. Грубо говоря, из этого: { a: ['aaa', 'bbb', 'ccc'] b: ['aab', 'bbc', 'xyz'] c: ['aac', 'uvw', 'xyz'] } Должно получиться вот это [ { a: 'aaa', b: 'aab', c: 'aac' }, { a: 'bbb', b: 'bbc' }, { a: 'ccc' }, { b: 'xyz', c: 'xyz' }, { c: 'uvw' } ] Изначальных коллекций около 20, размерность каждой - порядка 100тыс. записей. Насколько это трудоёмко в реализации и по быстродействию на монге? Или имеет смысл смотреть в сторону реляционных БД?

по всем коллекциям сразу невозможно

а так https://docs.mongodb.com/manual/reference/operator/aggregation/group/

Насколько я понимаю, таким образом можно группировать только по предустановленным аккумуляторам... Проблема в том, что у меня в роли аккумулятора - кастомная js-функция сравнения. Я могу её каким-то образом применить для группировки?

нет

хотя, можно использовать map-reduce и там уже что угодно в пределах почти чистого Js

но MR такое себе, если операции редкие то пойдет

ок, спасибо, буду пробовать!

если инициализация процесса происходит через systemd, то лучше прямо в service-файле прописать LimitNOFILE=%num%

пытаюсь подключиться к кластеру и получаю ошибку: "com.mongodb.MongoTimeoutException: Timed out after 30000 ms while waiting for a server that matches ReadPreferenceServerSelector{readPreference=primary}. Client view of cluster state is {type=UNKNOWN, servers=[{address=cluster.mongodb.net:27017, type=UNKNOWN, state=CONNECTING, exception={com.mongodb.MongoSocketReadException: Prematurely reached end of stream}}]" Кто-то сталкивался с таким?

кластер уже создан, админ с паролем есть

Коллеги, а как сообщить mongos, что конфиг сервер другой?

MongoTimeoutException ну это тснадартный эксепшн, когда драйвер не видит монгу, 95% что неверный коннекшн стринг

если речь про старт приложения и монга жива

Коллеги, а как сообщить mongos, что конфиг сервер другой?

в конфиге

если речь про старт приложения и монга жива

монга жива, коннект установлен, имя хоста указал

> коннект установлен это как определяется?

в конфиге

лайв хочется

лайв хочется

Если в настройках указаны хосты, то вы можете поменять адреса в dns. Емнип, монга раз в какое-то время обновляет записи. Если по ip настроено, то будет практически невозможно без даунтайма

> коннект установлен это как определяется?

mongod запущен

запущенный mongod это не коннект к mongod )

пытаюсь подключиться к кластеру и получаю ошибку: "com.mongodb.MongoTimeoutException: Timed out after 30000 ms while waiting for a server that matches ReadPreferenceServerSelector{readPreference=primary}. Client view of cluster state is {type=UNKNOWN, servers=[{address=cluster.mongodb.net:27017, type=UNKNOWN, state=CONNECTING, exception={com.mongodb.MongoSocketReadException: Prematurely reached end of stream}}]" Кто-то сталкивался с таким?

Проверьте настройки сетевых фильтров

Вероятно подключения к серверу просто дропаются

а монга локально запущена вместе с приложением или на виртуалке до которой надо достучаться?

Если в настройках указаны хосты, то вы можете поменять адреса в dns. Емнип, монга раз в какое-то время обновляет записи. Если по ip настроено, то будет практически невозможно без даунтайма

Да не, хост тот же, порт тот же, но если rs.initiate() на config server неудачно прошло, откатили назад и прорестартили, и config server теперь standalone, а монгоc хочет реплсет (в логах пишет)

запущенный mongod это не коннект к mongod )

ну в shell я поключаюсь нормально, в compass тоже, но когда запускаюсь через свое приложение, то мне вылетает ошибка

хотя указал по примеру документации, прописав свой кластер

а юзера с паролем?

а юзера с паролем?

прописал его в коде

в кластере тоже добавлен

можно попробовать указать всё в коннекшн стринге, лишнее из кода удлаить

Да не, хост тот же, порт тот же, но если rs.initiate() на config server неудачно прошло, откатили назад и прорестартили, и config server теперь standalone, а монгоc хочет реплсет (в логах пишет)

А зачем вам менять адреса конфиг-серверов?

Вам нужно CSRS вернуть в штатный режим

Ну вот и я говорю - адреса менять не надо

Надо именно вот это сделать, только как? )

можно попробовать указать всё в коннекшн стринге, лишнее из кода удлаить

в коде прописал таким образом MongoClientURI connectionString = new MongoClientURI("mongodb://юзер:пароль@кластер.mongodb.net:27017");

конфиг сервер прорестартил, предварительно вернув конфиг в исходное состояние

Убедиться что все CSRS ноды запущены и видят друг друга

Стоп. Нет

Мне нужно SCCC

Обратно SCCC. Вот что мне нужно. Монгос этого не понимает. Как ему объяснить?

SCCC — устаревший и не поддерживаемый механизм.

>кластер.mongodb.net:27017 а о каком кластере речь и почему только один хост? для реплика сета хосты указываются через запятую

В 3.4 его уже нет

>кластер.mongodb.net:27017 а о каком кластере речь и почему только один хост? для реплика сета хосты указываются через запятую

стандартный бесплатный кластер, который можно создать для начинающего

>кластер.mongodb.net:27017 а о каком кластере речь и почему только один хост? для реплика сета хосты указываются через запятую

кстати, а мне нужно несколько хостов указывать?

>стандартный бесплатный кластер, который можно создать для начинающего про облачную монгу не в курсе, но вообще да, если делать самому например

https://docs.mongodb.com/manual/reference/connection-string/ mongodb://[username:password@]host1[:port1][,host2[:port2],...[,hostN[:portN]]][/[database][?options]]

https://docs.mongodb.com/manual/reference/connection-string/ mongodb://[username:password@]host1[:port1][,host2[:port2],...[,hostN[:portN]]][/[database][?options]]

спасибо. скорее всего упустил момент с написанием нескольких хостов

SCCC — устаревший и не поддерживаемый механизм.

Это так типично для ру комьюнити - учить жить вместо ответа на вопрос

Это так типично для ру комьюнити - учить жить вместо ответа на вопрос

тут проблема ток в том что ты читать не хочешь, откатись на ту версию где это работает

можешь взять исходники и портировать на 3.4

тут проблема ток в том что ты читать не хочешь, откатись на ту версию где это работает

Проблема в том, что ты читать даже не пробовал

Я нигде не сказал, что у меня та версия, где это не поддерживается

Это так типично для ру комьюнити - учить жить вместо ответа на вопрос

Вы на сутки в read-only за хамство. Наша группа для помощи, а не для выяснения отношений. Если вы не может чётко сформулировать свою проблему и начинаете хамить на попытки других разобраться в вашей проблеме, значит вы сами не понимаете в чём проблема. Разберитесь в проблеме и возвращайтесь для продуктивного диалога. «Учение жизни» про deprecation and removal SCCC из официальной документации: > Starting in 3.4, the use of the deprecated mirrored mongod instances as config servers (SCCC) is no longer supported. Before you can upgrade your sharded clusters to 3.4, you must convert your config servers from SCCC to CSRS. https://docs.mongodb.com/manual/core/sharded-cluster-config-server По вашей проблеме: официальных плейбуков по откату с SCCC нет. Не понятно на какой вы версии, но вероятно вам необходимо сначала восстановить конфигурационные сервера, а потом перезапустить все монгосы. Если это результат неудачного обновления, вам необходимо убедиться что вы используете версии всех компонентов младше 3.4.

Привет ребят, подскажите, как скормить mongodb csv или json файл с украинским языком? Каждый раз в коллекцию добавляются кракозябры, пробовал и utf-8, 1251 и KOI8-U

странно, ни разу проблем не было

что вы имеете ввиду скормить?

Когда я в коллекцию добавляю через import data csv/json файл с украинским языком.

Мне или выдаёт ошибку.

Или если после брутфорса всех возможных кодировок оно съедается, то на выходе имею арабскую вязь, вместо языка.

Или если после брутфорса всех возможных кодировок оно съедается, то на выходе имею арабскую вязь, вместо языка.

постоянно делаю иморт украинского в utf-8, все ок. Скорее всего проблема с кодировками CSV/JSON, возможно была проблема конвертации в utf-8

@dd_bb а у тя есть скриншты графиков с твоего экпортера ?

я чот в паблике не вижу