как я тут оказался...

ясно

как я тут оказался...

Как?

Как?

точно

2 года уже сижу и думаю

как я тут оказался...

Я тоже

Первый раз вижу

Первый раз вижу

та. это я где то меесяца назад котвертнулся в кота из человека

та. это я где то меесяца назад котвертнулся в кота из человека

?

/mute

/leave

Вы аккуратнее с шутками, а то увидел, офигел, чуть не вышел

Да, шутка злая. Вроде не пил. Но не понял как оказася в MS SQL ?

с легким паром прям

Стоп, это чат по монге?! Я сюда за МССервером пришел...

Стоп, это чат по монге?! Я сюда за МССервером пришел...

У нас тут уже второе апреля

У меня только первое наступило. Мссерверы в Монге превратили

всем привет, ребят, подскажите плз, можно ли сохранять поддокумент в схеме или нужно сохранять только весь документ? допустим есть main схема, у неё есть подсхема test, можно ли делать не main.save(), а test.save()?

тут есть кто то кто хорошо так знает инглеш, нужно пару советов по изучению ?

вот тебе мой совет - найди профильный чат по инглишу и там спроси, они то всяко больше в теме

вот тебе мой совет - найди профильный чат по инглишу и там спроси, они то всяко больше в теме

я думаю иначе, человек который добился уже каких то успехов в изучении иностранного языка сможет более точно передать повестку, вот если я тебя спрошу с чего начать изучать Рассенский язык что ты ответишь ? я вот к примеру ничего не смогу ответить

я скажу, что надо найти группу изчения %SOME_LANGUAGE_NAME% и спросить там

т.к. они явно больше в теме

даже если я на достаточном уровне владею %LANGUAGE_NAME% и состою в той самой группе, то тут я тебе ничего не отвечу

Привет! Подскажите пожалуйста - чтобы забекапить 1.3Тб монги через LVM снапшот надо будет прицепить к серверу такое же место - 1.3Тб или больше?

Привет! Подскажите пожалуйста - чтобы забекапить 1.3Тб монги через LVM снапшот надо будет прицепить к серверу такое же место - 1.3Тб или больше?

Сам снепшот занимает не очень много места, это просто слепок состояния файловой системы.

учтите ещё такой факт, что снапшот желательно удалить после его снятия, так как он снижает скорость работы источника снапшота

не совсем понятно. если это только слепок - как из него потом восстанавливают данные? моя цель взять всю эту большую монгу и кинуть на другой сервер

не совсем понятно. если это только слепок - как из него потом восстанавливают данные? моя цель взять всю эту большую монгу и кинуть на другой сервер

Самый простой способ — поднять реплику

учтите ещё такой факт, что снапшот желательно удалить после его снятия, так как он снижает скорость работы источника снапшота

Эм. Сылку на анализ и бенчмарки?

Самый простой способ — поднять реплику

согласен

мм.. мне кажется что реплика не подойдет - потому что мне потом надо удалить эти данные с первого сервера..

у вас все на одном хосте крутиццо? репликасета нет?

не совсем понятно. если это только слепок - как из него потом восстанавливают данные? моя цель взять всю эту большую монгу и кинуть на другой сервер

Снепшот — дельта изменений данных.

Эм. Сылку на анализ и бенчмарки?

умоляю) это LVM, зачем ссылки-то

умоляю) это LVM, зачем ссылки-то

За тем, что это голословное заявление про производительность.

мм.. мне кажется что реплика не подойдет - потому что мне потом надо удалить эти данные с первого сервера..

Удалите старую реплику и всё

Если вам нужно сделать это без остановки монги. Если можете остановить то или переткните винты или просто скопируйте dbpath

Мм, у меня есть сервер- на нём стоит монга. Я хочу убрать текущие данные из монги на другой сервер, а новые данные (которые продолжают добавляться) пусть вновь копятся на текущем. Смогу ли я это сделать остановив монгу, сделав снапшот и потом восстанавливать данные на другом сервере из снапшота, а на текущем сервере удалив данные?

т.е. грубо говоря задача - забекапить данные и унести на другой сервак, после чего развернуть на другом серваке, а с текущего удалить.

За тем, что это голословное заявление про производительность.

проблема в общем-то известна. https://www.percona.com/blog/2009/02/05/disaster-lvm-performance-in-snapshot-mode/

просто пытаюсь понять можно ли это сделать через lvm snapshot или нет

т.к. по описанию снапшот делается за минуты, а mongodump может занять часы

Ещё раз повторю: вам ни dump не нужен, ни снепшот

Остановите монгу, скопируйте/перенесите dbPath на новый сервер.

На старом если они не нужны — удалите

т.е. физически скопировать /var/lib/mongodb?

Если хочется избежать остановки — добавьте реплику. Монга сама синхронизирует данные. После того как initial sync закончится, вы сможете вывести первую реплику из эксплуатации и сконфигурировать её по новой как хотите.

т.е. физически скопировать /var/lib/mongodb?

Остановить монгу и потом скопировать. Вы получите точную копию данных.

проблема в общем-то известна. https://www.percona.com/blog/2009/02/05/disaster-lvm-performance-in-snapshot-mode/

Статье почти 10 уже

я понимаю) у меня нет графиков и замеров сейчас при себе, но пару лет назад я ровно такую же картину наблюдал. Мало что изменилось

вот кстати интеерсный вопрос, представим есть mongodb в докер, 6 узлов, 4 узла зависли, волум у баз вынесен, какие шансы живую базу увидеть после рестарта контейнеров, если кластер был 3+3

вот кстати интеерсный вопрос, представим есть mongodb в докер, 6 узлов, 4 узла зависли, волум у баз вынесен, какие шансы живую базу увидеть после рестарта контейнеров, если кластер был 3+3

Нулевые

Нулевые

?осталось теперь это на собеседованиях объяснять, а то хотелки в монги в докере и под нагрузку с wt

Используте локальный стоградусен

Да блин

Сторадж локальный в смысле

ну так волум выделяется, и он вне контейнера, а тупо монтируется

Если он локальный и нет никаких хитрых инструментов шедулинга контейнеров, то есть шанс

?интересно когда уже мода всё в контейнеры пихать пройдёт

Если хранилище сетевое или есть шедулеры — получится суперпозиция, которая разрешится только при отказе :)

Не пройдёт, это хороший инструмент изоляции

Не пройдёт, это хороший инструмент изоляции

да, но всё подряд в неё пихать тоже глупо

Повторюсь ещё раз: монга в докере отлично работает. Если не использовать сетевых хранилищ (а это и без докера ничего хорошего не сулит) и не использовать шедулера контейнеров.

Шедулеры к сожалению не имеют полной картины состояния кластера монги и причины изменения топологии, и могут действовать в разрез с тем, что пытается сама монга сделать.

Например шедулер увидев что в шарде закончились реплики (дц отъехал) может принять фатальное решение поднять новую реплику

Я провёл много времени пытаясь написать нормальный скрипт для шедулинга реплик в ранчере и в итоге забил на это дело. Просто написал скрипт который позволяет автоматизировать настройку контейнера.

подскажите, выполняю запросы через скрипт, когда тестирую. И монго после каждого прогона отъедает кусок памяти и не возвращает обратно. Скрипт сейчас иногда дебажиться, выходит с ошибками и так далее. Где концы искать?

подскажите, выполняю запросы через скрипт, когда тестирую. И монго после каждого прогона отъедает кусок памяти и не возвращает обратно. Скрипт сейчас иногда дебажиться, выходит с ошибками и так далее. Где концы искать?

Монга никогда не гарантировала что она отдаст назад память.

и склоько она так может есть и как это контролировать? На локалькой машине за 3-4 запроса съедает всю оперативу

приходиться ее ребутать

при чем запрос одинаковый

Мне кажется вы не совсем верно интерпретируете «заняла всю память»

Вы можете частично отрегулировать размер WT cache, если у вас 3.x с WT стораджем.

По-умолчанию монга под кэш может использовать половину доступной памяти, но не меньше 1гб.

Но это только кеш, ещё есть всякие внутренние структуры монги, на которые вы повлиять никак не можете

Но как вообще механизм работает и где можно почитать? Не могу найти. Почему движок на один и тот же запрос отъедает куски. Запрос весит 500 мб. сейчас на виртуалке оператики 4 гига. В итоге монго после серии запросов держит на себе 3,5 гига

Но как вообще механизм работает и где можно почитать? Не могу найти. Почему движок на один и тот же запрос отъедает куски. Запрос весит 500 мб. сейчас на виртуалке оператики 4 гига. В итоге монго после серии запросов держит на себе 3,5 гига

Ну держит, и что?

все лагает

и тормозит

жутко