чтоб ты всегда знал что у тебя бекапы работают

иначе будет как у гитлаба

стейджинг - это что? еще одна версия кластера?

что-то типа базы, в которую все восстанавливается из бекапа?

это среда для разработчиков, где они всё тестируют

ок. А что с выбором ФС для монги? в доках читал, что ext4 Не рекомендуется...все ставят xfs?

выбирай что хочешь! :)

история с форсом xfs недавно появилась

на самом деле нужно мерять и смотреть. если у тебя объём данных не очень большой, бери что удобнее

хоть zfs

кстати по объемам... вопрос не совсем корректный, но все же...очень большие репликасеты это сотни гигабайт, терабайты или десятки терабайт? при более менее стандартном железе с 10 рейдом и памятью под сотку? сколько монга прожевать может с дефолтными настройками, скажем?

от данных зависит

и от дисков

и от памяти :)

от железа короче.

но в целом, пока все индексы целиком взалят в память и ещё остаётся место под данные, с монгой будет всё хорошо

так-то у монги нет ручек которые имеют какие-то волшебные свойства

там есть несколько ручек которые можно покрутить в очень редких случаях, но в остальном настраивать в монге нечего :)

нужно данные правильно дизайнить

тюнить скорее придётся вне монги: сеть там и всё такое

по сети нормально. но очень много мелких документов по 1к. милиарды вощем

про бекап еще. если я забекапил каталог с монгой на хайден реплике, то этого же будет достаточно для разворота а репликасет, правильно я понимаю?

нет

точнее как, да

но нет :)

лучше разворачивать всегда из дампа

так)

потому что хоть монга и гарантирует консистентность на уровне фс, лушче всё-же лочить монгу на время архивации каталога с монгой

лучше уж тогда наверно вобще погасить демон?

в доке всё есть

монга вообще очень простая в экспулатации если внимательно читать документацию :)

https://docs.mongodb.com/manual/core/backups/

еще вопрос по шардированию. Сейчас реплика сет, коллекции сотни гигов. Планирую переделать в шард. При включении шардирования в коллекции, база лочится автоматически на время преобразования и т. п?

может не получится просто так взять и зашардить коллекцию

существующую

прикольно) а почему?

https://docs.mongodb.com/manual/tutorial/convert-replica-set-to-replicated-shard-cluster/#shard-a-collection

потому что хоть монга и гарантирует консистентность на уровне фс, лушче всё-же лочить монгу на время архивации каталога с монгой

Есть же fsynclock. Зачем из дампа?

Дамп на больших базах может никогда не закончиться)

Точнее как... не закончиться до начала следующего

Есть же fsynclock. Зачем из дампа?

для надёжности дампы нужно делать

можно fsynclock

но просто так «взял и скопировал» не выйдет

точнее как, выйдет конечно, но не факт что надёжно

прикольно) а почему?

там была какая-то петрушка с ключом кажется

не могу сходу найти

была короч какая-то засада с шардированием существующей большой коллекции

пока в доке я вижу, что надо просто добавить ключ, но я читал про баг, из-за которого по таймауту отваливался шардинг, но вроде починили его в 3,2

точнее как, выйдет конечно, но не факт что надёжно

Ну вообще они сами рекомендуют бекапы на уровне фс.

а сама база лочится во время шардинга?

даунтайм и вот это все есть?

там по ссылке всё есть

https://docs.mongodb.com/manual/reference/limits/#Sharding-Existing-Collection-Data-Size

во, нашел

короч пошардится лушче до того как коллекция станет террабайтной

ага. спасибо

а вот по конфиг серверам вопрос. Их какого размера делать? сколько на 1 терабайт, скажем, в основной базе приходится место на конфиг серверах?

Ну вообще они сами рекомендуют бекапы на уровне фс.

нет, они рекомендуют за бабки их Backup Agent использовать :)

а вот по конфиг серверам вопрос. Их какого размера делать? сколько на 1 терабайт, скажем, в основной базе приходится место на конфиг серверах?

они хуйню занимают

нет, они рекомендуют за бабки их Backup Agent использовать :)

Хз, в University не было ничего про backup agent

ну тоесть на 4Тб у меня кажется гига нет

Хз, в University не было ничего про backup agent

я университетов не кончал! :D

1 к 4 получается конфиг сервера расчитываются?

примерно

конфиг-сервера это теперь наконец тоже репликасет

количество конфигов влияет в основном на доступность, а не на производительность кластера

монгосы хранят карту шарда в памяти

из конфигов они читают только оплог изменений метаданных

в конфиги что-то пишется когда чанки меняются

интересует больше размер данных под конфиг сервера и насколько они к памяти требовательны?

яж говорю

то есть размер данных НА конфиг серверах

ну то есть 1 к 4 примерно?

не требовательны: дай им пару гигов памяти и гигов десять диска

1 чего к 4 чего?

ну ты написал, что у тебя 4тб и нет даже 1тб на конфиг серверах

даже нет 1гб 5)

ща проверю

а...точно. невниматеьно посмотрел)

Data Size: 78.1 MiB :D