не оттого, что заблокировал себе сайт?

https://2ip.ru/rkn-blacklist/ тут вроде не числится их адрес

Всем добрый вечер. Подскажите пожалуйста, в чем может быть проблема. Монго 3.6.2 убунту 16. Все работало хорошо, но сегодня непонятно из-за чего, процесс завершился, и не запускается. systemctl status mongod - code=exited, status=1/FAILURE В чем может быть дело?

Всем добрый вечер. Подскажите пожалуйста, в чем может быть проблема. Монго 3.6.2 убунту 16. Все работало хорошо, но сегодня непонятно из-за чего, процесс завершился, и не запускается. systemctl status mongod - code=exited, status=1/FAILURE В чем может быть дело?

есть возможность в логи глянуть?

Вполне, главное понимать что никакой магии нет и сверхскоростей не будет на таком железе

Может есть информация о том, сколько клиентских запросов в секунду будет возможно обработать?

никто такой информации нигде не напишет, т.к. все зависит от данных, их структуры и размера, что вы с ними делаете, насколько кривой код написан в жабе и как сильного его подтормозит гц на таком малом хипе, плюс какова будет разблюдовка хип джавы/монга/свободная память для кеша фс. Не забываем что возмжно чтото еще будет крутитсья на серваке. И это я только про память. Дальше диски и ЦПУ. Короче делайте и тестируйте

если сделать чтото дико простое то 1к рпс мжно обрабатывать

посоветуйте какой-то курс по Rest Api на Express/MongoDB

есть возможность в логи глянуть?

посмотрел логи, ошибки не понял, но было связано с disk storage. проверил свободное место, оказывается тупо хард память кончилась. много логов хранится. почистил, все нормально работает?нужно немного заняться администрированием убунты

посмотрел логи, ошибки не понял, но было связано с disk storage. проверил свободное место, оказывается тупо хард память кончилась. много логов хранится. почистил, все нормально работает?нужно немного заняться администрированием убунты

типичная проблема...

посмотрел логи, ошибки не понял, но было связано с disk storage. проверил свободное место, оказывается тупо хард память кончилась. много логов хранится. почистил, все нормально работает?нужно немного заняться администрированием убунты

у нас была похожая проблема когда оплог разбух до предела. и монга просто встала. в логах пусто. она просто перестала работать. было сложно раскопать что произошло

но это было с какой-то старой версией

2.6 или 2.8 что ли.... точно не помню

если сделать чтото дико простое то 1к рпс мжно обрабатывать

Ок, спасибо

можно запросом удалить дубликаты записей по определенным свойстам?

Просто не получится. Нужно создать новую коллекцию с уникальными индексами по вашим полям и перелить туда данные с игнорированием ошибок дубликатов

Всем привет. Подскажите пожалуйста что быстрее в монго чтение или запись?

не хватает данных, какие у вас размеры данных и и структура, количество индексов, типы запросов на чтение, а так же какие серваки, диски, оператива, ЦПУ сеть, гед клиенты, какие драйвера используются

но и в таком случае никто не даст вам ответ

пока не протестируете ваш случай

Всем привет. Подскажите пожалуйста что быстрее в монго чтение или запись?

Запись почти всегда дороже чем чтение. Тупо физика

В случае с монгой писать вы можете со скоростью близкой к скорости своего хранилища, а читать со скоростью близкой к скорости вашей шины памяти.

В идеальном случае

Привет, товарищи! у меня совсем нубский вопрос сейчас будет. пытаюст получить отсортированные данные, но упираюсь в лимит памяти. использую такую команду db.colname.find().sort({param:-1}).limit(1000000) как лучше всего решить подобную задачу?

построить индекс param: -1

так, ок, а если я не могу трогать индексы?)

пытаться ограничить диапазон param

можно ещё попробовать Aggregation Framework и use_disk

но это будет скорее всего _очень_ медленно

ага, ясно, спасибо большое)

а добавление скипа котируется?

но в любом случае, на всю сортировку дают 32мб. Если 1 млн документов занимает больше 32мб, то только AF

а добавление скипа котируется?

без индекса не особо

угу, понял, благодарю. пойду читать)

монге в любом случае чтоб сделать скип, надо сначала отсортировать

потому что иначе как

ясно =\

но если у вас там сотни миллионов документов, то вам лучше схему пересмотреть

10кк

создайте пока индекс

попробуйте аккуратно сделать дамп и проверить на боевых данных

хорошо, сейчас попробую

если я при Post отправлю просто текст, то как его можно получить с req.body чтобы присвоить полю ?

попробуй использовать жквери

но это стёб, в какое поле запроса текст вставил так и получай

но это не имеет никакого отношения к монго

протупил. не то сделал и начал рамсить на монго

а как можно сделать вставку нового обьекта в такую структуру. Например есть Imagination, а я хочу еще один мир запостить. А то мне обычным сетом перезатирает worlds полностью "worlds": { "Imagination": { "games": { "game1": { } } } }

Полностью указать путь к полю через точки `data.worlds.Math.game1`

^

Чатик, гдето я пролюбил ссылку на доку, как правильно тушить sharded cluster. Поделитесь, плиз, у кого под рукой есть. Пока тушу так: - уложить mongos-ы - уложить каждый shard через db.shutdownServer(), последний с {force: 1} - уложить конфигсервер поднимать в обратном порядке - сначала configserver, затем каждый шард, и после этого сверху натянуть mongos в тестовом окружении работает, но не хочется что-то упустить.

Чатик, гдето я пролюбил ссылку на доку, как правильно тушить sharded cluster. Поделитесь, плиз, у кого под рукой есть. Пока тушу так: - уложить mongos-ы - уложить каждый shard через db.shutdownServer(), последний с {force: 1} - уложить конфигсервер поднимать в обратном порядке - сначала configserver, затем каждый шард, и после этого сверху натянуть mongos в тестовом окружении работает, но не хочется что-то упустить.

Ну как-то так, да

https://docs.mongodb.com/manual/administration/sharded-cluster-administration/

Спасибо!

У меня внезапно освободилось 15 часов на следующей неделе. Забукать можно или в личке или прямо вот тут: https://www.codementor.io/yopp

Второй момент, хочу завести какой-то блог или канал с советами и кейсами про монгу. О чём хотите почитать?

Второй момент, хочу завести какой-то блог или канал с советами и кейсами про монгу. О чём хотите почитать?

частые проблемы с перформансом

ERROR: S client not available

частые ошибки

бенчмарки и сравнения с другими дб. Это звучит тупо, но хорошие технические посты помогли бы обосновать свой выбор

Бенчмарки смысла не имеют совершенно.

Второй момент, хочу завести какой-то блог или канал с советами и кейсами про монгу. О чём хотите почитать?

Я бы хотел послушать про кластеризации и умные балансировки в монге

ну энивей, ты понял какая цель

Т.е. ты хочет узнать про типичные проблемы с производительностью и что с ними делать?

короче начни с публикации вещей, которых знает минимальное количество людей кроме тебя я бы так попросил сделать

Я бы хотел послушать про кластеризации и умные балансировки в монге

Умные в каком смысле? Шардинг с зонированием?

короче начни с публикации вещей, которых знает минимальное количество людей кроме тебя я бы так попросил сделать

или вещей, где у тебя точка зрения отличается от распространённой (и обоснованно отличается)

Умные в каком смысле? Шардинг с зонированием?

Да. Шардинг по гео, шардинг по ещё каким-то ключам и тд

короче начни с публикации вещей, которых знает минимальное количество людей кроме тебя я бы так попросил сделать

Тут есть проблема: моё личное ощущение субъективно и мне кажется что все и так всё знают :)

Да. Шардинг по гео, шардинг по ещё каким-то ключам и тд

?

а можно ли делать выборку по таймштампу, который в ObjectId хранится? Сходу не могу придумать как такое реализовать. То, что можно в выводе воспользоваться _id.getTimestamp() знаю Просто стало интересна возможность пользоваться индексом по _id в случаях когда поля даты нет, а хочется получить информацию не старше какой либо даты

а можно ли делать выборку по таймштампу, который в ObjectId хранится? Сходу не могу придумать как такое реализовать. То, что можно в выводе воспользоваться _id.getTimestamp() знаю Просто стало интересна возможность пользоваться индексом по _id в случаях когда поля даты нет, а хочется получить информацию не старше какой либо даты

Да. Просто создай руками ObjectId с нужной датой и используй в $gt/$lt условии в запросе

Тут есть проблема: моё личное ощущение субъективно и мне кажется что все и так всё знают :)

curse of knowledge

Всем привет

Второй момент, хочу завести какой-то блог или канал с советами и кейсами про монгу. О чём хотите почитать?

я бы почитал бест практис по NoSQL базам, проблемы с которыми сталкивался автор при использовании NoSQL и как эти проблемы были решены

Всем привет

neprivet.ru

neprivet.ru

это было приветствие, без сопровождения вопроса

я бы почитал бест практис по NoSQL базам, проблемы с которыми сталкивался автор при использовании NoSQL и как эти проблемы были решены

И желательно, чтобы не было вот так:

хотя я сейчас, по причине обучения, иду именно по левому пути

я бы почитал бест практис по NoSQL базам, проблемы с которыми сталкивался автор при использовании NoSQL и как эти проблемы были решены

Какие-то конкретные вещи интересуют? Это очень обширная тема

Какие-то конкретные вещи интересуют? Это очень обширная тема

Да всё о чем можно поговорить на тему баз данных. Вот сейчас переживаю миграцию на новую версию приложения с немного другой схемой бд и было бы здорово наткнуться на практики, как люди с монгой это делают. Также недавно наткнулся на разную скорость работы сортировок в монге при обычной выборке и агрегации, чтобы разобраться пришлось залезть в код. Вот такие вещи можно рассказать, у тебя явно есть чем поделиться

Умные в каком смысле? Шардинг с зонированием?

я бы почитал про это, да. Сюда же реплики на таких развесистых шардах, бест практикс по бэкапам и как это в целом менеджить (автоматически)

бгг. нам есть что на это сказать)))))

Да всё о чем можно поговорить на тему баз данных. Вот сейчас переживаю миграцию на новую версию приложения с немного другой схемой бд и было бы здорово наткнуться на практики, как люди с монгой это делают. Также недавно наткнулся на разную скорость работы сортировок в монге при обычной выборке и агрегации, чтобы разобраться пришлось залезть в код. Вот такие вещи можно рассказать, у тебя явно есть чем поделиться

если пришлось лезть в код, то и вам уже есть что рассказывать)