будет по 1 :)

это не index-only query

я запустил и сервер перестал работать

так на время создания индексов коллекция лочится

будет по 1 :)

согласен, док с диска еще прочитать и вернуть нужно)

большая коллекция?

так на время создания индексов коллекция лочится

А чтош вы не сказали :D

большая коллекция?

3-5 млн

а размер? пару гигов?

придётся подождать :)

20к юзерам тоже

Ладно

эм

Спасибо

вы из чятов в продакшен советы не кидайте сразу :)

а то мы предложим дропнуть коллекцию

А сколько ждать?

минут пять хотяп

от железа же зависит

от железа же зависит

Мощное, за 189 рублей (шучу)

зависит от того насколько быстрое хранилище и хватит ли памяти чтоб положить и коллекцию и индекс

эт ваще ни о чём не говорит :)

эт ваще ни о чём не говорит :)

А вдруг :)

можешь прогресс в логе монги посмотреть

в следующий раз используй background: true хотя

ну и да

у тебя там есть лишние индексы

{type: 1} и {type: 1, status: 1, date: 1}

первый индекс покрывается вторым

первый индекс покрывается вторым

Удалить первый?

не надо пока ничего делать :)

не надо пока ничего делать :)

Хорошо, а то я могу

можно посмотреть на https://docs.mongodb.com/manual/tutorial/measure-index-use/

и удалить индексы которые не используются

Я так понял, что на продакшене лучше ничего такого не делать?

что это за график?

Запросы к боту в минуту

на продакшене — да

Монга перестала отвечать, бот перестал отвечать и запросы начали накапливаться

поднять репликасет во-первых

и строить индексы вот так: https://docs.mongodb.com/manual/tutorial/build-indexes-on-replica-sets/

Слишком сложна, можно полегче?

ну тогда будет картинка выше

Все, выздоровел

Спасибо

можно с background: true, но это не гарантирует что монга не приляжет

А как узнать что изменилось? Профилирование?

запустить запрос с explain("executionStats") и посмотреть на documents scanned и index keys scanned

А как узнать что изменилось? Профилирование?

так у тебя графики есть, по ним должен увидеть

так у тебя графики есть, по ним должен увидеть

Это nginx

Решил достать ласт записи: Executor error during find command: OperationFailed: Sort operation used more than the maximum 33554432 bytes of RAM. Add an index, or specify a smaller limit.

если основная работа сервиса - поиск по айдишникам чата и поста, то должен увидеть, что среднее время ответа сократилось

но это слишком косвенная метрика будет

по-хорошему нужно было смотреть executionStats до индекса и после

Да суть в том, что там подгружается тонна лишней инфы, а нужно всего вытащить одну строку

И таких запросов сотни в минуту Помимо других

Так вот я думаю сделать кеширование отдельной коллекцией

не надо

туда класть то что нужно и потом доставать

Так вот я думаю сделать кеширование отдельной коллекцией

вряд ли поможет

можно попробовать сделать более "жирный" индекс и запрос изменить так, чтобы он стал covered

т.е. чтобы запрос покрывался только индексом и монге не приходилось смотреть в документы на диске

не очень понятно что вообще происходт, мы тут в экстрасенсов играем

не очень понятно что вообще происходт, мы тут в экстрасенсов играем

Да, я мало что рассказал Чуть позже приду сюда, может после завтра

А стоит использовать монгу для подсчета чего-то?

Можно научить ее держать определенную колекцию только в памяти?

Или еще лучше если "кастомно" ее сбрасывать на диск по времени/кол-ву изменений

Это скорее redis.

Можно научить ее держать определенную колекцию только в памяти?

нет

точнее как, можно в enterprise использовать memory storage engine

но это совсем не то

более того, не понятно зачем