ок Спасибо

тогда такой вопрос

почму запрос в 5сек не попал ни в один шард?

@dd_bb

Миллион причин, нет смысла из-за одного запроса разбираться :)

Миллион причин, нет смысла из-за одного запроса разбираться :)

))) хорошо

Сеть, суммарный лаг всех шардов, приоритизация монгоса

Рекомендую смотреть на top 99% и отдельно на top 1% и top 0.1%

это что такое?

Это размер выборки запросов

По latency

Отсортированные по latency запросы, поделённые на три когорты по количеству попавших запросов. И смотреть mean/avg/stddev

И min/max

а где всё это можно глянуть, вы просто так круто говорите а я не пойму где это))

Это даст сжатую картину происходящего, чтоб на шум внимание не обращать

Руками в вашей системе анализа производительности

ааа понял Спасибо огромное) буду думать)

самому интересно)

Сомневаюсь

Обновление в любом случае это две операции: read и write

То что вам не возвращают результат write на хранилище не влияет

Обновление в любом случае это две операции: read и write

Запись всегда полностью считывается?

Господа

Никто не встречал пакет с монгошеллом для альпайна?

чтобы не ставить весь пакет mongodb, мне только шелл нужен

Запись всегда полностью считывается?

Конечно. Как ещё можно обновить документ не прочитав его? :)

Со всякими мульти апдейтами та же история ?? О май гад

То что вам не возвращают результат write на хранилище не влияет

Со всякими мульти апдейтами та же история ?? О май гад

Причём в абсолютно любом хранилище, которое поддерживает частичное обновление

😳

Разве что в приложении по памяти можно выиграть значит .. мне стыдно теперь.

Единственное исключение это всякие хранилища поддерживающие merge on read. Но там есть другие ограничения

Конечно. Как ещё можно обновить документ не прочитав его? :)

Ну, например, считав только часть данных, если знать координаты этих данных внутри записи.

И как вы узнаете координаты, не прочитав документ? ;)

Это да, никак. А postgresql так умеет?

Нет

Сорри. Это касается реляционных баз тоже? С колонками итд? Или речь идёт о JSON и в случае постгри - jsonb итд? А есть пруф какой-нибудь?)

Да. Это касается всех хранилищ которые поддерживают частичное обновление данных.

Не понимаю какие пруфы вам нужны. У вас есть запись 1|Foo|Bar. Вы хотите обновить Bar на JollyGoodFriend. Попробуйте придумать алгоритм который вам это позволит сделать не зная оригинальной строки ;)

Если это БД со схемой и у первых двух полей фиксированная длинна данных, то можно узнать коордианты третьего поля.

Если это БД со схемой и у первых двух полей фиксированная длинна данных, то можно узнать коордианты третьего поля.

Нет

Вам как минимум надо совпадение найти. В лучшем случае это будет поиск по индексу, но не факт что индекс поддерживает терминаторы

Так что вам придётся прочитать значение даже если у вас 3НФ и каждое значение поля хранится отдельно.

Я наверное, ваш вопрос не оч. понял.

Не говоря уже о том что юнит записи это почти всегда страница

Не понимаю какие пруфы вам нужны. У вас есть запись 1|Foo|Bar. Вы хотите обновить Bar на JollyGoodFriend. Попробуйте придумать алгоритм который вам это позволит сделать не зная оригинальной строки ;)

Вы имеет в виду запрос UPDATE col SET 3rd_field = 'JollyGoodFriend' WHERE id = 1 или UPDATE col SET 3rd_field = 'JollyGoodFriend' WHERE 3rd_field = 'Bar'?

Да без разницы

Да я чтот тупанул кста. Спс что терпите нас. )

Да без разницы

Почему, например, надо сделать `UPDATE col SET 3rd_field = 'JollyGoodFriend' WHERE id = 1` По индексу id находим адрес данных нужной записи, далее мы знаем длину данных для 1st_field и 2nd_field, поэтому можно вычислить адрес 3rd_field и записать туда данные.

Нельзя

Запись большего размера

А поле 3rd_field тоже fixed size :) Не знаю, правда, как там postgres конец строки определяет, может, 0 втыкает в конец.

Я вам очень советую почитать про внутренне устройство постгреса

Более того, на странице с записью по-моему хранятся контрольные суммы

И за одно почитайте о том, как из памяти данные читаются.

И как из блочных устройств :)

Единственный реальный способ это append only log и жутко дорогой merge on read

Так например умеет rocksdb, но в любом случае это будет чтение страницы и запись ее обратно :)

И потом сброс блока из дискового кеша на блочное устройство

Какой лучше модуль истанавливать mongod или mongodb?

Это две разные вещи. Не?

Монгод - сервер. Монгодб - клиент

Для того, чтобы обращаться с ноды к серверу монгодб. Устанавливать mongod?

устанавливать драйвер https://docs.mongodb.com/ecosystem/drivers/node/

всем привет - подскажите хочу накатить миграцию в монге - нужно во всей базе это около 1000000 записей заменить поле string - на [string] - то есть поместить существующую запись в массив - какой самый менее ресурсо затратный способ это сделать ?

точнее самый еффектиный

или в любом случае прийдется выкачивать каждый документ с select на определенное поле документа - и просто пересохранять ?

или в любом случае прийдется выкачивать каждый документ с select на определенное поле документа - и просто пересохранять ?

Версия монги?

Версия монги?

4.0.5

Подскажите, на практике, юзали тяжелые "джоины" монговские? Как они себя показывают по времени исполнения?

Подскажите, на практике, юзали тяжелые "джоины" монговские? Как они себя показывают по времени исполнения?

Что значит тяжелые?

Что значит тяжелые?

По объёму данных. Ну типо джоин двух больших коллекций

4.0.5

Агрегация с импользованием $out в новую временную коллекцию. Потом старую удалить и переименовать временную

По объёму данных. Ну типо джоин двух больших коллекций

Это везде плохо

В общем случае нормально работает при наличии индексов

Это везде плохо

Да вот хочу соскочить с постгреса на монгу.

так как связей не так уж много между таблицами

Да вот хочу соскочить с постгреса на монгу.

Перестройте данные под ваши потребнлсти и постарайтесь уйти от плоских реляционных данных, тогда може и джойны не нужны будут

Перестройте данные под ваши потребнлсти и постарайтесь уйти от плоских реляционных данных, тогда може и джойны не нужны будут

думал над этим. данных очень много. и менять схему данных так же дорого как и БД

вот и подумал менять БД