У монги же врайт на одном ядре ? Так что да выше единицы уже может быть проблемой. Не ?

с чего?

в смысле, в wt такого же нет уже

в mmap да, было дело

кстати а ктонибудь использует монгу в докере? интересует как она переживает перезапуск контейнера

причём тут монга ваще

если у тебя с хоста в монгу смонтирован раздел, то пускай контейнер сколько хочешь

там же часть в памяти, а докер любит убивать процессы без предупреждений

тем более прочитал, что монга работает через смаплленные в память файлы. Вот инетересно как они переживают. Хотя может чего не знаю

читай лучше

тем более прочитал, что монга работает через смаплленные в память файлы. Вот инетересно как они переживают. Хотя может чего не знаю

в монге два storage engine: MMAPv1 (устарел) и WiredTiger (с 3.2 по-умолчанию)

первый, очевидно, использовал mmap

там же часть в памяти, а докер любит убивать процессы без предупреждений

^ вот этот загон говорит о том что у тебя в голове в целом вата

потому что «убить процесс» можно сильно по разному

от этого будет зависеть то, что случится дальше, и это касается вообще любой субд

плюс «докер любит убивать процессы без предупреждений». Докер сам по себе ничего не любит

докеру вообще насрать что там внутри контейнера происходит

если кто-то не скажет докеру остановить контейнер, он самостоятельно тушить его не будет

«кто-то» может быть системой орекстрации или мясная прокладка

ну и ещё операционная система

в mmap да, было дело

ок, спс.

доброй ночи! будет круто, если кто-нибудь из питерских пройдет опрос по поводу вашей работы в качестве IT-спецов. Провожу исследование) https://docs.google.com/forms/d/e/1FAIpQLSeoG6ByaJD1Q4RqOESUoOP6qDggjukoQ3wokPaXJSlqCt09IQ/viewform

@lig11 дай прав?

@lig11 дай прав?

А? Зачем?:)

Добрый день! Господа, простите за оффтоп, есть вакансия для специалистов по mongoDB, в Санкт-Петербурге. Если вы в поиске, или просто захотите узнать подробности, прошу пишите в лс. P.S. Linux на уровне advanced.

насколько тяжелая операция реконнекта в монге? слышал, что в sql это одна из самых тяжелых операций для бд, в монге это так же?

насколько тяжелая операция реконнекта в монге? слышал, что в sql это одна из самых тяжелых операций для бд, в монге это так же?

Нет, монге у соединений нет «представления» в таком виде, в котором оно есть у sql

Транзакций то нет

Транзакций то нет

Понял, спасибо :)

так транзакция не на соединение же создается

Кстати, кому интересно, подписывайтесь на группу о MySQL : @mysql_ru

так транзакция не на соединение же создается

Насколько я помню область видимости для соединения и потом уже для запроса.

Но я не уверен совершенно.

Как и не уверен что это для любых sql баз является проблемой.

Добрый день! Господа, простите за оффтоп, есть вакансия для специалистов по mongoDB, в Санкт-Петербурге. Если вы в поиске, или просто захотите узнать подробности, прошу пишите в лс. P.S. Linux на уровне advanced.

Что за компания? Что делать? Сколько денег? Такое можно хотя бы примерно и всем рассказать. Меньше вопросов будет.

Что за компания? Что делать? Сколько денег? Такое можно хотя бы примерно и всем рассказать. Меньше вопросов будет.

Международная компания, занимается Big data разработкой, нужен инженер (devops) на поддержку проекта. Зарплату могу сказать уже заинтересованным, кто готов продолжить диалог.

сначала специалист по монге, теперь девопс

А потом окажется, что она никакая не Надя, а самый обычный Игорь

сначала специалист по монге, теперь девопс

На поддержку

А потом окажется, что она никакая не Надя, а самый обычный Игорь

Это маловероятно, так как согласно статистике среди рекрутеров женщин значительно больше, чем мужчин. Если пишет Надя, то скорее всего Надя))) по крайней мере в моем случае)

"скорее всего" носит вероятностную оценку, т.о. получается что Надя, не совсем уверена в том, что она Надя.

Квантовые эффекты, не обращай внимания.

Надя, не стоит вскрывать эту тему. Вы молодые, шутливые, вам все легко. Это не то. Это не Чикатило и даже не архивы спецслужб. Сюда лучше не лезть. Серьезно, любой из вас будет жалеть. Лучше закройте тему и забудьте что тут писалось. Я вполне понимаю что данным сообщением вызову дополнительный интерес, но хочу сразу предостеречь пытливых - стоп. Остальные просто не найдут.

Надя, не стоит вскрывать эту тему. Вы молодые, шутливые, вам все легко. Это не то. Это не Чикатило и даже не архивы спецслужб. Сюда лучше не лезть. Серьезно, любой из вас будет жалеть. Лучше закройте тему и забудьте что тут писалось. Я вполне понимаю что данным сообщением вызову дополнительный интерес, но хочу сразу предостеречь пытливых - стоп. Остальные просто не найдут.

На hh найдут, если там есть

А если там нет, то зачем оно тут?

А если там нет, то зачем оно тут?

Написал hello world и калькулятор, — вот и молодец. На этом стоп. Не стоит вскрывать эти конпеляторы и гитхабы. Это тебе не колидоры вычистлительных центров НАСА, даже не датацентры ГУГОЛ, не уютненькие офисы ФЕЙСБУКА. В сферу IT лучше не лезть. Серьезно, любой из вас будет жалеть. Лучше закройте Хабрахабр и забудьте, что тут писалось. Это все вранье, чтобы привлечь как можно больше новых макак на рабочие места и создать демпинг зарплат. Я вполне понимаю, что данным сообщением вызову дополнительный интерес у воротил из Cisco, SAP и IBM, но хочу сразу предостеречь пытливых — стоп. Зарплаты у IT-шников очень унылые. Остальным их просто не дают.

map/reduce тоже почти deprecated

а можно ссылочку где это написано?

Мы это уже проходили, нет официальной ссылочки.

Можно посмотреть на развитие MR и на развитие AF, для того чтоб сделать выводы о том, какой из двух инструментов разивается, а какой нет.

спасибо за ответ

Ух.

Сегодня же вышла MongoDB 3.4!

Разве?

да

https://docs.mongodb.com/master/release-notes/3.4/

Released Nov 29, 2016

ну... подождём пару патчей и можно щупать =)

Бля.

Печаль.

Я чот думал они в декабре выпустят. Придётся изучать сейчас. :(

Они там новый курс запилили в юниверсити

M034

Обновил один из серверов (который сейчас на standalone, т.е. наименее рискованно) до 3.4. Всё ОК ?

Да и быстрее стало работать, но возможно, это плацебо.

Да и быстрее стало работать, но возможно, это плацебо.

Быстрее плохая метрика. ;)

Быстрее плохая метрика. ;)

Почему?

Оказалось, не плацебо, по замерам есть прирост производительности в районе 10-15%. Это касается больших агрегаций.

господа а где mongoreplay брать ?

билдить короче. https://github.com/mongodb/mongo-tools

build.sh

с 3,2 выглядит будто работает

Ого, монговские тулзы на Golang написаны. Тогда понятно, почему они так плохо с ipv6 работают

И что этот стикер значит в данном контексте?

И что этот стикер значит в данном контексте?

Что я промазал и вместо него хотел отправить из говна и палок

Но только в данном контексте не более

господа а где mongoreplay брать ?

Там в 3.2 или в 3.4 новая тулза вместо риплея

А кто как консистентность данных в условиях отстутсвия транзакции обеспечивает? Ну то есть вот я прочиал из базы некоторые данные (один документ), изменил их и хочу записать обратно, но при этом их кто-то еще параллельно мог изменить. В голову приходит два варианта: 1. В update в условии класть полностью весь документ (или часть, которая может быть изменена параллельным запросом) 2. Хранить в отдельном поле update счётчик в виде инкремента/даты/objid и при update указывать его в условии (и обновлять, соответственно) 3. ... ?

речь про один документ, конечно же, не про несколько

Второе называется optimistic locking.

Зависит от требований к данным.

Первое не эффективно.

первое дорого слишком, это понятно

Надо начать с вопроса почему так случилось и что мы будем делать если документ обновили.

выдавать ошибку или ретраить этот вопрос уже бекенд будет разруливать

(Так случилось что нам нужно знать что документ не менялся)

потому что мы живём в многопоточном мире) в идеале - всё должно обновляться атомарным апдейтом, но вот обновить два разных элемента в массиве им уже не получится

условно { _id: ..., some_data: ..., [ {'id': 1, 'value': null, 'other_value': 5}, {'id': 2, 'value': null, 'other_value': 6}, {'id': 3, 'value': null, 'other_value': 7}, {'id': 4, 'value': null, 'other_value': 8}, ] } прислали patch и надо обновить только поле value в массиве, не трогая остальные

за то время пока мы считали данные, изменили в памяти и пытаемся записать их обратно кто-то другой мог содержимое массива изменить

with lock

Второе называется optimistic locking.

Ага, оно. Другой вопрос: в монге же нет способов работать с ними из коробки, только вручную логику разруливать?