Ну надо включать все возможные дебаги, профайлеры и смотреть

с которого лучше начать ?

такое может быть из за бысокого update rate ?

порядка 1000 в секунду

Это было бы логично, если бы мастер тоже тупил

апдейты маленькие совсем.

по 500-800 байт

может после переноса их по сети их становится сложно накатывать ?

У вас сеть на урановых ломах?

нет

нормальная сеть :)

но вообще нагрузка топоявляется на том разделе на котором только oplog

А io не понятно на каком вызове блокируется?

а как посмотреть ?

Ну начать, наверно, стоит с mongostat и db.currentOp(), а дальше смотреть что происходит на уровнях ниже

База, кстати, какая? Версия/движок?

3,2,7 wt

oplog стандартный 2 гига

"timeDiffHours" : 1.82,

меня слегка смущает факт того что оплога хватает всего на 2 часа

Его можно увеличить)

Хотя, большого смысла в этом нет, если только на hidden реплике для бекапа

ну я вот смотрю сейчас на сеть. и вижу что я ставильно передаю 1,5мега в секунду. и столько же я вижу в iotop на монго.

Это копейки

Настройки базы не крутили?

Дефолт?

и эти 1,5-2мега в секунду дают мне avg-cpu: %user %nice %system %iowait %steal %idle 1.05 0.00 0.59 0.13 0.00 98.24 Device: tps kB_read/s kB_wrtn/s kB_read kB_wrtn dm-2 739.00 0.00 2559.00 0 2559

хм.

а в телеграфе это выглядит как АД

iostat показывает всего 700

Лучше скрин)

Реально ад

iowait 0.13?

Да и 6к IOPS для SSD - тоже ни о чём

ну ни очем я согласен

но я не понимаю откуда

WiredTiger syncs the buffered journal records to disk according to the following intervals or conditions: New in version 3.2: Every 50 milliseconds. MongoDB sets checkpoints to occur in WiredTiger on user data at an interval of 60 seconds or when 2 GB of

Блин, обрезалось

да я нашел этот текст

сейчас его ка краз читаю

http://sourceware.org/systemtap/examples/keyword-index.html#FILE

io/iotime.stp - Trace Time Spent in Read and Write for Files  keywords: PROFILING SYSCALL IO FILE  The script watches each open, close, read, and write syscalls on the system. For each file the scripts observes opened it accumulates the amount of wall clock time spent in read and write operations and the number of bytes read and written. When a file is closed the script prints out a pair of lines for the file. Both lines begin with a timestamp in microseconds, the PID number, and the executable name in parentheses. The first line with the "access" keyword lists the file name, the attempted number of bytes for the read and write operations. The second line with the "iotime" keyword list the file name and the number of microseconds accumulated in the read and write syscalls

Можно попробовать понять в какой конкретно файл оно так адово пишет и по нему определит что это, журнал или какая-то коллекция

Сергей, точно журнал.

у меня журнал на отдельной файловой системе.

Ну если там 1к документов в секунду льется, то 6к IOPS выглядит похожим на правду

ИМХО, конечно. Может коллеги меня поправят

А на мастере прям сильно меньше?

но где она же на мастере вот в чем вопрос

на мастере 300 iops

ну или по iostat 30tps

вот secondary

вот мастер

2016-06-23T12:39:30.671+0300 I - [NetworkInterfaceASIO-Replication-0] Invariant failure _connection.is_initialized() src/mongo/executor/network_interface_asio_operation.cpp 142 о чего словил

на 2х хостах из реплики сразу

http://sourceware.org/systemtap/examples/keyword-index.html#FILE

не заводится утилитка эта

чот не может отрезолвить символы хотя они все есть

так выяснилось же, что это журнал

ну да. просто меня уже сама тулза заинтересовала

запилил вопрос в апстрим

там вообще бывает отвечают? никто не сталкивался ?

запилил вопрос в апстрим

это куда именно?

https://jira.mongodb.org/browse/SERVER-24746

ну, реагируют. с вопросом не знаю, а баги там все

с вопросом оттуда в группу отправляют

ну, типа того

ибо саппорт через сообщество или за деньги;)

есть тут живые ?

подкажит как массово дропнуть базу не переключаясь на неё

понятно все умерли

через баш

mongo dbname —eval "db.dropDatabase()"

мож надо будет кому

делаем скрипт и херачим

service mongod stop && rm -rf /var/lib/mongodb

=)

выпились умник

я говорил про массовое а не про полное

надо чётче формулировать свои желания

госопда продолжая бодаться со вчерашней проблемой. логическая цепочка верна ? 1. ~ 900 updates per second 2. по blktrace 1300 записей в диск на secondary 3. write_concern: majority для этих запросов значит поведение соответствует нормальному.

коллеги подскажите почему такая разница в размере между mmap и wiredtrigger

потому что это разные движки

я так посчитал где то в 8 раз

потому что mmap это реально кусок памяти.

а wt это прям storage engine

спасибо за ответ. ещё вопросик

потому что wt ещё и жмёт.

почему через робо монго например на mmap я могу просмотреть коллекцию а на wt нет

что есть robo ?

https://robomongo.org/

аля пхп мой админ

есть идеи?

Всем привет. Какая версия Robo?

0.9.0-RC8 - нормально показывает коллекции на WT

О, круто