Александр
Ахаха
Александр
Тесты на rhel такие же будут
Александр
Ты несешь какую-то дичь
Александр
У тебя rhel головного мозга
Mark ☢️
это точно
Mark ☢️
Write cache: True, iodepth: 1, sync: True => 1128.39 IOPS Write cache: True, iodepth: 1, sync: False => 19384.73 IOPS Write cache: True, iodepth: 32, sync: True => 20618.62 IOPS Write cache: True, iodepth: 32, sync: False => 33369.91 IOPS Write cache: False, iodepth: 1, sync: True => 14689.62 IOPS Write cache: False, iodepth: 1, sync: False => 19530.87 IOPS Write cache: False, iodepth: 32, sync: True => 31137.09 IOPS Write cache: False, iodepth: 32, sync: False => 29487.2 IOPS
Mark ☢️
вот различные значения описов в комбинациях
Mark ☢️
особенно доставляют первые два
Mark ☢️
это https://lkml.org/lkml/2013/11/20/264
Александр
Печально как-то
Mark ☢️
тут всё понятно
Mark ☢️
теперь вопрос, блять, а какие из них честные иопсы ?
Anonymous
наименьшие
Uncel
ну какбэ без кэша ssd сосет
Uncel
позовем на помощь @pragus a
Александр
позовем на помощь @pragus a
Сходим в чат rh в irc (fixed!)
Mark ☢️
щас я доделаю чтобы через ФС делало тесты и тогда развлечёмся по-полной
Mark ☢️
Сходим в чат rh в irc (fixed!)
причём по-большому
Александр
Mark ☢️
FS: Write cache: True, iodepth: 1, sync: True => 711.01 IOPS FS: Write cache: True, iodepth: 1, sync: False => 19708.06 IOPS FS: Write cache: True, iodepth: 32, sync: True => 741.74 IOPS FS: Write cache: True, iodepth: 32, sync: False => 30808.76 IOPS FS: Write cache: False, iodepth: 1, sync: True => 5372.83 IOPS FS: Write cache: False, iodepth: 1, sync: False => 19381.33 IOPS FS: Write cache: False, iodepth: 32, sync: True => 11207.99 IOPS FS: Write cache: False, iodepth: 32, sync: False => 31360.21 IOPS
Mark ☢️
вот через ФС
Mark ☢️
711 иопсов блять
Mark ☢️
это что за нах
Mark ☢️
http://pastebin.com/g9xa2Vup — сырец скрипта
Mark ☢️
я заслал сырец скрипта
Mark ☢️
есть результы
Mark ☢️
FS: Write cache: True, iodepth: 1, sync: True => 711.01 IOPS FS: Write cache: True, iodepth: 1, sync: False => 19708.06 IOPS FS: Write cache: True, iodepth: 32, sync: True => 741.74 IOPS FS: Write cache: True, iodepth: 32, sync: False => 30808.76 IOPS FS: Write cache: False, iodepth: 1, sync: True => 5372.83 IOPS FS: Write cache: False, iodepth: 1, sync: False => 19381.33 IOPS FS: Write cache: False, iodepth: 32, sync: True => 11207.99 IOPS FS: Write cache: False, iodepth: 32, sync: False => 31360.21 IOPS
Mark ☢️
Write cache: True, iodepth: 1, sync: True => 1128.39 IOPS Write cache: True, iodepth: 1, sync: False => 19384.73 IOPS Write cache: True, iodepth: 32, sync: True => 20618.62 IOPS Write cache: True, iodepth: 32, sync: False => 33369.91 IOPS Write cache: False, iodepth: 1, sync: True => 14689.62 IOPS Write cache: False, iodepth: 1, sync: False => 19530.87 IOPS Write cache: False, iodepth: 32, sync: True => 31137.09 IOPS Write cache: False, iodepth: 32, sync: False => 29487.2 IOPS
Uncel
Шо?
iops-ы тонут, write amp во все поля
Mark ☢️
второй форвард — это напрямую в девайс
Uncel
кляти O_SYNC все портит
Mark ☢️
есть вопросы.
Mark ☢️
у мну вопрос — почему через ФС другие цифры ? оно же O_DIRECT
Roman
Я пока хз. Пока только пытаюсь загрузить проблему в голову :)
Mark ☢️
итак. я раздобыл сервак и в нём: Model=OCZ-VECTOR150 Model=Samsung SSD 850 PRO 256GB Model=OCZ-TRION150
Mark ☢️
щас запущу на нём свой мегатест
✠ FLASh ✠
@mark
Mark ☢️
што
Mark ☢️
поправил тесты, щас всё будет
Mark ☢️
итого. на векторе150: RAW: Write cache: False, iodepth: 32, sync: True => 85686.06 IOPS
Mark ☢️
замечу — с синком!
Mark ☢️
бенчу гнусмас
Mark ☢️
RAW: Write cache: False, iodepth: 32, sync: True => 8899.67 IOPS
Mark ☢️
в 10 раз меньше
Mark ☢️
FS: Write cache: False, iodepth: 1, sync: True => 205.46 IOPS
Mark ☢️
самсунг охуенен
Александр
:D
Uncel
Еще троллеркостер http://lists.ceph.com/pipermail/ceph-users-ceph.com/2015-September/004194.html
Mark ☢️
спс. отправил это тому кто купил нам эти ссд
Uncel
spdk они завезли уже в релиз?
Uncel
Поставить nvme дисков и забыть
Uncel
https://github.com/ceph/ceph/pull/12734
Uncel
normique
Mark ☢️
benching Model=OCZ-VECTOR150 RAW: Write cache: True, iodepth: 1, sync: True => 348 IOPS RAW: Write cache: True, iodepth: 32, sync: True => 3825 IOPS RAW: Write cache: False, iodepth: 1, sync: True => 27814 IOPS RAW: Write cache: False, iodepth: 32, sync: True => 85686 IOPS benching Model=Samsung SSD 850 PRO 256GB RAW: Write cache: True, iodepth: 1, sync: True => 918 IOPS RAW: Write cache: True, iodepth: 32, sync: True => 9827 IOPS RAW: Write cache: False, iodepth: 1, sync: True => 415 IOPS RAW: Write cache: False, iodepth: 32, sync: True => 8899 IOPS benching Model=OCZ-TRION150 RAW: Write cache: True, iodepth: 1, sync: True => 938 IOPS RAW: Write cache: True, iodepth: 32, sync: True => 11127 IOPS RAW: Write cache: False, iodepth: 1, sync: True => 903 IOPS RAW: Write cache: False, iodepth: 32, sync: True => 981 IOPS
Mark ☢️
Похоже, что самая адекватная система измерения — это по последней строке. на глаз они именно так и приходятся.
Михаил
арр задолбал простыни постить
Mark ☢️
ну уж ладно.. телега даже не просплиттила мессадж
Polnoch
слушайте, а может, переименуем этот чатик в "pro_ceph", и сделаем новый, про OpenStack и AWS?
Pavel
От этого там появятся сообщения?)
Roman
От этого там появятся сообщения?)
Два чая этому господину
Polnoch
Что именно не нравится?
Ну, я бы сидела и в чатике про aws/openstack, и в чатике про ceph
Polnoch
Но не нравится оффтоп
Polnoch
На самом деле это чат про ceph, если назвать вещи своими именами
Михаил
так уж получилось
Михаил
темболее чат про опенстек с благородными донами уже есть
Михаил
только движухи там нет)
Polnoch
что бы была движуха, нужно добавить AWS
Михаил
о, а где?
https://telegram.me/openstack_russia
Михаил
там представители вендоров в том числе
Polnoch
Ничто не мешает вам его создать
У меня уже создан про puppet, https://telegram.me/puppet_ru Есть же лимит на аккаунт. Не хочется к нему приближаться
Polnoch
Возможно, меня неправильно поняли - просто в чатике про опенстек хотелось бы видеть редкие посты, но про опенстек
Polnoch
Мне ceph тоже интересен,
Polnoch
хоть я с ним ещё и не работала, но надеюсь, поработаю
Polnoch
Просто так мешанина какая-то получается
Polnoch
Если опенстек с чем-то и объединять, мне кажется, то с AWS. Что бы сранивать, скажем, S3 и Swift, Heat и Cloudformation