Александр
Ахаха
Александр
Тесты на rhel такие же будут
Александр
Ты несешь какую-то дичь
Александр
У тебя rhel головного мозга
Mark ☢️
это точно
Mark ☢️
Write cache: True, iodepth: 1, sync: True => 1128.39 IOPS
Write cache: True, iodepth: 1, sync: False => 19384.73 IOPS
Write cache: True, iodepth: 32, sync: True => 20618.62 IOPS
Write cache: True, iodepth: 32, sync: False => 33369.91 IOPS
Write cache: False, iodepth: 1, sync: True => 14689.62 IOPS
Write cache: False, iodepth: 1, sync: False => 19530.87 IOPS
Write cache: False, iodepth: 32, sync: True => 31137.09 IOPS
Write cache: False, iodepth: 32, sync: False => 29487.2 IOPS
Mark ☢️
вот различные значения описов в комбинациях
Mark ☢️
особенно доставляют первые два
Mark ☢️
это https://lkml.org/lkml/2013/11/20/264
Александр
Печально как-то
Mark ☢️
тут всё понятно
Mark ☢️
теперь вопрос, блять, а какие из них честные иопсы ?
Anonymous
наименьшие
Uncel
ну какбэ без кэша ssd сосет
Uncel
позовем на помощь @pragus a
Mark ☢️
щас я доделаю чтобы через ФС делало тесты и тогда развлечёмся по-полной
Mark ☢️
Александр
Mark ☢️
FS: Write cache: True, iodepth: 1, sync: True => 711.01 IOPS
FS: Write cache: True, iodepth: 1, sync: False => 19708.06 IOPS
FS: Write cache: True, iodepth: 32, sync: True => 741.74 IOPS
FS: Write cache: True, iodepth: 32, sync: False => 30808.76 IOPS
FS: Write cache: False, iodepth: 1, sync: True => 5372.83 IOPS
FS: Write cache: False, iodepth: 1, sync: False => 19381.33 IOPS
FS: Write cache: False, iodepth: 32, sync: True => 11207.99 IOPS
FS: Write cache: False, iodepth: 32, sync: False => 31360.21 IOPS
Mark ☢️
вот через ФС
Mark ☢️
711 иопсов блять
Mark ☢️
это что за нах
Mark ☢️
http://pastebin.com/g9xa2Vup — сырец скрипта
Roman
Mark ☢️
я заслал сырец скрипта
Mark ☢️
есть результы
Mark ☢️
FS: Write cache: True, iodepth: 1, sync: True => 711.01 IOPS
FS: Write cache: True, iodepth: 1, sync: False => 19708.06 IOPS
FS: Write cache: True, iodepth: 32, sync: True => 741.74 IOPS
FS: Write cache: True, iodepth: 32, sync: False => 30808.76 IOPS
FS: Write cache: False, iodepth: 1, sync: True => 5372.83 IOPS
FS: Write cache: False, iodepth: 1, sync: False => 19381.33 IOPS
FS: Write cache: False, iodepth: 32, sync: True => 11207.99 IOPS
FS: Write cache: False, iodepth: 32, sync: False => 31360.21 IOPS
Mark ☢️
Write cache: True, iodepth: 1, sync: True => 1128.39 IOPS
Write cache: True, iodepth: 1, sync: False => 19384.73 IOPS
Write cache: True, iodepth: 32, sync: True => 20618.62 IOPS
Write cache: True, iodepth: 32, sync: False => 33369.91 IOPS
Write cache: False, iodepth: 1, sync: True => 14689.62 IOPS
Write cache: False, iodepth: 1, sync: False => 19530.87 IOPS
Write cache: False, iodepth: 32, sync: True => 31137.09 IOPS
Write cache: False, iodepth: 32, sync: False => 29487.2 IOPS
Uncel
Шо?
iops-ы тонут, write amp во все поля
Mark ☢️
второй форвард — это напрямую в девайс
Uncel
кляти O_SYNC все портит
Mark ☢️
есть вопросы.
Mark ☢️
у мну вопрос — почему через ФС другие цифры ? оно же O_DIRECT
Roman
Я пока хз. Пока только пытаюсь загрузить проблему в голову :)
Mark ☢️
итак. я раздобыл сервак и в нём:
Model=OCZ-VECTOR150
Model=Samsung SSD 850 PRO 256GB
Model=OCZ-TRION150
Mark ☢️
щас запущу на нём свой мегатест
✠ FLASh ✠
@mark
Mark ☢️
што
Mark ☢️
поправил тесты, щас всё будет
Mark ☢️
итого. на векторе150:
RAW: Write cache: False, iodepth: 32, sync: True => 85686.06 IOPS
Mark ☢️
замечу — с синком!
Mark ☢️
бенчу гнусмас
Mark ☢️
RAW: Write cache: False, iodepth: 32, sync: True => 8899.67 IOPS
Mark ☢️
в 10 раз меньше
Mark ☢️
FS: Write cache: False, iodepth: 1, sync: True => 205.46 IOPS
Mark ☢️
самсунг охуенен
Александр
:D
Uncel
Еще троллеркостер http://lists.ceph.com/pipermail/ceph-users-ceph.com/2015-September/004194.html
Mark ☢️
спс. отправил это тому кто купил нам эти ссд
Uncel
spdk они завезли уже в релиз?
Uncel
Поставить nvme дисков и забыть
Uncel
https://github.com/ceph/ceph/pull/12734
Uncel
normique
Mark ☢️
benching Model=OCZ-VECTOR150
RAW: Write cache: True, iodepth: 1, sync: True => 348 IOPS
RAW: Write cache: True, iodepth: 32, sync: True => 3825 IOPS
RAW: Write cache: False, iodepth: 1, sync: True => 27814 IOPS
RAW: Write cache: False, iodepth: 32, sync: True => 85686 IOPS
benching Model=Samsung SSD 850 PRO 256GB
RAW: Write cache: True, iodepth: 1, sync: True => 918 IOPS
RAW: Write cache: True, iodepth: 32, sync: True => 9827 IOPS
RAW: Write cache: False, iodepth: 1, sync: True => 415 IOPS
RAW: Write cache: False, iodepth: 32, sync: True => 8899 IOPS
benching Model=OCZ-TRION150
RAW: Write cache: True, iodepth: 1, sync: True => 938 IOPS
RAW: Write cache: True, iodepth: 32, sync: True => 11127 IOPS
RAW: Write cache: False, iodepth: 1, sync: True => 903 IOPS
RAW: Write cache: False, iodepth: 32, sync: True => 981 IOPS
Mark ☢️
Похоже, что самая адекватная система измерения — это по последней строке. на глаз они именно так и приходятся.
Михаил
арр
задолбал простыни постить
Mark ☢️
ну уж ладно.. телега даже не просплиттила мессадж
Polnoch
слушайте, а может, переименуем этот чатик в "pro_ceph", и сделаем новый, про OpenStack и AWS?
Pavel
От этого там появятся сообщения?)
Roman
Roman
Polnoch
Но не нравится оффтоп
Polnoch
На самом деле это чат про ceph, если назвать вещи своими именами
Михаил
так уж получилось
Михаил
темболее чат про опенстек с благородными донами уже есть
Михаил
только движухи там нет)
Polnoch
Polnoch
что бы была движуха, нужно добавить AWS
Roman
Михаил
о, а где?
https://telegram.me/openstack_russia
Михаил
там представители вендоров в том числе
Polnoch
Ничто не мешает вам его создать
У меня уже создан про puppet, https://telegram.me/puppet_ru
Есть же лимит на аккаунт. Не хочется к нему приближаться
Polnoch
Polnoch
Возможно, меня неправильно поняли - просто в чатике про опенстек хотелось бы видеть редкие посты, но про опенстек
Polnoch
Мне ceph тоже интересен,
Polnoch
хоть я с ним ещё и не работала, но надеюсь, поработаю
Polnoch
Просто так мешанина какая-то получается
Polnoch
Если опенстек с чем-то и объединять, мне кажется, то с AWS. Что бы сранивать, скажем, S3 и Swift, Heat и Cloudformation