Uncel
06.01.2017
10:54:01
Марк ☢
06.01.2017
10:54:17
ЧОТА СЛОЖНА
Uncel
06.01.2017
10:54:38
фороникса спихнешь чо
Марк ☢
06.01.2017
10:55:16
там ещё гандроллер нормальный надо. у меня есть норм сервак и возможность подключить к нему разные ссд одновременно
Google
Марк ☢
06.01.2017
10:55:28
аштрисёт
что теперь покупать? всмысле ссд
Старый
06.01.2017
12:06:37
Uncel
06.01.2017
12:07:16
Александр
06.01.2017
12:25:44
?
Ахаха
Тесты на rhel такие же будут
Ты несешь какую-то дичь
У тебя rhel головного мозга
Марк ☢
06.01.2017
12:30:57
это точно
Write cache: True, iodepth: 1, sync: True => 1128.39 IOPS
Write cache: True, iodepth: 1, sync: False => 19384.73 IOPS
Write cache: True, iodepth: 32, sync: True => 20618.62 IOPS
Write cache: True, iodepth: 32, sync: False => 33369.91 IOPS
Write cache: False, iodepth: 1, sync: True => 14689.62 IOPS
Write cache: False, iodepth: 1, sync: False => 19530.87 IOPS
Write cache: False, iodepth: 32, sync: True => 31137.09 IOPS
Write cache: False, iodepth: 32, sync: False => 29487.2 IOPS
вот различные значения описов в комбинациях
особенно доставляют первые два
Google
Марк ☢
06.01.2017
12:32:07
это https://lkml.org/lkml/2013/11/20/264
Александр
06.01.2017
12:32:08
Печально как-то
Марк ☢
06.01.2017
12:32:10
тут всё понятно
теперь вопрос, блять, а какие из них честные иопсы ?
Старый
06.01.2017
12:34:54
наименьшие
Uncel
06.01.2017
12:36:18
ну какбэ без кэша ssd сосет
позовем на помощь @pragus a
Александр
06.01.2017
12:37:00
Марк ☢
06.01.2017
12:37:00
щас я доделаю чтобы через ФС делало тесты и тогда развлечёмся по-полной
Александр
06.01.2017
12:37:33
Марк ☢
06.01.2017
12:55:08
FS: Write cache: True, iodepth: 1, sync: True => 711.01 IOPS
FS: Write cache: True, iodepth: 1, sync: False => 19708.06 IOPS
FS: Write cache: True, iodepth: 32, sync: True => 741.74 IOPS
FS: Write cache: True, iodepth: 32, sync: False => 30808.76 IOPS
FS: Write cache: False, iodepth: 1, sync: True => 5372.83 IOPS
FS: Write cache: False, iodepth: 1, sync: False => 19381.33 IOPS
FS: Write cache: False, iodepth: 32, sync: True => 11207.99 IOPS
FS: Write cache: False, iodepth: 32, sync: False => 31360.21 IOPS
вот через ФС
711 иопсов блять
это что за нах
http://pastebin.com/g9xa2Vup — сырец скрипта
Roman
06.01.2017
12:58:45
Марк ☢
06.01.2017
12:58:56
я заслал сырец скрипта
есть результы
FS: Write cache: True, iodepth: 1, sync: True => 711.01 IOPS
FS: Write cache: True, iodepth: 1, sync: False => 19708.06 IOPS
FS: Write cache: True, iodepth: 32, sync: True => 741.74 IOPS
FS: Write cache: True, iodepth: 32, sync: False => 30808.76 IOPS
FS: Write cache: False, iodepth: 1, sync: True => 5372.83 IOPS
FS: Write cache: False, iodepth: 1, sync: False => 19381.33 IOPS
FS: Write cache: False, iodepth: 32, sync: True => 11207.99 IOPS
FS: Write cache: False, iodepth: 32, sync: False => 31360.21 IOPS
Google
Марк ☢
06.01.2017
12:59:12
Write cache: True, iodepth: 1, sync: True => 1128.39 IOPS
Write cache: True, iodepth: 1, sync: False => 19384.73 IOPS
Write cache: True, iodepth: 32, sync: True => 20618.62 IOPS
Write cache: True, iodepth: 32, sync: False => 33369.91 IOPS
Write cache: False, iodepth: 1, sync: True => 14689.62 IOPS
Write cache: False, iodepth: 1, sync: False => 19530.87 IOPS
Write cache: False, iodepth: 32, sync: True => 31137.09 IOPS
Write cache: False, iodepth: 32, sync: False => 29487.2 IOPS
Uncel
06.01.2017
12:59:27
Шо?
iops-ы тонут, write amp во все поля
Марк ☢
06.01.2017
12:59:31
второй форвард — это напрямую в девайс
Uncel
06.01.2017
12:59:37
кляти O_SYNC все портит
Марк ☢
06.01.2017
12:59:42
есть вопросы.
у мну вопрос — почему через ФС другие цифры ? оно же O_DIRECT
Roman
06.01.2017
13:04:35
Я пока хз. Пока только пытаюсь загрузить проблему в голову :)
Марк ☢
06.01.2017
15:48:55
итак. я раздобыл сервак и в нём:
Model=OCZ-VECTOR150
Model=Samsung SSD 850 PRO 256GB
Model=OCZ-TRION150
щас запущу на нём свой мегатест
AnswerX
06.01.2017
15:50:56
@mark
Марк ☢
06.01.2017
15:53:30
што
поправил тесты, щас всё будет
итого. на векторе150:
RAW: Write cache: False, iodepth: 32, sync: True => 85686.06 IOPS
замечу — с синком!
бенчу гнусмас
RAW: Write cache: False, iodepth: 32, sync: True => 8899.67 IOPS
в 10 раз меньше
FS: Write cache: False, iodepth: 1, sync: True => 205.46 IOPS
самсунг охуенен
Александр
06.01.2017
16:16:17
:D
Google
Uncel
06.01.2017
16:18:20
Еще троллеркостер http://lists.ceph.com/pipermail/ceph-users-ceph.com/2015-September/004194.html
Марк ☢
06.01.2017
16:19:44
спс. отправил это тому кто купил нам эти ссд
Uncel
06.01.2017
16:30:58
spdk они завезли уже в релиз?
Поставить nvme дисков и забыть
https://github.com/ceph/ceph/pull/12734
normique
Марк ☢
06.01.2017
17:37:02
benching Model=OCZ-VECTOR150
RAW: Write cache: True, iodepth: 1, sync: True => 348 IOPS
RAW: Write cache: True, iodepth: 32, sync: True => 3825 IOPS
RAW: Write cache: False, iodepth: 1, sync: True => 27814 IOPS
RAW: Write cache: False, iodepth: 32, sync: True => 85686 IOPS
benching Model=Samsung SSD 850 PRO 256GB
RAW: Write cache: True, iodepth: 1, sync: True => 918 IOPS
RAW: Write cache: True, iodepth: 32, sync: True => 9827 IOPS
RAW: Write cache: False, iodepth: 1, sync: True => 415 IOPS
RAW: Write cache: False, iodepth: 32, sync: True => 8899 IOPS
benching Model=OCZ-TRION150
RAW: Write cache: True, iodepth: 1, sync: True => 938 IOPS
RAW: Write cache: True, iodepth: 32, sync: True => 11127 IOPS
RAW: Write cache: False, iodepth: 1, sync: True => 903 IOPS
RAW: Write cache: False, iodepth: 32, sync: True => 981 IOPS
Похоже, что самая адекватная система измерения — это по последней строке. на глаз они именно так и приходятся.
Михаил
06.01.2017
17:40:30
арр
задолбал простыни постить
Марк ☢
06.01.2017
17:44:24
ну уж ладно.. телега даже не просплиттила мессадж
Xeniya MTS
06.01.2017
18:24:03
слушайте, а может, переименуем этот чатик в "pro_ceph", и сделаем новый, про OpenStack и AWS?
Pavel
06.01.2017
18:30:00
От этого там появятся сообщения?)
Roman
06.01.2017
18:30:26
Xeniya MTS
06.01.2017
18:32:45
Но не нравится оффтоп
На самом деле это чат про ceph, если назвать вещи своими именами
Михаил
06.01.2017
18:34:21
так уж получилось
темболее чат про опенстек с благородными донами уже есть
только движухи там нет)
Google
Xeniya MTS
06.01.2017
18:35:31
что бы была движуха, нужно добавить AWS
Roman
06.01.2017
18:35:47
Михаил
06.01.2017
18:36:22
о, а где?
https://telegram.me/openstack_russia
там представители вендоров в том числе
Xeniya MTS
06.01.2017
18:36:55
Возможно, меня неправильно поняли - просто в чатике про опенстек хотелось бы видеть редкие посты, но про опенстек
Мне ceph тоже интересен,
хоть я с ним ещё и не работала, но надеюсь, поработаю
Просто так мешанина какая-то получается
Если опенстек с чем-то и объединять, мне кажется, то с AWS. Что бы сранивать, скажем, S3 и Swift, Heat и Cloudformation
А так если тут и пишут что-то про опенстек(а пишут?), то всё же теряется в потоках сообщений про ceph
Roman
06.01.2017
18:46:16