Anton
ну он и в рейде бы козлил давая делей на иопсики твои
Anton
ну кароч твой сетап говно, ты как ПоК это всё делаешь для знаний, или у тебя цель есть какая?
Mark ☢️
Цель — хочу получить достаточно бытсрый цеф под виртуалки
Mark ☢️
поэтому сраниваю харки одиночных дисков с харками вирт. образа в цефе
Mark ☢️
есть подозрение что изза дабл врайта всё будет очень печально
Mark ☢️
так что пока это всё ПоК, реальных данных там нет.
Anonymous
Square
Anonymous
Mark ☢️
мне хотябы на одной ноде надо чтобы знать что не в сети дело.
Mark ☢️
сеть будет 10Гб
Mark ☢️
с сетью потом отдельную ёблю устрою
Mark ☢️
сейчас сначала это.
Anonymous
опять ты с этой нодой
Mark ☢️
не опять, а снова
Anton
твой аппроч невалиден для этой системы
Mark ☢️
эт патчиму эта
Anonymous
Михаил
Потому что с одной ноды ты получишь максимум 200 иопсов и то, скорее 140
Mark ☢️
БЛЮСТОР АХУЕНЕН
Anonymous
я Роману больше доверяю чем Марку
Mark ☢️
да вы запарили. мне надо сначала локально всё устаканить
Mark ☢️
выбрать правильные диски, настроить методику измерения и т.д.
Anonymous
да локально все совсем другое
Anonymous
как ты не поймешь
Mark ☢️
а потому уже сети добавлять и мерить всё заново
Mark ☢️
да понимаю я что изза сети и задержек будет совсемдругое всё, я ж не тупой
Anonymous
ну я так и понял
Anton
ну, тогда цеф не для тебя, сходи купи нутаникс)
Михаил
Anton
его или правильно тестить с пониманием того как оно работает, или меняй на систему "искаропки"
Mark ☢️
Пруфы
ну как. той самой говнобенчилкой стало 35-40 мб/сек
Mark ☢️
когда убрал говнодиск
Mark ☢️
до этого было 10-11
Mark ☢️
сейчас запустил фио
Mark ☢️
смотрю задлержки и пр.
Михаил
Тебе надо сейчас еще раз померить на нормальных дисках
Anton
Mark ☢️
срачегенраторы блин
Mark ☢️
lat (msec) : 2=0.02%, 4=0.11%, 10=1.93%, 20=3.38%, 50=19.28%
lat (msec) : 100=33.81%, 250=28.50%, 500=6.14%, 750=5.08%, 1000=1.65%
lat (msec) : 2000=0.11%
Mark ☢️
что насчёт кэша на самих дисках ? оно реально на что-то влияет для наших случаев ?
Mark ☢️
если од депс один, то:
Mark ☢️
lat (usec) : 1000=1.49%
lat (msec) : 2=35.11%, 4=1.41%, 10=1.23%, 20=15.38%, 50=13.80%
lat (msec) : 100=28.65%, 250=2.59%, 500=0.26%, 1000=0.09%
Mark ☢️
щас посмотрю для одиночного диска
Mark ☢️
без цефа
Anton
а зачем с очередью 1?
Anton
у тебя ссд?
Mark ☢️
нет
Mark ☢️
всё магнитное
Anton
cat /sys/block/NAME/queue/nr_requests
Anton
и ставь такую очередь
Mark ☢️
под нагрузкой всмысле ?
Mark ☢️
ну и кагбы дисков то три
Anton
ну у каждого смотри какая очередь
Anton
в идеале всё что в одной группе - одинаковая очередь
Anton
у ссд очередь 1, иногда 1-32, зависит от WB кэша на борту и его размера
Mark ☢️
одиночный диск:
Mark ☢️
lat (usec) : 2=99.50%, 4=0.22%, 10=0.12%, 20=0.16%, 50=0.01%
lat (usec) : 250=0.01%, 500=0.01%
Mark ☢️
это с иодепс 1
Mark ☢️
сейчас с 32 сделаю
Михаил
мб с 16 лучше сначала?
Anonymous
Anton
сколько кешика у контроллера, и какая нагрузка, и есть упсы там или как
Mark ☢️
упсов нет и не планируется
Mark ☢️
рэйдов нет и не планируется
Mark ☢️
диски сата
Viktor
звучит как начало интересной развлекухи
Михаил
Viktor
ок
Viktor
но интересно как него дальше дела пойдут, хотя это poc? тогда пофигу, согласен на все 100
Anton
диски сата
начни с nr_requests=128 и в фио очередь сделай 128
Mark ☢️
ну всё. пизда. fio завис в Uninterruptible sleep
Mark ☢️
и килл минус килл не помогает ессесно
Михаил
мне кажется у тебя диски совсем говно
Mark ☢️
Михаил
или ты что-то не то делаешь