Цель — хочу получить достаточно бытсрый цеф под виртуалки

привет

Цель — хочу получить достаточно бытсрый цеф под виртуалки

ну дак ПоК что взлетает тебе надо, или ты перформанс распределённой системы решил мерять с 1 ноды, что внезапно будет говно

мне хотябы на одной ноде надо чтобы знать что не в сети дело.

сеть будет 10Гб

с сетью потом отдельную ёблю устрою

сейчас сначала это.

опять ты с этой нодой

не опять, а снова

твой аппроч невалиден для этой системы

эт патчиму эта

эт патчиму эта

+

Потому что с одной ноды ты получишь максимум 200 иопсов и то, скорее 140

БЛЮСТОР АХУЕНЕН

твой аппроч невалиден для этой системы

плюсую, я уже гед-то говорил про лучшие практики...

я Роману больше доверяю чем Марку

да вы запарили. мне надо сначала локально всё устаканить

выбрать правильные диски, настроить методику измерения и т.д.

да локально все совсем другое

как ты не поймешь

а потому уже сети добавлять и мерить всё заново

да понимаю я что изза сети и задержек будет совсемдругое всё, я ж не тупой

ну я так и понял

ну, тогда цеф не для тебя, сходи купи нутаникс)

БЛЮСТОР АХУЕНЕН

Пруфы

его или правильно тестить с пониманием того как оно работает, или меняй на систему "искаропки"

Пруфы

ну как. той самой говнобенчилкой стало 35-40 мб/сек

когда убрал говнодиск

до этого было 10-11

сейчас запустил фио

смотрю задлержки и пр.

до этого было 10-11

Так у тебя говно диск был

Тебе надо сейчас еще раз померить на нормальных дисках

Так у тебя говно диск был

там всё говно

срачегенраторы блин

lat (msec) : 2=0.02%, 4=0.11%, 10=1.93%, 20=3.38%, 50=19.28% lat (msec) : 100=33.81%, 250=28.50%, 500=6.14%, 750=5.08%, 1000=1.65% lat (msec) : 2000=0.11%

что насчёт кэша на самих дисках ? оно реально на что-то влияет для наших случаев ?

если од депс один, то:

lat (usec) : 1000=1.49% lat (msec) : 2=35.11%, 4=1.41%, 10=1.23%, 20=15.38%, 50=13.80% lat (msec) : 100=28.65%, 250=2.59%, 500=0.26%, 1000=0.09%

щас посмотрю для одиночного диска

без цефа

а зачем с очередью 1?

у тебя ссд?

нет

всё магнитное

cat /sys/block/NAME/queue/nr_requests

и ставь такую очередь

под нагрузкой всмысле ?

ну и кагбы дисков то три

ну у каждого смотри какая очередь

в идеале всё что в одной группе - одинаковая очередь

у ссд очередь 1, иногда 1-32, зависит от WB кэша на борту и его размера

одиночный диск:

lat (usec) : 2=99.50%, 4=0.22%, 10=0.12%, 20=0.16%, 50=0.01% lat (usec) : 250=0.01%, 500=0.01%

это с иодепс 1

сейчас с 32 сделаю

мб с 16 лучше сначала?

мб с 16 лучше сначала?

+

мб с 16 лучше сначала?

ну тип вообще по хорошему надо расчитывать

сколько кешика у контроллера, и какая нагрузка, и есть упсы там или как

упсов нет и не планируется

рэйдов нет и не планируется

диски сата

звучит как начало интересной развлекухи

звучит как начало интересной развлекухи

для цефа пойдет

ок

но интересно как него дальше дела пойдут, хотя это poc? тогда пофигу, согласен на все 100

диски сата

начни с nr_requests=128 и в фио очередь сделай 128

ну всё. пизда. fio завис в Uninterruptible sleep

и килл минус килл не помогает ессесно

мне кажется у тебя диски совсем говно

мне кажется у тебя диски совсем говно

может быть

или ты что-то не то делаешь

да я просто дал ему терабайтный лвм на потыркать

лвм?

ну да а што

nobarrier хоть настроил наркоман?

не thin который

вот Марк меня бесит

так. стопэ

который раз наркоманом называют

Nobarrier же к FS относится, разве нет ?

а у меня там FS нету

т.е. ты в лвм блок девайс пихаешь фио, да?

ну тип зачем?

да

ну шринкни пвс

сделай там раздел

и его гоняй

а зачем? ну там в соседнем лвме есть полезные данные

максимум что может жрать от этого - цпу на один нанопроцент больше

http://lists.ceph.com/listinfo.cgi/ceph-users-ceph.com

о. отвис фио

ну это пиздец

есть мысль, что ты фио, кхм неправильно готовишь ;)

окей, может быть. скажи как правильно ?

лучше не ссылкой на статью