Причём тут опенстак и ceph/drbd

бэкэнд для cinder же

Ещё раз, причём тут размер и опенстак вообще

Если речь не о них

ну вот есть, например, у тебя, скажем, пять железок

Стоят они в стойке

drbd тут для бэкэнда cinder вполне ОК

Чем ок?

будет достаточная производительность (у нас под нагрузкой 200-300 iops было, а без неё и больше было),

и железо не юзается лишнее, и всё такое

мы совмещали роли конроллера и drbd ноды

*контроллера

ну и контроллера для всех сервисов -

от нейтрона до swift

😕

200-300 это типа ок?

я знаю, что ты про меня думаешь, поэтому последняя ремарка была, что бы ты не написал "ааа! она курица, и не знает, что контролеры кейстона и гланса можно разнести на разные железки!"

200-300 это типа ок?

там была нагрузка и 1g карточки в бондинге :(

Какая разница какие карты, 300 это норм?

расскажите пожалуйста, может ли ceph жить на 1G карточках?

может.

Какая разница какие карты, 300 это норм?

для нашего сервиса было норм

200-300 на сколько дисков и инстансов? И какого размера io при какой latency?

зависит от сервиса

300 иопс это нихуя это 1 ssd

200-300 на сколько дисков и инстансов? И какого размера io при какой latency?

raid 10 x 4 SAS 15k RPM

Старое железо, от старого проекта

Ясно понятно..

инстансов - если честно, я точно не знаю. Но вопрос беспредметный, сами понимаете, что разные инстансы гененируют разные нагрузки. Зависит от сервиса внутри

но мы старались что можно в Swift вынести

300 иопс это нихуя это 1 ssd

это страйп из 3х sata дисков.

swift стоял на компьютах

веб-приложение файлики например именно в swift складывало

Так стоп, 5 серверов по 4*sas и всего лишь 300

нет

два сервера

Я чего-то не понимать или меня где-то наебывать

мастер drbd, и слейв

слейв drbd - это мастер контроллер опенстека,

бля, что я читаю.

и наоборот

А причём тут 5 серверов

ну что за трэш

остальные - компьюты

ну что за трэш

Хз

nova + KVM + Swift

*nova/KVM

Мне вот нужно 3к иопс в минималке 😄

Расскажи как добиться

я бы не стала делать drbd на 5 нод

Мне вот нужно 3к иопс в минималке 😄

если бы мне дали денег, я бы купила нетапп :)

(для этой задачи)

я бы не стала делать drbd на 5 нод

ээээ? это как? drbd - это тупо сетевое зеркало.

Ясно понятно

ээээ? это как? drbd - это тупо сетевое зеркало.

Ну и что? У меня /boot на домашнем компе из 4 дисков raid 1

ещё раз -

микроопенстек,

две железки - контроллеры всех сервисов опенстека

на них же drbd

и мастер контроллеры опенстека совпадают со слейвом drbd,

и наоборот

остальные три железки - компьюты

Nova/KVM + ноды Swift

Я просто к чему. К вопросу нужен ли 10g. У меня на тестовой лабе ceph'а из двух серверов, 20 дисков sata, журналы на ssd, bond 2x1g выходило изнутри инстанса 2000-2200 iops 4k rand rw при latency 10ms. И это не в сеть упиралось. Но вот чем больше osd будет и чем быстрее хочется потом восстанавливаться при сбоях, тем больше будет потребность в сети, памяти и проце

1gbond dno:-(

10 нужно будет в любом случае

Накладные расходы и т.п.

1gbond dno:-(

Почему?

Накладные расходы и т.п.

Какие именно?

Какие именно?

на пиздешь)

на пиздешь)

😂

Именно так

Разумеется. они както против цефа как я заметил... везде толкают свой глустерфс

Воу воу, цеф как бы уже куплен красной шапкой

баян

но випдимо с целью задушить

так.

у меня цефовопрос

купив на них подписку

Ниче не покупал, меня как то пригласили на один из вебинаров, до сих пор шлют на разные темы

$ ceph osd tree ID WEIGHT TYPE NAME UP/DOWN REWEIGHT PRIMARY-AFFINITY -1 2.69698 root default -2 2.69698 host node2 0 0.87849 osd.0 up 1.00000 1.00000 1 0.90919 osd.1 up 1.00000 1.00000 2 0.90919 osd.2 up 1.00000 1.00000 3 0.00009 osd.3 up 1.00000 1.00000

что с последним осд. почему у него такой маленьки вес ?

а объм диска такм такой же как у остальных?