Кароч можно попробовать и посмотреть в чо уперлось. В сеть или диски

Если по одному диску на нод то 1г в принципе хватит

а сколько можно ожидать iops? И потребления RAM? Если есть какая-нибудь табличка, было бы интересно посмотреть

Что за дичь

а сколько можно ожидать iops? И потребления RAM? Если есть какая-нибудь табличка, было бы интересно посмотреть

ну сколько дисков столько и IOPS минус оверхед на тройную репликацию

ну сколько дисков столько и IOPS минус оверхед на тройную репликацию

ага, да, теперь примерно понятно, что ждать

гиг на терик не сильно много

По итогу больше нужно

Там все демоны ОЗУ жрут

Доку начал читать ?

И проц кстати кушают тоже

И проц кстати кушают тоже

Ну я даже при ребалансе не видел

Как закупят, если закупят буду тестить

Я сегодня с печалью посмотрел на 10 рейд и охуел, что нужно менять 10 дисков?

гиг на терик не сильно много

можно поспорить ))

о, подошли те кто кушал устриц)

там же ещё чтобы быстро было, нужно ssd подвезти

ну и если рассматривать его как блочный сторадж, то альтернатив то и нет считай.

так что да, ок вполне.

а вот как general purpose пожалуй нет наверно.

ДРБД не нужен

извините, я тут мимо проходил - а можно объяснить, почему дрбд не нужен?

нет, правда интересно

Потому что кернел паники генерит

И не скалебл нихуя

там же ещё чтобы быстро было, нужно ssd подвезти

Это ты о чем?

Тхин провизионинг оно не умеет само

Это ты о чем?

про журналы вестимо

про журналы вестимо

Ааа

Я думаю и смотрю на pcie или m2 ssd

Для этого

всё правильно

Правда цена кусается :(

И не скалебл нихуя

если маленький опенстечек, то и не нужно

Чо

Два контроллера, мастер-слейв, и на каждом cinder и drbd

Причём тут опенстак и ceph/drbd

бэкэнд для cinder же

Ещё раз, причём тут размер и опенстак вообще

Если речь не о них

ну вот есть, например, у тебя, скажем, пять железок

Стоят они в стойке

drbd тут для бэкэнда cinder вполне ОК

Чем ок?

будет достаточная производительность (у нас под нагрузкой 200-300 iops было, а без неё и больше было),

и железо не юзается лишнее, и всё такое

мы совмещали роли конроллера и drbd ноды

*контроллера

ну и контроллера для всех сервисов -

от нейтрона до swift

?

200-300 это типа ок?

я знаю, что ты про меня думаешь, поэтому последняя ремарка была, что бы ты не написал "ааа! она курица, и не знает, что контролеры кейстона и гланса можно разнести на разные железки!"

200-300 это типа ок?

там была нагрузка и 1g карточки в бондинге :(

Какая разница какие карты, 300 это норм?

расскажите пожалуйста, может ли ceph жить на 1G карточках?

может.

Какая разница какие карты, 300 это норм?

для нашего сервиса было норм

200-300 на сколько дисков и инстансов? И какого размера io при какой latency?

зависит от сервиса

300 иопс это нихуя это 1 ssd

200-300 на сколько дисков и инстансов? И какого размера io при какой latency?

raid 10 x 4 SAS 15k RPM

Старое железо, от старого проекта

Ясно понятно..

инстансов - если честно, я точно не знаю. Но вопрос беспредметный, сами понимаете, что разные инстансы гененируют разные нагрузки. Зависит от сервиса внутри

но мы старались что можно в Swift вынести

300 иопс это нихуя это 1 ssd

это страйп из 3х sata дисков.

swift стоял на компьютах

веб-приложение файлики например именно в swift складывало

Так стоп, 5 серверов по 4*sas и всего лишь 300

нет

два сервера

Я чего-то не понимать или меня где-то наебывать

мастер drbd, и слейв

слейв drbd - это мастер контроллер опенстека,

бля, что я читаю.

и наоборот

А причём тут 5 серверов

ну что за трэш

остальные - компьюты

ну что за трэш

Хз

nova + KVM + Swift

*nova/KVM

Мне вот нужно 3к иопс в минималке ?

Расскажи как добиться

я бы не стала делать drbd на 5 нод

Мне вот нужно 3к иопс в минималке ?

если бы мне дали денег, я бы купила нетапп :)

(для этой задачи)

я бы не стала делать drbd на 5 нод

ээээ? это как? drbd - это тупо сетевое зеркало.

Ясно понятно

ээээ? это как? drbd - это тупо сетевое зеркало.

Ну и что? У меня /boot на домашнем компе из 4 дисков raid 1

ещё раз -

микроопенстек,

две железки - контроллеры всех сервисов опенстека

на них же drbd

и мастер контроллеры опенстека совпадают со слейвом drbd,

и наоборот

остальные три железки - компьюты

Nova/KVM + ноды Swift

Я просто к чему. К вопросу нужен ли 10g. У меня на тестовой лабе ceph'а из двух серверов, 20 дисков sata, журналы на ssd, bond 2x1g выходило изнутри инстанса 2000-2200 iops 4k rand rw при latency 10ms. И это не в сеть упиралось. Но вот чем больше osd будет и чем быстрее хочется потом восстанавливаться при сбоях, тем больше будет потребность в сети, памяти и проце

1gbond dno:-(

10 нужно будет в любом случае