kiosaku
ссд принимается
Mike
бред
kiosaku
в рейде у дисков write cache отключили?
Mike
зачем вам на сервере двухпортовый SAS? А если ещё и direct backplain - то тем более
Михаил
сас
да нормально сата живёт под виртуализацией, зависит от типа нагрузки + надо резать клиентам iops-ы не забывать
Михаил
что бы не выжирали весь кластер
kiosaku
низзя резать
kiosaku
бой
kiosaku
сказя тянет, сата+ссд(журнал) - нет
Logan
у кого-то можно, у кого-то нет
Михаил
низзя резать
лол
100500 вм, и тут кому-то припёрло запустить фио и он кладёт иопс-ами весь кластер)
Михаил
класс
Logan
по сути это то же самое. Просто это селективная нарезка
зуб даю, ну не нужен реально всем полный IOT
kiosaku
насчёт классов думали, но вот в чём беда
kiosaku
таких виртуалок - много
kiosaku
т.е. больше 2-3-5
kiosaku
и всплеск по iops на одной тут же отражается на остальных
kiosaku
начинают тупить - начинают тупить бэки, т.к. запросы местами синхронные
Pavel
не резать иопсы - боль
Михаил
Что бы не было такого
kiosaku
пишут много
kiosaku
медленно писать нельзя
Pavel
в циндере
kiosaku
при кластере на скази(сас) такая просадка при сильно большей нагрузке появляется
Pavel
ну естественно
Pavel
но и там надо резать
kiosaku
но ... скази не получилось оставить ...
Artem
Ну и в итоге по сколько вы нарезаете на клиента?
Михаил
медленно писать нельзя
даешь по щщам админу виртуалки и пусть скажет, сколько ему иопсов надо. ответ "все" не принимается
Pavel
Ну и в итоге по сколько вы нарезаете на клиента?
зависит от клиента, на рутовые диски общее правило порядка 200-300 total-iops
Pavel
на циндер разные типы для разных систем
Artem
А общая производительность ceph при этом? У меня вообще нагрузок нет 😂
kiosaku
ну, предлагаю посчитать ... кластер прометея, кластер кролика ...
kiosaku
нагрузки небольшие, метрик - тыщ под 50 чтоль, или 150 - завтра посмотрю
kiosaku
кролик disc based, 5-10к запросов в среднем
kiosaku
придётся вернуться во времена ide/scsi
kiosaku
ибо ничего с той поры не изменилось
kiosaku
не предназначен ide для нагрузок
Mike
ну да конечно, ничего не поменялось
Mike
а почему IDE? Давай сразу ISA и бабины вспомним.
kiosaku
если считаете, что поменялось - поделитесь тайным знанием
Mike
можно до перфокарт дойти
kiosaku
только про ncq не надо у сата
Mike
почему не надо? надо надо
Mike
получается ssd sata - норм. шпиндели - нет.
kiosaku
ссд сата вытягивает из-за того, что ссд (иопсов сильно больше)
kiosaku
простой вопрос: если сата такой хороший, то почему сас жив?
Mike
a sas ssd - долно по идее вообще разорвать сервер в клочья?
kiosaku
ну не настолько радикально
kiosaku
моя фраза про сата была в первую очередь про шпиндели в цефе
kiosaku
хотя ... у меня есть машинки, где и сата ссд себя плохо чувствуют
kiosaku
доеду - попробую график запостить
Mike
Основаня разница в командах, наличии MPIO, глубине очереди.
Mike
Но на сервере, на котором крутится ceph, зачем MPIO? Расширенные комманды?
Mike
если у вас RAID, jbod - то да, SAS. Если много дисков - придётся ставить HBA и SAS диски.
kiosaku
raid и поверх него цеф? зачем дублировать?
Михаил
если у вас RAID, jbod - то да, SAS. Если много дисков - придётся ставить HBA и SAS диски.
А что не так с jbod sata?
Mike
А что не так с jbod sata?
нужна поддежка SES-2/3, dual-port (пока не видел SATA дисков с двумя портами).
Mike
raid и поверх него цеф? зачем дублировать?
есть задачи, а которых уместно. Журналы, например, сделать на R1/10. Тогда когда надо свести к минимум перебалансироваку и отказы дисков.
Mike
ценой места и стоимости.
kiosaku
журналы чего?
Mike
ceph
kiosaku
а зачем журналу цеф рейд1?
Михаил
Что бы при смерти ссд не умерло еще пяток осд
kiosaku
а ... так 5 журналов на одном диске ...
kiosaku
увы, такой наркомании не очень понимаю :)
kiosaku
какая-то неправильная экономия выходит
Михаил
По сколько у вас дисков на один журнал?
kiosaku
во-первых, дублируя запись на диски вы уже в два раза увеличиваете время на запись
kiosaku
один
Logan
По сколько у вас дисков на один журнал?
у меня кластер испытательный - так что ни одного. В смысле журнал на том же диске, где и сами данные