The
Vsan та ещё шляпа касаемо скорости
Расскажите поподробнее, пожалуйста, о вашем опыте.
Art
Для этих рисков делается метрокластер из 2 СХД.
Это видимо что-то проприетарное от производителя СХД?
Василий
Vsan та ещё шляпа касаемо скорости
у меня работает сильно быстрее зфс
inqfen
Расскажите поподробнее, пожалуйста, о вашем опыте.
Да чего тут подробнее, по скорости и иопсам vsan дичайше проигрывала тем же дискам в других наборах, даже s2d пробовал
inqfen
Но у s2d наоборот - скорость норм, но сыпется
inqfen
10г dac
Василий
сколько кеша?
inqfen
Очень детально и аргументированно.
Сильно детали я и не вспомню, это было 3 года назад
inqfen
Может сейчас конечно лучше, это был 6.0 ещё
inqfen
6.5 тогда не вышел даже
inqfen
4 даже года
The
Может сейчас конечно лучше, это был 6.0 ещё
Скажем так, если правильно сайзить, то можно спокойно сотни килойопсов выжимать. Но, да ESXi-only. И ценник на уровне тырпрайз midrange будет.
inqfen
MS ?
Да, они замахнулись на сразу дохуя и в итоге как в 2016 выкатили так и фиксят до сих пор
Art
Вам шашечки или ехать?
Я на ZFS уже ехаю) Не с целью раскритиковать спрашиваю. Хочу просто понять минусы ZFS по сравнению с другими решениями. В данном случае сравниваю мой псевдо-HA с настоящим HA. Собственное решение от EMC или Hitachi это клёво я считаю, ничего против не имею.
inqfen
5 емнип
Не, вру 6 или 7
Василий
5 емнип
4+винтнесс или 5+витнес?. впрочем, странно, у меня действительно всан пока приятно работает. но он почти алфше получился
Василий
там кеша почти половину емкости
inqfen
Машин 7, но одна вроде была не в всане
inqfen
там кеша почти половину емкости
Не, там кеша было уровня 2 SSD интела по 240 на машину, а хдд 10 тб, где-то так
Василий
Значит не такой уж и бред я написал про Microsoft ^ ?
еще раз, у меня двухголовая хранилка, каждая голова подключена как отдельный диск в солярке и все это стрипится. за год ни одного црц. зфс крут, но не стоит его совать везде. контроль состояния есть почти везде
inqfen
жесть :))) при рекомендациях 10-30% )
Быстро лепили из того что было в наличии)
inqfen
Потом переделывали, но я уже с ними не работал
Art
Лучше отталкиваться от требований. Если это не домашняя лаба.
Ок... Ну вот у меня допустим суперважная ВМ, и не ESXi, а ахаха KVM Простой недопустим, за потерю данных расстрел. Как организовать сторадж?
inqfen
Ну по факту да, кеш был процентов 5
inqfen
Кстати в kvm ничего плохого нет
Art
Кстати в kvm ничего плохого нет
Это я просто чтобы VSAN отмести)
inqfen
Ну вот, линстор, цеф
inqfen
Drbd
The
Ок... Ну вот у меня допустим суперважная ВМ, и не ESXi, а ахаха KVM Простой недопустим, за потерю данных расстрел. Как организовать сторадж?
Так хост энивей может сдохнуть, вот вам и простой. И данные потерять всегда реально, нужно просто, чтобы дисков сдохло больше, чем позволяет parity. В любом случае нужно иметь бэкапы. Вопрос всегда один: сколько стоит простой и сколько стоит потеря данных (RTO и RPO)?
Василий
Ну вот, линстор, цеф
цеф же это не про скорость
inqfen
цеф же это не про скорость
Смотря как соберёшь
inqfen
https://yourcmc.ru/wiki/Ceph_performance
Alexander
С smr у zfs все плохо было, не уж то пофиксили?
Про SMR диски не знаю в каком состоянии, при использовании обычных HDD мне недоступно ничего надежнее ZFS.
inqfen
Тут более-менее для начала цефа описано
Alexander
Тут более-менее для начала цефа описано
А вот без учета глупости, неправильности из-за избыточности стэков, меньшей производительности и т.п. Вопрос по надежности если CEPH разворачивать поверх zvol блоков разных узлов, это будет надежнее, чем аналогично HAST? Да еще и в придачу настоящий кластер с кворумом, а не просто 2 узла.
inqfen
По перформансу цефа у шляпы были статьи, но не уверен, что они без подписки доступны
inqfen
Но если юзаешь цеф - то zfs будет пятой ногой, именно потому что он рассчитан на доступ к девайсам напрямую
Alexander
Вам лучше в чат цефа
Там уже спрашивал, - посмеялись, CEPH поверх ZFS ненужно с их точки зрения - это избыточно.
inqfen
И не ожидает что девайс внизу ведёт себя со своей доп логикой
Dmitriy
Зфс сам по себе ценен, а цеф про другое
The
Ceph поверх ZFS поверх vmdk поверх vSAN поверх SAN block storage 👍🏻
Alexander
Но если юзаешь цеф - то zfs будет пятой ногой, именно потому что он рассчитан на доступ к девайсам напрямую
Ожидает прямого доступа ZFS или CEPH или оба по вашему мнению? Знаю, что по докам ZFS ожидает такого.
Art
Так хост энивей может сдохнуть, вот вам и простой. И данные потерять всегда реально, нужно просто, чтобы дисков сдохло больше, чем позволяет parity. В любом случае нужно иметь бэкапы. Вопрос всегда один: сколько стоит простой и сколько стоит потеря данных (RTO и RPO)?
Ну это понятно, серебряной пули нет... В общем тогда резюмирую для себя: Если я хочу тру-HA, то это достижимо: в виде Цефа, Линстора или DRBD. Плюс собственные закрытые решения от вендоров СХД, а также vSAN для ESXi А что касается ZFS, то его присобачить к некоторым этим решениям можно, но не нужно
Alexander
Ceph поверх ZFS поверх vmdk поверх vSAN поверх SAN block storage 👍🏻
ESXi зарекся использовать, так же как Windows сервера.
The
ESXi зарекся использовать, так же как Windows сервера.
Ваше мнение очень ценно для бизнеса, разумеется :)
Alexander
И цеф тоже
И что он может порушиться поверх zvol с sync=standard ?
Alexander
Ваше мнение очень ценно для бизнеса, разумеется :)
Да я не пытаюсь кого-то в чем-то убеждать, пользуйтесь VMWare, а я лучше буду использовать SunOS и KVM.
inqfen
И что он может порушиться поверх zvol с sync=standard ?
1. Скорость 2. Зачем? Пихнуть чтобы пихнуть?
The
Да я не пытаюсь кого-то в чем-то убеждать, пользуйтесь VMWare, а я лучше буду использовать SunOS и KVM.
Вы будете использовать то, что решат чифы. Если вы не один из них ;)
inqfen
Тебе всё выше сказали, а ты по кругу ходишь
inqfen
Это аутизм уже какой-то
Alexander
1. Скорость 2. Зачем? Пихнуть чтобы пихнуть?
Я уже объяснял много раз, боюсь повторяться, тем более Федор уже сделал замечание мне.
inqfen
Ты объяснял какими-то аргументам и верующего
Alexander
Вы будете использовать то, что решат чифы. Если вы не один из них ;)
Такие чифы никогда не увидят меня среди списков тех, кому они могут что-то приказывать.
inqfen
Без фактов и доводов, а "я так верю"
inqfen
Зачем с таким подходом ты что-то спрашиваешь? Поступай по вере и бог тебе судья
Alexander
Без фактов и доводов, а "я так верю"
Я знаю, как ведет себя ZFS при "проблемах" (скорее всего искусственных) с оборудованием, не хочу тратить время на эксперименты с CEPH в этом плане.
Alexander
ну ты зфс поверх рейда не ставишь
Так не поверх, а наоборот снизу цефа предлагаю.