George
А то что они smr только уменьшают вероятность успеха
Dmitriy
Для больших дисков raidz1 не стоит собирать, минимум 2
ТС не пролезало в доступные бюджеты, одобрили 6 групп по 5 дисков
Dmitriy
smr конечно доставляет...
Art
smr конечно доставляет...
у вас как я понял сигейты, а их smr как говорят не такой паршивый как у вд, так что не всё так плохо как там ресилвер продвигается?
Dmitriy
плохо - заглючили дисковые полки. разбираемся с железом
Arseniy
Кстати, про выбор типа массива. Что лучше, raidz1 + 1 диск под hot spare, или сразу бахнуть 2 striped mirrors? В распоряжении 4шт 8Тб HDD. Под медиатеку 😂 но не хотелось бы ее потерять, ага) Пока склоняюсь к первому варианту. Но не уверен, что диск в режиме hot spare не будет крутиться вхолостую, расходуя м/ч. Может, подскажете?
Maksim
я raidz2 сделал из 4 дисков потому что скорость была не важна, а с striped mirror всё равно может не повезти
Nikita
Тоже, когда только четырьмя дисками располагал делал raidz2. Надежность чуть-чуть, но больше)
Arseniy
А что за фокус с небольшими файлами на 32К? Ноги растут к ситуации, когда потребуется пересобрать массив в силу потери диска, полагаю?)
central
А что за фокус с небольшими файлами на 32К? Ноги растут к ситуации, когда потребуется пересобрать массив в силу потери диска, полагаю?)
Размер блока фиксированный соответственн файлы меньше размера блока. Думаю про это речь
Ivan
разрешаю
George
это как в случае с draid, где минимальный recordsize постоянный?
В draid всё ещё жёстче, там статический размер страйпа и он 32k чтоли
George
Вот про raidz я документировал https://openzfs.github.io/openzfs-docs/Basic%20Concepts/RAIDZ.html
Dmitriy
плохо - заглючили дисковые полки. разбираемся с железом
после восстановления работы дисковых полок, пришлось сделать zpool clear после этого резилвер завершился успешно за 10 часов
Dmitriy
Всем спасибо за оказанную моральную поддержку )
Fedor
В draid всё ещё жёстче, там статический размер страйпа и он 32k чтоли
что такое страйп в данном контексте? что за полоса такая? это не recordsize и не volblocksize
George
что такое страйп в данном контексте? что за полоса такая? это не recordsize и не volblocksize
это набор блоков, которые должны на каждый диск приехать, по факту это recordsize блок, разрезанный на части, плюс parity
Михаил
Всем привет. Может кто посоветует. Есть домашний pet проект, выросший и приносящий небольшой доход. Группа виртуалок, по нагрузке напоминает небольшую группу VDI, много последовательного чтения, пару раз в месяц много рандомной записи. Ищу для покупки несколько sata/nvme ssd чтоб собрать условный raid10 на ZFS размером в пару Тб. Бюджет 25-30 тыс. рублей. Новые серверные дорого, не окупит себя быстро, б/у опасаюсь. Может какие бытовые диски есть с хорошим ресурсом? Спасибо
central
С парой дисков это рандом полный, повезет не повезет
Михаил
благодарю, а условные Samsung PM893 960 Гб 4 штуки?
Georg🎞️🎥
благодарю, а условные Samsung PM893 960 Гб 4 штуки?
Ничего не могу сказать … по мне , это шляпа, особенно если зарабатывать
Михаил
Вот уж точно плохая идея
А что не так? В бюджет попадает. Требованиям соответствует.
Vladislav
https://qsan.su/userdata/library/1c/af/1caf07ec5d27c2731eddae6960f07c5d.pdf
Михаил
https://club.dns-shop.ru/review/t-101-ssd-nakopiteli/57648-obzor-ssd-samsung-980-pro-2tb-mz-v8p2t0bw/
Михаил
Главное радиаторы поставить
Vladislav
Главное радиаторы поставить
Ага, а потом трим начнется под мелкоблочной нагрузкой
Михаил
https://3dnews.ru/1021227/obzor-nvmenakopitelya-samsung-980-pro В процессе тестирования было замечено, что рост мощности контроллера Elpis привёл к ускорению выполнения операции TRIM. После удаления файлов большого объёма Samsung 980 PRO больше не демонстрирует падения производительности на несколько секунд, что довольно отчётливо прослеживалось у прошлых накопителей южнокорейского производителя. В процессе тестирования было замечено, что рост мощности контроллера Elpis привёл к ускорению выполнения операции TRIM. После удаления файлов большого объёма Samsung 980 PRO больше не демонстрирует падения производительности на несколько секунд, что довольно отчётливо прослеживалось у прошлых накопителей южнокорейского производителя.
Михаил
Но конечно, если бюджет позволяет, лучше специализированные серверные SSD купить.
Алексей
благодарю, а условные Samsung PM893 960 Гб 4 штуки?
Вчера на авито взял бу за 13500
Vladislav
Главное радиаторы поставить
И график который показывает падение И я не про большое от того, что кэш закончился, я про пилообразный во всё остальное время
Vladislav
чето очень дорого
Ну, 2тб сата 870 evo новые стоят примерно столько же, поэтому вполне здравая цена
Vladislav
Это очень парадоксально, но сата/сас будут дороже nvme, потому nvme рейд только софтварный, а люди в РФ любят хардварные рейды
Vladislav
за 20к можно уже nvme pm983 взять того же размера.
За 17к можно взять pm9a3, у Вас немного ценник устарел
Vladislav
на али если только.
Нет в РФ в официальном магазине
Ivan
есть ссылка ?
Михаил
И график который показывает падение И я не про большое от того, что кэш закончился, я про пилообразный во всё остальное время
Для перфекционистов есть Intel Optane 905P Series 960GB https://www.avito.ru/moskva/tovary_dlya_kompyutera/nakopitel_intel_optane_905p_series_960gb_2714203375 Но бюджет надо в 6-7 раз увеличить
Vladislav
Arseniy
А что посоветуете смотреть, если есть библиотека для САПР (общий объем около 100Гб, около 20% файлов по 10-20кб, 30% 100-300кб, около 50% по 10-50Мб. Запись производится редко, в основном чтение, причем рандомное при загрузке библиотеки. Выигрыш у nvme ощутимый будет? Или можно просто серверные смотреть sas?
Arseniy
Думаю делать 2 striped mirror общим объемом не более 1Тб. Но и 500Гб хватит
Vladislav
Главное радиаторы поставить
Прямо сейчас в SDS чатике про похожие советы речь идёт))
central
Че то вы слишком жестить начали, не будет там скорее всего нагрузок страшных если это пет проект который крутится на сервере на антресолях
central
Я бы тут лично вообще бы не парился сборкой домашнего сервера ибо абсолютно не известно что будет в будущем со всем этим, может всё заглохнет через пару месяцев
Arseniy
Тут имхо можно и в ОЗУ вложиться
Да, озу будет 128Гб, но хотелось бы подстраховаться и со стороны дисковой подсистемы. В калькуляторе посчитал, что прирост скорости будет ещё х2 если это будет mirror из двух страйпов. Только непонятно что с ИОПСами...
central
Патч для nvme емнип до сих пор не вмерджилм так что боль и печаль
Georg🎞️🎥
Главное радиаторы поставить
Главное брать профильное железо под профильную нагрузку 👋
Vladislav
А кстати сколько дает? )) в случае с hdd 7200?
Если есть особый бэкплейн\рейд? SAS SSD по сравнению с SATA SSD даст что-то x1.9 если есть 2+ клиента (потому что SAS SSD даёт системе два пути до диска, но не делает от этого канал в два раза шире)
Arseniy
Без бэкплейна, в корпус сразу
Arseniy
Там не то чтобы много дисков. 4 SSD + 4 HDD. Всё. При этом думал корпус без бэкплейна, с прямым подключением
Vladislav
Ну так планировал использовать LSI 9400
Вам тогда нужны кабели такого формата http://www.scsi4me.com/sas-7p82-2.html Если нужны прямо скорости SAS Либо делать\искать бэкплейн с мультиплексером
Vladislav
Во всём остальном - sata и sas ничем не отличаются для LSI 9400
Arseniy
Скажем так, учитывая что сетка 1Гбит/С, скоростей SAS не добиться. Вопрос не встрять по ИОПСам...
Arseniy
Не встрять по ИОПС при записи 4к файлов на 5 потоков (5 ПК) объёмом под 100мбайт
Vladislav
Не встрять по ИОПС при записи 4к файлов на 5 потоков (5 ПК) объёмом под 100мбайт
У Вас сетка быстрее забьётся от такого количества пакетов, чем канал до диска
Arseniy
У Вас сетка быстрее забьётся от такого количества пакетов, чем канал до диска
То есть, можно спокойно взять SATA бытовые диски? Я слабо понимаю как пересчитать пакеты и ИОПСы) Скажем так, при сетке 1Гбит, какой максимальный разумный предел по IOPS и какой разумный выбор ssd?
Arseniy
Заниматься зеркалированием двух страйпов тогда тоже смысла не имеет? Проще взять два диска на объём х2 и засунуть в зеркало в таком случае..
Maksim
Это вообще звучит как довольно линейная задача (запись видео), тут и хдд должно быть нормально, нет разве?
Arseniy
Пардон, где я про видео писал?) Я писал про запись большого количества мелких файлов
Maksim
4к как видео воспринял
Vladislav
4к как видео воспринял
проф деформация :))))))))
Arseniy
Это продовое, наш отдел КБ инженеров с САПРом)