Я использовал нейлоновые нитки и марлю пластиковую (Летний анти-москитный оконный экран) в 2 слоя

От котов и мелких кусочков шерсти полно, они на пыль похожи... Вобщем я устал уже чистистить железо)

Я использовал нейлоновые нитки и марлю пластиковую (Летний анти-москитный оконный экран) в 2 слоя

Так я поэтому и делал кожух из этого Но это уже слишком далеко от темы ZFS поэтому я не буду дальше

Ну дак размер радиатора имеет значение, плрщадь рассеивания у мелкой железки и у огромой как бы разная.

Вентилятор в соседний PCIE слот. Стоит порядка $10.

Вентилятор в соседний PCIE слот. Стоит порядка $10.

Отличная идея для пассивности)

Блин, спросил всего то про поведение контроллера, а мне уже советуют каких лучше свинок и рыбок завести, и как лучше ухаживать за попугайчиком...

Блин, спросил всего то про поведение контроллера, а мне уже советуют каких лучше свинок и рыбок завести, и как лучше ухаживать за попугайчиком...

Потому что ваша идея клоунская, никто не скажем Вам как поведёт этот контроллер с Алика за 5$ от ноунейм китайца

Потому что ваша идея клоунская, никто не скажем Вам как поведёт этот контроллер с Алика за 5$ от ноунейм китайца

Печалька, когда не получается в логику...

Или собрать полностью пассив, что я и делаю...

Диски надо продувать в любом случае.

Диски надо продувать в любом случае.

а что если это ssd samsung?))

Диски надо продувать в любом случае.

Как то без продувки живут до сих пор...

а что если это ssd samsung?))

С SATA/SAS2 контроллером - деньги на ветер :)

С SATA/SAS2 контроллером - деньги на ветер :)

И с x1 pcie )))

Как тебе такое Илон Маск? 😅

Pv размер криво скормили

Pv размер криво скормили

да и пес с ним )) небольшая погрешность. прикол не в 101% а в часах и минутах на передачу 3.5Тб и скорости. это она вначале передачи так тормозила и в конце затупила. ну мб немного ближе к середине. местами до кб снижалась... ужос! у четом того что там болтался диск хгст, он конечно шустрый но сумка писец какой громкий - задрал 30+ часов жужжать...

Коллеги, подскажите с чем может быть связано, что cksum постоянно растет ?

что за диски ?

походу дофига натрейдил раз в чате зфс сидишь)

что за диски ?

SAMSUNG MZVLB1TOHBLR-00000

SAMSUNG MZVLB1TOHBLR-00000

в dmesg есть чего ?

/report

Да это-же бот

в dmesg есть чего ?

Нет, тишина

Нет, тишина

Странно. А zfs -V что пишет ?

root@pve:/var/log# zfs -V zfs-2.1.9-pve1 zfs-kmod-2.1.9-pve1 root@pve:/var/log#

Знаю M.2 отваливаются при перегреве, и вообще странно себя ведут.Но при этом растут WRITE ошибки. И в dmesg видно.

А cksum что означает ?

Коллеги, подскажите с чем может быть связано, что cksum постоянно растет ?

проверить, а не пишет ли кто то на эти диски, кроме zfs. возможно ошибка конфигурации и в какую-то виртуалку raw диск отдали

Проверил, диск подключен к 1 виртуалке, при этом виртуалка работает с виду корректно.

Проверил, диск подключен к 1 виртуалке, при этом виртуалка работает с виду корректно.

а не получилось ли так, что один и тот же диск у вас в mirror и master и slave ? почему-то disk-id одинаковый

Disk-id разный, в конце b6d и b6e

Доброго дня! Планирую покупку пары серверов dl 360 gen 9 под proxmox. хранилище планируется в raidz. В датащите пишут про версии с u.2 дисками. Хочу получить максимально производительное хранилище на 3-4ТБ. Есть вообще смысл заморачиваться с дисками nvme, ssd-sas ?

Патч для nvme так емнип и не добрался до релиза

Видел в обсуждения выше. А есть разница в производительности между sas-ssd или sata-ssd ?

Видел в обсуждения выше. А есть разница в производительности между sas-ssd или sata-ssd ?

Sas ssd сильно дороже ))

А профит имеется?

А профит имеется?

Обычно они понадежнее Больше выносливость и iops Sas12 gb еще и быстрее 🤔 Вопрос ваших задач ?

Доброго дня! Планирую покупку пары серверов dl 360 gen 9 под proxmox. хранилище планируется в raidz. В датащите пишут про версии с u.2 дисками. Хочу получить максимально производительное хранилище на 3-4ТБ. Есть вообще смысл заморачиваться с дисками nvme, ssd-sas ?

если хочется перформанс, то это мирроры, а не raidz

если хочется перформанс, то это мирроры, а не raidz

Что вы вкладываете в слово «перфоманс» )))

Что вы вкладываете в слово «перфоманс» )))

Мирроры тоже разные бывают)))

Мирроры тоже разные бывают)))

Понятнее не стало :)

Понятнее не стало :)

raid 1 и raid 10 сильно будут разными по скорости записи к примеру

Что вы вкладываете в слово «перфоманс» )))

производительность

производительность

Iops,чтение , запись, отклик, мелкие блоки или последовательно

Iops,чтение , запись, отклик, мелкие блоки или последовательно

так ты мне скажи что в raidz будет быстрее?))

ничего))

вычислительные рейды у ZFS ещё тупее чем у mdadm и хардварного, и прям весомо как я понимаю

Обычно они понадежнее Больше выносливость и iops Sas12 gb еще и быстрее 🤔 Вопрос ваших задач ?

На эти ноды планируется перенести виртуальные машины с системами мониторинга. Достаточно большое количество транзакций но не очень большой объём хранимой информации. 3-4 тб.

вычислительные рейды у ZFS ещё тупее чем у mdadm и хардварного, и прям весомо как я понимаю

не тупее)) но медленнее, зато без write hole

не тупее)) но медленнее, зато без write hole

надо добавить на порядок медленнее))

а то звучит как-то не существенно))

а ещё просёр в функциональности и удобстве администрирования

потом страдать с этим)

Mdadm нет опыта готовить, zfs опыт более 10 лет.

надо добавить на порядок медленнее))

а вот нет, смотря что делать

https://arstechnica.com/gadgets/2020/05/zfs-versus-raid-eight-ironwolf-disks-two-filesystems-one-winner/

а вот нет, смотря что делать

да что не делать, на hdd сильная фрагментация приводит к проблемам производительности, а это мы сейчас только про zfs говорим, а теперь накинем ещё и что там raidz)

@neurox

Сори

Пару лет назад пробывал собирать pool аналог 10 raid на серверных ssd от kingston. Разницы в скорости с обычным raidz не нашёл

Пару лет назад пробывал собирать pool аналог 10 raid на серверных ssd от kingston. Разницы в скорости с обычным raidz не нашёл

не увидел разницы между 1+0 и raidz?

Что вы вкладываете в слово «перфоманс» )))

в общем это правильный вопрос, смотря что хотите мерять, то и получите, но страйп мирроров по умолчанию даст больше iops чем raidz. Но на поточке raidz может отыграться, если в одном vdev много дисков

Raidz vs stripe по двум mirror

Пару лет назад пробывал собирать pool аналог 10 raid на серверных ssd от kingston. Разницы в скорости с обычным raidz не нашёл

ну не знаю, у меня на ынтерпрайз hgst mixed load sas ssd была существенная разница между 10-м и рейдз2 в зеркале (рейд60), тестил и гонял под проксмоксом для виртуалок, может если залить туда вагон 4К видео и дергать потоком рейдз был бы и быстрее, но не как сторадж для виртуалок

ну не знаю, у меня на ынтерпрайз hgst mixed load sas ssd была существенная разница между 10-м и рейдз2 в зеркале (рейд60), тестил и гонял под проксмоксом для виртуалок, может если залить туда вагон 4К видео и дергать потоком рейдз был бы и быстрее, но не как сторадж для виртуалок

10 был быстрее?

10 был быстрее?

да, конечно

На скольки дисках?

но меня интересовала смешанная нагрузка запись чтение и ИОПСы, дисков было 8 или 12 шт точно уже не помню сколько в джейбод по даташиту входило ссд в соотношении к хдд столько и воткнули, но точно не меньше 8 и не больше 12

диски были от 800ГБ до 2ТБ, там разные джейбоды - 800 в hgst шной полке, а 2ТБ в супермикровской, но и там и там результат был одинаков - 10-й был быстрее рейдз

но скажу так, идеала я все равно не добился, уже не помню в каких условиях но zfs мне не выдавал желаемой производительности, потому что я проверял в сравнении с аппаратным рейдом и хардрейд на тех же дисках всегда был либо совсем немного лучше либо иногда сильно лучше, особенно если касалось raidz

лишь в паре тестов чтения zfs обошел хардрейд, но там как я понял большую роль сыграл ARC, я зфс отдал толи 64 толи 128 гиг памяти

10 же не переживает смерть двух любых дисков. А только из разных зеркал ((

10 же не переживает смерть двух любых дисков. А только из разных зеркал ((

любых переживет. а из одного vdev - нет

любых переживет. а из одного vdev - нет

Я так и сказал 🤦‍♂️зачем писать другим языком ?

Я так и сказал 🤦‍♂️зачем писать другим языком ?

>не переживает смерть двух любых дисков так, да не так

>не переживает смерть двух любых дисков так, да не так

Все так

>не переживает смерть двух любых дисков так, да не так

… два диска из одного зеркала не являются любыми дисками

рейд10 не переживет смерть любых двух дисков, только определенных из разных вдев. А один вдев не будет являться рейд10