А это позволит юзать процы с меньшим числом ядер)

опа опа... ты не путай фс и ядра. проц и в одно ядро тебе для фс тону потоков наплодит нараз

Кто-нибудь удалял из пула mirror вдев? Интересен процесс, то есть выходит когда удаляю вдев, то на нём же есть какие-то данные и они должны переписаться в другие вдевы, так вот как это происходит, команда подвисает на вермя пока данные переписываются или консоль отпускает и делает это в фоне и как смотреть прогресс операции в таком случае?

хоть я и не авторитет :))) но на солярке, удаление любого вдева происходи в фоне. и не тлько мирор

уж незнаю как там в солярке

проверяли недавно, в oracle solaris можно удалять любой vdev

хоть я и не авторитет :))) но на солярке, удаление любого вдева происходи в фоне. и не тлько мирор

zpool status

есть вроде фича реквест, но он давний и по нему активности сейчас нет

на сколько мне известно тут вообще не каждый вдев удалить можно zraid например хрен

а контролить именно когда закончится перемещение данных как?

я уже бросал скрины, где удаляю рейдз)

кстати, в озфс нативное шифрование завезли? и как на скорость оно влияет?

кстати, в озфс нативное шифрование завезли? и как на скорость оно влияет?

с 0.8 еще. с аес примерно никак не влияет. возможно на nvme заметно, но у меня их нет нормальных )

кстати, в озфс нативное шифрование завезли? и как на скорость оно влияет?

Завезли, я использую в proxmox. Скорость не измерял, т.к у меня нет выбора - мне оно нужно. Думаю у всех так - либо оно нужно обязательно, либо нет. Я могу выполнить твой тест, который ты предложишь, у меня есть сервера в резерве, на которых можно делать что угодно. 1) Для использования с PVE нужен патч. Нужно отредактировать файл, чтобы скрипт, которым PVE реплицирует поддерживал передачу и прием этого дела. - Нативную поддержку обещают в PVE 7 2) Есть кейс, который приведет к недоступности зашифрованных данных на приемнике. Я завел баг. Думаю этот сценарий можно избегать, пока они не починят.. https://github.com/openzfs/zfs/issues/12123

Завезли, я использую в proxmox. Скорость не измерял, т.к у меня нет выбора - мне оно нужно. Думаю у всех так - либо оно нужно обязательно, либо нет. Я могу выполнить твой тест, который ты предложишь, у меня есть сервера в резерве, на которых можно делать что угодно. 1) Для использования с PVE нужен патч. Нужно отредактировать файл, чтобы скрипт, которым PVE реплицирует поддерживал передачу и прием этого дела. - Нативную поддержку обещают в PVE 7 2) Есть кейс, который приведет к недоступности зашифрованных данных на приемнике. Я завел баг. Думаю этот сценарий можно избегать, пока они не починят.. https://github.com/openzfs/zfs/issues/12123

Завезли, я использую в proxmox. Скорость не измерял, т.к у меня нет выбора - мне оно нужно. Думаю у всех так - либо оно нужно обязательно, либо нет. Я могу выполнить твой тест, который ты предложишь, у меня есть сервера в резерве, на которых можно делать что угодно. 1) Для использования с PVE нужен патч. Нужно отредактировать файл, чтобы скрипт, которым PVE реплицирует поддерживал передачу и прием этого дела. - Нативную поддержку обещают в PVE 7 2) Есть кейс, который приведет к недоступности зашифрованных данных на приемнике. Я завел баг. Думаю этот сценарий можно избегать, пока они не починят.. https://github.com/openzfs/zfs/issues/12123

а внутри винды?

diskspd.exe -c5G -b4K -t2 -d100 -Su -a0,1 t1.dat t2.dat t3.dat t4.dat

1-Тест внутри VM root@AX101-Helsinki-01:~# zfs get encryption rpool/data/subvol-103-disk-0 NAME PROPERTY VALUE SOURCE rpool/data/subvol-103-disk-0 encryption aes-256-gcm - Дешифруем том root@AX101-Helsinki-01:~# zfs snapshot rpool/data/subvol-103-disk-0@decrypt root@AX101-Helsinki-01:~# zfs send rpool/data/subvol-103-disk-0@decrypt | zfs recv -o encryption=off rpool/data/subvol-103-disk-1 root@AX101-Helsinki-01:~# zfs rename rpool/data/subvol-103-disk-0 rpool/data/subvol-103-disk-0-old root@AX101-Helsinki-01:~# zfs rename rpool/data/subvol-103-disk-1 rpool/data/subvol-103-disk-0 2-тест внутри VM root@AX101-Helsinki-01:~# zfs get encryption rpool/data/subvol-103-disk-0 NAME PROPERTY VALUE SOURCE rpool/data/subvol-103-disk-0 encryption off default

По процессору на гипервизоре я не заметил особой разницы в нагрузке. Вероятно есть аппаратная поддержка

вот такие процы мне нравятся))

а какой там?

5950x

хм, значит таки zfs умеет в aes-ni инструкции?

Да

Там ждут подробности зфс vs ext4

Там ждут подробности зфс vs ext4

Ну зачем вы так подставляете человека))) понятно , что в его условяюиях, у него где то что то вышло быстрее)) но давно уже все тесты есть)) что на рандоме мелком блоке зфс - медленней

Лениво холиварить, а по делу тоже не хочется. У меня отпуск

Я пока ни разу не видел тестов где зфс хоть где-то быстрее.

Мирроры на zfs на рандомной async записи на хдд быстрее чем на mdadm😁

Тесты!!!)

Ну 4к сейчас мало кто пишет

и обязательно блоками 4к 😃

Та хоть каким-то. Вот ни разу не видел что бы зфс бац и порвала всех))

а я видел. когда гадил урандомом в образы, из которых собран raid6/z2. мдраид даже не заметил что ему нагажено и молча отдавал испорченное. btrfs о чем-то догадывался, иногда даже умел исправить (но очень иногда). а zfs материлось но ВСЁ прочитало верно а потом и исправило скрабом

Мы про скорость вообще то спорим

на заметку тем, кто в зфс бекапит и архивы хранит

Кстати, не понимал, зачем они сделали фишку с возможностью делать несколько копий? В проде, если что-то важное, то зеркало увеличить вероятность успеха что все прочитается в разы. Может кто-то знает кейс такого использованя.

Ну так когда у тебя не миррор, а данные хочется сохранить с большей вероятностью

Мы же про прод говорим. Врядли сановцы, когда писали свой зфс, думали о пупкине с полудохлым винтом. Я лично, никого не знаю, у кого есть важные данные и нет бекапа и рейда. Мало того, это ещё и тормозов добавляет. Ты знаешь хоть кого-то стоит копий больше 1?

я о том что сабж детектит и исправляет(!) всякие там bitrotы, а не просто о дохнущих винтах

Мы же про прод говорим, зачем, почти за также деньги, получить меньшую скорость и не получить меньшую надёжность? Можно ж зеркало. И оно решит интегрити

mdraid в смысле?

А вы про что вообще тогда спорите?) мы про копиес в зфс, пытаюсь найти причину его разработки