подскажите как изменить ashift у готового пула

никак

скриптик для fio: for j in randread randwrite read write;do for bs in 4k 1m;do fio \ --name ${name}_${j}_${bs} \ --directory $loc \ --eta-newline=5s --rw=${j} --size=5g --io_size=10g --blocksize=${bs} --ioengine=libaio \ --fsync=1 --iodepth=1 --direct=1 --numjobs=32 \ --runtime=${t} --group_reporting --stonewall \ --fallocate=native \ --output=${name}_${j}_${bs}.json \ --output-format=json+ done done

а как полечить что образ VM весит 1тер а жрет 1.85 в zfs

Если что - на нвме скорость аллокации не существовавшего до этого блока обычно выше чем уже существующего, тесты без первого предзаполнения будут подвирать на запись

Вот это новость, спасибо

есть сервер на 120+ Tb могу iscsi зацепиться к proxmox сделать movedisk всех вм убить rpool и собрать заново

а как полечить что образ VM весит 1тер а жрет 1.85 в zfs

Raidz? На нем это нормально, либо пересбор пула с другим ashift, либо пересоздать zvol с бОльшим volblocksize, либо использовать mirrors вместо raidz. У каждого пути свои нюансы

я вот что подумал,можна зделать кэш на рам диске или безсмысленно? И следущие помимо кэша и логов есть еще доп диски для пула(truenas) что это за диски?

я вот что подумал,можна зделать кэш на рам диске или безсмысленно? И следущие помимо кэша и логов есть еще доп диски для пула(truenas) что это за диски?

Кеш для приложения?

я вот что подумал,можна зделать кэш на рам диске или безсмысленно? И следущие помимо кэша и логов есть еще доп диски для пула(truenas) что это за диски?

И какие ещё там у тебя диски? Может, просто, не все в пул добавлены были?

под metadata disk наверное это имеется ввиду https://forum.level1techs.com/t/zfs-metadata-special-device-z/159954

Да, но просто скипается и ни на что не влияет

я сравнивал на 10 Gbe на нетапах перформанс внутри гостевых ос на датасторе выданной по iscsi и по nfs - на nfs показатели по iops выше, а latency ниже или сравнимое..

и иопс может быть ббольше при более низком латенси только если число потоков увеличить

zfs get sharenfs rpool

Я этим не пользовался, но уверен почему-то, что в linux он производится средствами ядра, которые просто настраиваются утилитами zfs, как и с samba-шарами (тоже не пользовлся ни разу)

тут два варианта: или добавить еще два зеркала или заменить диски на более емкие

Обрати внимание, у него диски и так по 2ТБ, но зфс отданы разделы по 500 гб @ivandeg а как так получилось вообще?

делал?

Мне на одном из серверов нужно заменить диски на новые и большего объема. Я сделал тестовую лабу, создал пул на двух дисках, затем убрал один, поставил диск большего объёма, скопировал загрузчик, сделал attach нового диска большего объема. Провернул операцию со вторым диском меньшего объема. На этом этапе всё получилось, а вот расширить не могу.

А заменить нужно вот почему, дотянул...

для расширения - убедиться, что раздел увеличен, если да - можно вручную пнуть zpool online -e

Как убедиться? zpool online -e rpool ata-WDC_WD2003FYYS-02W0B1_WD-WCAY00426560-part3 - правильно пинаю?

Как убедиться? zpool online -e rpool ata-WDC_WD2003FYYS-02W0B1_WD-WCAY00426560-part3 - правильно пинаю?

Как убедиться? zpool online -e rpool ata-WDC_WD2003FYYS-02W0B1_WD-WCAY00426560-part3 - правильно пинаю?

Добрый день! Можете дать рекомендации по сбору пула ZFS raid-10 x4HDD, в proxmox для запуска виндовых виртуалок. Памяти с запасом. Еще обратил внимание что при удалении в виртуальной машине большого кол-ва файлов - удаление ~1тыс файлов происходит быстро, потом падает до 0, зависает на 3 сек. и снова ускоряется, получается такая "лесенка":

Добрый день! Можете дать рекомендации по сбору пула ZFS raid-10 x4HDD, в proxmox для запуска виндовых виртуалок. Памяти с запасом. Еще обратил внимание что при удалении в виртуальной машине большого кол-ва файлов - удаление ~1тыс файлов происходит быстро, потом падает до 0, зависает на 3 сек. и снова ускоряется, получается такая "лесенка":

по сбору пула - если диски не совсем древние - ставьте ashift=12, да и собсно все

Диски wd gold

объем какой? убедитесь кстати что они не smr

Но сначала проверь командой: zpool get expandsize rpool

Вот мне кажется корень проблемы, что ты указываешь конкретную партицию, то есть part3 А надо весь диск в команде указать

1TB CMR

да, у wd gold нормальные вроде. 1 Тб это старые сата?

512e или 512n?

512e или 512n?

512n давно уже в истории же? 4Kn можно найти, в серверном сегменте Да и в любом случае ашифт 12 нужен, все равно в реале 4к блоками все HDD ворочают

512n