всё, я понял что я дурак))

и иопс может быть ббольше при более низком латенси только если число потоков увеличить

низкое в смысле меньше мс, а не в смысле хуже?)

нативный nfs у zfs какой версии?)

а разве нативный нфс не только у солярки?

хм. просто на солярке походу только он и остался

sharenfs

zfs get sharenfs rpool

так я и говорю, что в солярке только так

как не понял

нашел "Например, предположим, что настроена VMFS5, что означает размер блока (файла) 1 МБ, сопровождаемого субблоками 8 КБ. Теперь, когда системе необходимо сохранить файл размером 64 КБ, что намного меньше размера блока (файла) по умолчанию, она НЕ БУДЕТ сохранять файл, используя 8 субблоков по 8 КБ, нет, она просто сохранит файл в нормальный блок размером 1 МБ (файл). Только если размер файла на самом деле составляет 8 КБ или меньше, для его хранения будет использоваться субблок"

? можно задать размер блока при создании slog или l2arc? или я что то не так понял

так я и говорю, что в солярке только так

через /etc/exports нельзя пошарить?

Тоже пытался найти подбную инфу под kvm, везде все по разному пишут. толком пока не нашел влияние размера блоков vm,fs, zfs на IOPS

конечно можно

судя по тому, что удалось накопать slog/arc/l2arc сильно лучше помогают, чем все эти пляски с размерами блоков

я про солярку

конечно можно

А вот кажется и нет

ты про солярку конкретно?

я сравнивал на 10 Gbe на нетапах перформанс внутри гостевых ос на датасторе выданной по iscsi и по nfs - на nfs показатели по iops выше, а latency ниже или сравнимое..

на m2 samsung полет нормальный. год уже

Да, для записи. Тоже собираюсь. Та обычный SSD буду ставить.

логи убьют диск быстро,я так понял нужно серверные

Мускул с темп директорий на диске и кучей запросов с тем таблицами, огромными сортировка и и тп

я так понял спокойно тянет это всё?

Наоборот, быстро убивает если диск не серверный

а что по обёму для кэша и логов брать?

как просто протестировать производительность ZFS ? Аналог такой комманды: fio --rw=randread --size=5g --io_size=10g --blocksize=4k --fsync=1 --iodepth=1 --direct=1 --numjobs=32 --group_reporting --stonewall ... А то оно direct игнорирует и из кэша читает

как просто протестировать производительность ZFS ? Аналог такой комманды: fio --rw=randread --size=5g --io_size=10g --blocksize=4k --fsync=1 --iodepth=1 --direct=1 --numjobs=32 --group_reporting --stonewall ... А то оно direct игнорирует и из кэша читает

выключить кеш

только на мету оставить да нужно)

поигрался с /sys/module/zfs/parameters/zfs_arc_max , /sys/module/zfs/parameters/zfs_arc_min что-то не получилось размер уменьшить, arc_summary всё-равно показыват 64gb и скорость чтения ~ 2Gb/sec

кому интересно: сравнение 6xNVMe в разных конфигурациях (без ZFS)

выхлоп fio было бы интересней глянуть

выхлоп fio было бы интересней глянуть

кому интересно: сравнение 6xNVMe в разных конфигурациях (без ZFS)

поигрался с /sys/module/zfs/parameters/zfs_arc_max , /sys/module/zfs/parameters/zfs_arc_min что-то не получилось размер уменьшить, arc_summary всё-равно показыват 64gb и скорость чтения ~ 2Gb/sec

нельзя уменьшить arc, меньше чем current arc_meta + arc_dnode

кому интересно: сравнение 6xNVMe в разных конфигурациях (без ZFS)

весьма интересный тест. а можете рассказать подробнее? какие объемы и почему два графика на каждый тест? это как раз и связано с объемами или включен параметр sync?

block size менял - 4кб и 1мб

скриптик для fio: for j in randread randwrite read write;do for bs in 4k 1m;do fio \ --name ${name}_${j}_${bs} \ --directory $loc \ --eta-newline=5s --rw=${j} --size=5g --io_size=10g --blocksize=${bs} --ioengine=libaio \ --fsync=1 --iodepth=1 --direct=1 --numjobs=32 \ --runtime=${t} --group_reporting --stonewall \ --fallocate=native \ --output=${name}_${j}_${bs}.json \ --output-format=json+ done done

мм.. то есть верхний график - это 4Кб, а нижний - это 1Мб?

что-то мне подсказывает, что есть корреляция между заполненностью диска и его производительностью. NVME показывает высокую производительность на первых 50-100Гб.

сверху 1мб снизу 4кб

Это сильно зависит от нвме

подписал справа название параметра

и общая latency

NVME были полность пустые

заполни полностью и скин скрины тесту