Да

Потом zpool import Он поищет пулы и перечислет все которые найдёт zpool import poolname

Возможно он выругается на то, что пул не был экспортирован. Тогда повторить с ключем -f

При импорте он покажет состояние найденных устройств (online, unavail,...) обратите внимание.

кто какие экспортёры использует для zfs+prometheus?

всё что есть - либо скудное (в родном prometheus exporter) либо совсем древнее (последний раз обновлялось где-то 5, где-то 2 года назад). Я понимаю что за 2 года новых метрик не появилось, но как-то удручает что проекты "заброшены"

В омниос дописывал нодэкспортер, и частично на баше в текстфайле сделал.

Кстат и мдб использовал

Даже вытягивал по зволам статистику использования :)

получается что все изобретают (или допиливают) свой велосипед

Ну видимо да. Пуллреквестить мой код пока что стыдно.

Там даже пришлось вендоры править чтоб собралось хотябы

ладно, поищу ещё... найду - поделюсь найденным)

Но у меня не линукс

Может на линукс перееду через какое-то время.

Там даже допиливать проще, чем в солярисах и производных

Может кто-нибудь к утру свои мысли тоже набросает...

Перед этим наверное все наговняканное выложу куда нибудь 😁😁😁

Может кто-нибудь к утру свои мысли тоже набросает...

https://github.com/openzfs/zfs/pull/10786 мб чем полезно будет

Ничоси 😁

ладно, поищу ещё... найду - поделюсь найденным)

В telegraf что-то есть по этому поводу, но я не проверял. # # Read metrics of ZFS from arcstats, zfetchstats, vdev_cache_stats, and pools # [[inputs.zfs]] # ## ZFS kstat path. Ignored on FreeBSD # ## If not specified, then default is: # # kstatPath = "/proc/spl/kstat/zfs" # # ## By default, telegraf gather all zfs stats # ## If not specified, then default is: # # kstatMetrics = ["arcstats", "zfetchstats", "vdev_cache_stats"] # ## For Linux, the default is: # # kstatMetrics = ["abdstats", "arcstats", "dnodestats", "dbufcachestats", # # "dmu_tx", "fm", "vdev_mirror_stats", "zfetchstats", "zil"] # ## By default, don't gather zpool stats # # poolMetrics = false

а неплохо там метрик. телеграф перестал спустя время жрать цпу под 100 и течь? я от него из за этого года три назад отказался

а неплохо там метрик. телеграф перестал спустя время жрать цпу под 100 и течь? я от него из за этого года три назад отказался

Да вот я его ради тестов гоняю на слабом ноуте, вроде такого не наблюдаю. У меня всякие телеграмы с браузерами на порядки больше ресурсов выжирают.

у меня на проде висел, собирал кучу всего. после того, как пару раз начал жрать цпу по всем ядрам - отказался. где-то дописал экспортер какой-то, где-то с нуля сделал

Ага! Модераторы проснулись! 😊 Я даже не успел!

у меня на проде висел, собирал кучу всего. после того, как пару раз начал жрать цпу по всем ядрам - отказался. где-то дописал экспортер какой-то, где-то с нуля сделал

Ну он развивается потихоньку. Старые баги убирают, новые добавляют...

Доброго дня. Я сделал RAIDZ1 и ожидал прироста хотя бы в линейной скорости чтения. Но получил вот что. Скорость даже ниже чем скорость чтения одного накопителя.

Я что-то не так понимаю? Я рассчитывал что RAIDZ1 это аналог RAID5 который в случае когда у меня 3 диска должен удвоить скорость чтения. Ну удвоить конечно совсем в идеальном случае, но хотя бы увеличить её. А у меня выходит она стала ниже чем скорость одного накопителя

Более того, мне стало интересно сейчас и я замерил скорость у обычного mirror. Аналог RAID1, она ещё ниже). Ребята, что не так с ZFS?)

Доброго дня. Я сделал RAIDZ1 и ожидал прироста хотя бы в линейной скорости чтения. Но получил вот что. Скорость даже ниже чем скорость чтения одного накопителя.

DDшкой вы ничего не проверите нормально. Плюс на одном потоке весь пул не утилизировать обычно И raidz != raid5, он полностью синхронный, из этого же следует, что iops одного raidz = iops одного самого медленного диска в нём

почему это не аналог?

поведение у него аналогичное

только один диск может выпасть из массива без потери данных

только один диск может выпасть из массива без потери данных

это не означает, что они внутри одинаковые

и полезного места в случае трёх дисков будет как у двух дисков

это не означает, что они внутри одинаковые

они одинаковые же

на скрине я замерил скорость каждого

+ это идентичные диски, одна модель

почему это не аналог?

raid5 например подвержен raid write hole, потому что позволяет параллельный доступ к дискам, а raidz не подвержен, потому что НЕ позволяет параллельный доступ

тааак)

то есть выходит он не ускоряет работу?))

а только увеличиваетобъём места?

то есть выходит он не ускоряет работу?))

а должен был? Кто-т обещал? ))

видимо я не верно понял)

а только увеличиваетобъём места?

и добавляет устойчивость к выходу из строя одного накопителя

Если вам нужна скорость - наращивайте количество vdev

то есть выходит он не ускоряет работу?))

по умолчанию можете считать, что raidz не про скорость, а про объём

почему это не аналог?

а я предупреждал, что сравнение очень условное )

по умолчанию можете считать, что raidz не про скорость, а про объём

тепреь буду знать)

тепреь буду знать)

нужны иопсы - только миррор

да я если честно что-то начинаю возвращаться к мысли что програмный рейд + LVM отличный вариант)

тепреь буду знать)

ну и еще знайте, что тестировать через дд оно такое. лучше - fio

ну и еще знайте, что тестировать через дд оно такое. лучше - fio

дд это линейная скорость

если тестировать линейную скорость чтения, то dd самое оно

fio совсем другое меряет

да я если честно что-то начинаю возвращаться к мысли что програмный рейд + LVM отличный вариант)

ну ну) если пул с одним vdev, и вы меряете перформанс DDшкой, то всей картины вы не увидите. И да, никто не обещает, что фишки zfs бесплатны, они отъедают перформанс где-то, а на объёме дают обратно

fio совсем другое меряет

интересно, что же

fio совсем другое меряет

Чего?))) что fio скажете мерять, то он и будет мерять

Чего?))) что fio скажете мерять, то он и будет мерять

я про то что это совсем иной инструмент который нельзя сравнивать с дд

никак

кстати если не вырубать кеш, скорость показывает очень приятную

я про то что это совсем иной инструмент который нельзя сравнивать с дд

ага, потому что один про нормальные замеры, а DD не про это)

вообще про raidz vs raid6 тут классно и с толком написано https://arstechnica.com/gadgets/2020/05/zfs-versus-raid-eight-ironwolf-disks-two-filesystems-one-winner/

я про то что это совсем иной инструмент который нельзя сравнивать с дд

вот именно. дд это утилита блочного копирования а фио - измерительный инструмент, которым можно моделировать и измерять поведение дисковой под различной нагрузкой

вот именно. дд это утилита блочного копирования а фио - измерительный инструмент, которым можно моделировать и измерять поведение дисковой под различной нагрузкой

когда я хочу померять линейную скорость мне отлично подходит dd)

у вас есть реальная задача под этот массив однопоточный линейный ввод/вывод с размером блока 1М?

и да я понимаю что в реальных нагрузках это может вообще никак не быть показателем.

у вас есть реальная задача под этот массив однопоточный линейный ввод/вывод с размером блока 1М?

я хотел посмотреть линейную скорость, не идёт никакой речи про реальные задачи

когда я хочу померять линейную скорость мне отлично подходит dd)

если что, под чисто однопоток большим блоком zfs надо тюнить, т.к. по умолчанию он заточен на обслуживание многих клиентов без возможности каждого из них задавить нагрузкой соседа

префетч надо тюнить соответственно

Я мигрировал виртуалку на этот пул и не обнаружил никакого прироста. Решил просто глянуть для начала как изменилась линейная скорость. и скажем так офигел.

Я мигрировал виртуалку на этот пул и не обнаружил никакого прироста. Решил просто глянуть для начала как изменилась линейная скорость. и скажем так офигел.

бгг, и вы работу виртуалки эмитируете ddшкой с 1мб блоком?)))

Я мигрировал виртуалку на этот пул и не обнаружил никакого прироста. Решил просто глянуть для начала как изменилась линейная скорость. и скажем так офигел.

а можно узнать с какими параметрами zvol создан?

бгг, и вы работу виртуалки эмитируете ddшкой с 1мб блоком?)))

да боже

меня тут услышат или нет

Я ХОТЕЛ ПОСМОТРЕТЬ ЛИНЕЙНЫЙ ПРИРОСТ

ЛИНЕЙНЫЙ

ПРИЁМ

а можно узнать с какими параметрами zvol создан? @Wladimi