@ru_zfs - страница 444 - Telegram web archive

Vladislav

Открываешь мануал к своему дистрибутиву и читаешь про пакетный менеджер и установку программ.

Nikolay

Всем привет. Обновил свой livecd, теперь там zfs 2.1.4 https://git.s-morozov.net/sergey/archlive-zfs/releases/tag/2022.03.30

я же правильно понял что это для реанимации zfs можно использовать ?

Vladislav

я же правильно понял что это для реанимации zfs можно использовать ?

Да.

Sergey

я же правильно понял что это для реанимации zfs можно использовать ?

В том числе

riv

это своего рода изврат для бекапирования ФС на облако. я хочу потом измененные файлы vdev отправлять на облако. но если меняется так много при копировании копеечного файла, то это не варик.

Вот более "нормальный" изврат для облака, в духе zfs: делается snapshot, потом выгрудается на облако через zfs send. После копирований делается еще snapshot и выгружается разница через zfs send -i snap1 snap2 и результат кладеся на облако. Потом zfs send -i snap2 snap3 и тоже на облако. Если на облаке есть zfs (есть конторы оказывающие услугу приема и хранения снимков zfs) у вас появляется машина времени в облаке.

Vladislav

Вот более "нормальный" изврат для облака, в духе zfs: делается snapshot, потом выгрудается на облако через zfs send. После копирований делается еще snapshot и выгружается разница через zfs send -i snap1 snap2 и результат кладеся на облако. Потом zfs send -i snap2 snap3 и тоже на облако. Если на облаке есть zfs (есть конторы оказывающие услугу приема и хранения снимков zfs) у вас появляется машина времени в облаке.

Так работает sanoid

riv

lz4 пока выглядит самым красавчиком

Самый красавсик zstd

riv

Так работает sanoid

Или bash-скрапт на 30 строк. Или санойд действительно хорош?

riv

я же правильно понял что это для реанимации zfs можно использовать ?

Наконец-то! Давно искал ливсиди для этой цели.

Vladislav

Или bash-скрапт на 30 строк. Или санойд действительно хорош?

Хорош. Я пару скриптиков дописал, чтоб monit контролировал рассинхронизацию

Vladislav

Наконец-то! Давно искал ливсиди для этой цели.

Есть ещё mfsbsd

riv

Хорош. Я пару скриптиков дописал, чтоб monit контролировал рассинхронизацию

Мой баш скрипт, который мне стыдно показать, обладает некими зачатками робастости: - делает скюнимки локально и ставит на снимок один или несколтко холдов: по холду на каждый сервер резервного копирования куда должен быть отправлен снимок. Это защита от удаления бекапов. - другая часть скрипта запускается на сервере резервного копирования. Она получает список снимков, засасывает их на сервер, проверяет, что снимок принялся и снимает холд с источника - первая часть скрипта удаляет созданные ей снимки без холдов. Как у санойда и других скриптов с этим?

Vladislav

Защита есть

Nikolay

Или bash-скрапт на 30 строк. Или санойд действительно хорош?

я вот этим пользуюсь: https://github.com/psy0rz/zfs_autobackup

Vladislav

Я перед использованием саноида пересмотрел с 10к скриптов

Vladislav

Все они мне показались ногами написанные.

Maverick

Коллеги подскажите пожалуйста можно чем то мониторить производительность zfs. Есть ли какой-то аналог iostat для обычных дисков... Чтобы посмотреть на сколько процентов утилизация дисковой подсистемы идет

central

так iostat вам загрузку дисков и покажет, а сколько можно выжать из самой zfs это отдельный вопрос

Maverick

так iostat вам загрузку дисков и покажет, а сколько можно выжать из самой zfs это отдельный вопрос

Так он показывает что загрузки дисков нет... Вот хотел понять почему... Так медленно копируются данные при 10гб сети

central

а что сам zfs показывает по операциям?

Maverick

а что сам zfs показывает по операциям?

А как посмотреть... А то я все это дело по дефолту на openmediavault развернул и по zfs over iscsi... Просто это моя первая проба. И хотелось бы понять куда копать или что почитать

central

zpool get iostat

Maverick

А там можно как то ну чтобы динамика была

Vladislav

А как посмотреть... А то я все это дело по дефолту на openmediavault развернул и по zfs over iscsi... Просто это моя первая проба. И хотелось бы понять куда копать или что почитать

1) Включаете iperf с tcp 2) Делаете fio локально на zfs 3) подключаете zfs по iscsi к другой линуксовой машинке делаете fio там

Maverick

zpool get iostat

Просто iostat с get не работает

George

zpool iostat

Maverick

1) Включаете iperf с tcp 2) Делаете fio локально на zfs 3) подключаете zfs по iscsi к другой линуксовой машинке делаете fio там

Iperf проверил нормально 9 Гб показывает до fio ещё не дошел

Vladislav

Iperf проверил нормально 9 Гб показывает до fio ещё не дошел

9 гб с какими параметрами?

Maverick

1) Включаете iperf с tcp 2) Делаете fio локально на zfs 3) подключаете zfs по iscsi к другой линуксовой машинке делаете fio там

А если у меня в пуле только блочные устройства диски vm..

Maverick

9 гб с какими параметрами?

По дефолту

Vladislav

А если у меня в пуле только блочные устройства диски vm..

А как это связано если для проверки скорости записи мы используем Linux со всех сторон?

Maverick

А как это связано если для проверки скорости записи мы используем Linux со всех сторон?

Я имел ввиду fio на локальном zfs как сделать

Vladislav

По дефолту

"For TCP tests, the default value is 128KB." Выставить на размер блока, что испольется в Вашей системе (64кб для Вари к примеру)

Vladislav

Я имел ввиду fio на локальном zfs как сделать

Проверяете, что достаточно свободного места, монтируете zfs volume в корень системы, делаете fio. Но я бы лучше вычистил всё и проверил fio на пустом массиве

Maverick

Если zvol это блочное устройство а внутри виртуалка... Я

Maverick

"For TCP tests, the default value is 128KB." Выставить на размер блока, что испольется в Вашей системе (64кб для Вари к примеру)

У меня проксмок по умолчанию 4кб ставитт

Maverick

Проверяете, что достаточно свободного места, монтируете zfs volume в корень системы, делаете fio. Но я бы лучше вычистил всё и проверил fio на пустом массиве

А если fio сделать внутри виртуалки 😳

Vladislav

И что Вам это даст, если запись идёт из оперативки?

Maverick

И что Вам это даст, если запись идёт из оперативки?