Всем привет! Нужен совет
Решил все же не разводить самодеятельность - при наличии 8 дисков по 8 Tb остановиться на пуле raidz2 из 6 шт.
Оставшиеся 2 диска пойдут на замену 2*4Tb в стареньком synology 219j - который останется для холодного резервного бэкапа самых важных разделов с осинового хранилища.
Вопрос - стали бы вы зеркалировать диски холодного бэкапа при наличии основного пула raidz2?
Я пока склоняюсь к мысли, что зеркалирование холодного бэкапа будет уже избыточно - 16 Tb в этом случае гораздо лучше 8.
чем лучше raidz2 - draid из 5 дисков + spare?
Dmitriy
Dmitriy
в случае падения любого диска - draid выиграет по времени ребилда и скорости работы во время
Dmitriy
важно как ПО для архивации будет выполнять IO - если fsync - тогда нужно по любому zil с plp
Vladislav
DOK ꧁꧂
Для sharesmb надо иметь установленную самбу?
Fedor
чем лучше raidz2 - draid из 5 дисков + spare?
допустимо ли добавлять к raidz vdev на draid, с последующим отлючением raidz?
Dmitriy
допустимо ли добавлять к raidz vdev на draid, с последующим отлючением raidz?
в теории должно - на практики смысла вообще нет. после присоединения у вас данные будут записываться размазываясь по свободному месту всех top level vdev
т.е. будет наблюдаться перекос в производительности - скорость будет ограничена наименее быстрой группой дисков
Georgij
допустимо ли добавлять к raidz vdev на draid, с последующим отлючением raidz?
Raidz vdev отключить нельзя, удалять из пула можно только single и mirrored vdev. Сам пул должен при этом состоять только из нескольких single или mirrored vdev.
Fedor
Raidz vdev отключить нельзя, удалять из пула можно только single и mirrored vdev. Сам пул должен при этом состоять только из нескольких single или mirrored vdev.
28 Multiple vdev replacements
разве это не то?
Georgij
Можешь кинуть ссылку?
Fedor
ща посмотрю
это в zfs upgrade
Georgij
https://openzfs.github.io/openzfs-docs/man/8/zpool-remove.8.html#:~:text=Top%2Dlevel%20vdevs%20can%20only%20be%20removed%20if%20the%20primary%20pool%20storage%20does%20not%20contain%20a%20top%2Dlevel%20raidz%20vdev%2C%20all%20top%2Dlevel%20vdevs%20have%20the%20same%20sector%20size%2C%20and%20the%20keys%20for%20all%20encrypted%20datasets%20are%20loaded. Про удаление vdev
Fedor
я вроде пробовал удалять, но у меня второй vdev был пустой - я его добил и никакие восстановления не помогали
Владимир
недопустимо
Владимир
Подобное можно провернуть если у тебя в vdev находится mirror
Владимир
Ну и это одна из причин почему я не использую raidz
Владимир
Отсутствие возможность потом ракирнуть вдевы бесит
Fedor
тогда ок
спасибо
Eugen
Вечер добрый. Если синхронить данные с помощью send recv между удаленными машинами с разными версиями zfs, чем чревато?
Владимир
Вечер добрый. Если синхронить данные с помощью send recv между удаленными машинами с разными версиями zfs, чем чревато?
Тем что может быть что-тоне совместимое
Владимир
между разными это между какими?
Eugen
С более старой
Владимир
скорее всего пофиг, разницы серьёзной между версиями не должно быть
Юрий
более новая версия zfs старый датасет будет поддерживать
Владимир
минорная версия)
Владимир
если бы разница была в мажорной версии было бы веселее)
Юрий
после переноса можно посмотреть разницу. какие флаги еще не включены в датасете. # zpool upgrade
Роман
Роман
Ivan
к разговору о надобности hba )
Роман
HBA там полноценный))
Роман
НЕпомог)
Роман
scrab как вы поняли не помогает)
Роман
НАзывается кто?
Fedor
модель hba
Роман
Контроллера?
Fedor
к разговору о надобности hba )
на самом деле, не хба, а дублирование данных. он бы прочитал с нормального куска данных, а кривые бы перезаписал на нормальные.
данные хакорраптились до записи на диск. память не ецц?
Ivan
на самом деле, не хба, а дублирование данных. он бы прочитал с нормального куска данных, а кривые бы перезаписал на нормальные.
данные хакорраптились до записи на диск. память не ецц?
не все hba на самом деле hba. данные могут кэшироваться в контроллере и там побиться, а тру hba их не кэширует.
Artem
Ну справедливости ради, тру hba тоже должен какой-то буфер иметь. И сомневаюсь, что там ecc
Fedor
central
Fedor
Ну справедливости ради, тру hba тоже должен какой-то буфер иметь. И сомневаюсь, что там ecc
там не должно быть буфера
Fedor
вернее, кеша
Fedor
никаких writeback
Δαρθ
в кеше есть какой-никакой ассоциативный поиск и всякие алгоритмы замены старых элементов
central
без буфера запись тупо не будет возможна
Fedor
Да чем он от кэша, кроме размера отличается?
кеш говорит, что данные записаны до того, как они фактически записаны, а с зфс так нельзя
Artem
кеш говорит, что данные записаны до того, как они фактически записаны, а с зфс так нельзя
Батарейка/флэшка? Raid контроллеры давно обучены данные не проёбывать при пропаданит питания
central
чому ? буфер есть в диске.
но контролер не может тупо кидать данные по мере получения там же есть тайминги в шине
Δαρθ
кеш говорит, что данные записаны до того, как они фактически записаны, а с зфс так нельзя
ну не факт. кеш может для последующего чтения схоронить записываемый блок, а сказать что записан тоже по факту
Δαρθ
ну или если кеш с батарейкой то он может и так делать, да. не вижу тогда в этом плохого
Георгий
Коллеги, я же правильно понимаю что если arc скушал 100 гигов оперативки, и осталось немного, а надо перенести на ноду несколько виртуалок - arc вернет оперативку и на ноду не придет oom?
Георгий
Если не трудно тыкните в ман носом, а то как ограничить везде написано, а вот об этом не видел инфы
Δαρθ
Коллеги, я же правильно понимаю что если arc скушал 100 гигов оперативки, и осталось немного, а надо перенести на ноду несколько виртуалок - arc вернет оперативку и на ноду не придет oom?
echo 3 | sudo tee /proc/sys/vm/drop_caches мож чото вернет сразу
Ivan
Коллеги, я же правильно понимаю что если arc скушал 100 гигов оперативки, и осталось немного, а надо перенести на ноду несколько виртуалок - arc вернет оперативку и на ноду не придет oom?
у меня без всяких тюнингов это работает. но у некоторых возникают проблемы, можно дропнуть кэш на всякий случай.
Sergey
Георгий
то есть на проде лучше не эксперементировать ) ясно понятно
Владимир
Владимир
если не настраивал ничего, то я думаю хрен он её вернёт
Владимир
будет ООМ
Владимир
дефолтные настройки pve7.2
я в проксмокс чате скидывал что я для предотвращения таких проблем делаю
Георгий
а что за clear_cache, какая то системная утилитка чтоль?
Владимир
то есть это проверка чтобы не было повторного запуска
Владимир
Я конечно сглупил, надо было иначе сделать, через переменную брать текущее имя скрипта)
Владимир
для универсальности)