Fedor
Если ро- говорит ридонли фс
Vladislav
да
Fedor
А ошибка ио-это проблема отказа ввода-вывода
Vladislav
софт проблема
Fedor
Может тогда слой /etc/pve написан через жопу и вводит в заблуждение
Vladislav
все в мире неидеально
Vladislav
и мне расхлебывать пятничную аварию
George
Может тогда слой /etc/pve написан через жопу и вводит в заблуждение
Iirc по этому пути в проксе их самописная фс висит (или по другому, но точно там была), толи для синхронизации по кластеру делали
Николай Орлов
искал инфу так и не нашел однозначную, по поводу реального размера дискового пространства zpool list storage 10,9T 1,74T 9,17T 0% 15% zfs list - storage 1,93T 5,75T 1,17T df -h - storage 7,0T 1,2T 5,8T
Николай Орлов
кому верить?
Алексей
Просто надо понимать как функционировает зфс, простого пути чтобы понять и принять это, не существует
Николай Орлов
в последней стабильной версии еще не завезли нативное шифрование?
Николай Орлов
или нужно включить в опциях
Николай Орлов
?
Николай Орлов
zfs create -o encryption=on tank/data Encryption feature not enabled
Николай Орлов
Zpool update?
Alexandr
да
Николай Орлов
Спасибо
Николай Орлов
Появились фичи
George
искал инфу так и не нашел однозначную, по поводу реального размера дискового пространства zpool list storage 10,9T 1,74T 9,17T 0% 15% zfs list - storage 1,93T 5,75T 1,17T df -h - storage 7,0T 1,2T 5,8T
Zpool list для raidz показывает без учёта затрат на parity (считай сырой размер), zfs list с учётом среднего размера parity. Фактически данные могут занять как меньше места (например, со сжатием), так и больше (в случае raidz при мелком блоке parity может давать легко 100% оверхед)
Николай Орлов
Zpool list для raidz показывает без учёта затрат на parity (считай сырой размер), zfs list с учётом среднего размера parity. Фактически данные могут занять как меньше места (например, со сжатием), так и больше (в случае raidz при мелком блоке parity может давать легко 100% оверхед)
Да вот и не пойму 4 диска по 3тб это 12тб, минус один диск 9 тб в итоге доступно 7))
Николай Орлов
Наверное все таки тб и tib разные вещи
Николай Орлов
Ну да я так и понял
George
Плюс есть резервирование места
Николай Орлов
Просто получается на обычном 5 рейде вышло бы больше
George
https://openzfs.github.io/openzfs-docs/Performance%20and%20Tuning/ZFS%20on%20Linux%20Module%20Parameters.html#spa-slop-shift вот
George
3.2% по дефолту
Владимир
Просто получается на обычном 5 рейде вышло бы больше
если у тебя много текста и большой волблок и при этом включено сжатие ZFS, то нет
George
Просто получается на обычном 5 рейде вышло бы больше
Не факт, фс всё равно по дефолту тоже зарезервирует
George
В общем зависит он юзкейса
Ivan
Просто получается на обычном 5 рейде вышло бы больше
это еще не всё. сейчас тебя и скорость огорчит по сравнению с 5 рейдом)
Владимир
скорость буквально чуть лучше чем в мироре
George
это еще не всё. сейчас тебя и скорость огорчит по сравнению с 5 рейдом)
А потом когда то в 5 рейде огорчит write hole))
Владимир
))
Ivan
не без этого )
Владимир
Миррор по умолчанию быстрее вообще
ну я из практики говорю, у меня получилось быстрее на RAIDZ1
Владимир
но вот буквально чуть
Николай Орлов
Ну я за скоростью не гонюсь
Николай Орлов
Мои запросы полностью обеспечивает
Николай Орлов
Ждём 2.0 глядишь подтянут скорость
Владимир
Вы плохо читали то что вам скидывали
Николай Орлов
Ну да
Владимир
нужна скорость берите мирор
Николай Орлов
Читал нормально
Николай Орлов
Как раз то
Николай Орлов
Это у вас выводы не верные
Николай Орлов
))
Sergey
Ждём 2.0 глядишь подтянут скорость
Пока на каждой новой версии она деградирует, из старых майлстонов помнится в основном фичи и стабилизация были в приоритете, а скорость где-то потом)
Николай Орлов
Эх
nanomechanic
есть весьма старая инсталляция линукса с zfs 0.6.5, подскажите, можно через zfs send|zfs recv поменять volblocksize ?
George
Пока на каждой новой версии она деградирует, из старых майлстонов помнится в основном фичи и стабилизация были в приоритете, а скорость где-то потом)
Delphix пересел на линукс, регулярно сейчас фиксы про перформанс бывают кстати, недавно к примеру sync write в zvol прокачали
George
есть весьма старая инсталляция линукса с zfs 0.6.5, подскажите, можно через zfs send|zfs recv поменять volblocksize ?
Nope увы https://github.com/openzfs/zfs/issues/8704
Dd шкой в новый звол только или чем то похожим
nanomechanic
хмм, видимо пришла пора апгрейдить линукс. Дохловатый жесткий триггерит баг в Marvel SATA драйвере.
У какого из диструбитивов сейчас свежий ZFS в пакетах, без перекомпиляций ? Т.е. убунта/дебиан с DKMS не интересуют.
Александр🇷🇺
Банан этому аккаунту
nanomechanic
proxmox
смысла нет на файлопомойку ставить, я пожалуй, альпайном обойдусь. zfs и scst в edge-main репе
Alexandr
а можно поинтересоваться, почему не debian 10 ?
nanomechanic
DKMS, я хочу сразу все из бинарников
George
DKMS, я хочу сразу все из бинарников
в debian с dkms ни разу проблем не было (т.к. оно в репе дебиана и всё чудесно и быстро из бекпортов свежее ставится), а вот centos/fedora c kmod в момент перехода на новый релиз проблем людям доставляет (т.к. репа отдельная от rh)
Можно взять ядро proxmox, там iirc собранный тянется модуль
Nikolay
иначе со снапшотами и send recv огребёте
Доброго. Так и не понял что плохого с корневым датасетом в этой ситуации. Его вообще не стоит никогда использовать ? Объясните пожалуйста.
George
Доброго. Так и не понял что плохого с корневым датасетом в этой ситуации. Его вообще не стоит никогда использовать ? Объясните пожалуйста.
ну гранулярность управления датасетами пропадает, ни зашифровать отдельно, ни принять снапшот по recv не убив всё остальное в пуле
Nikolay
Допустим с сервера с бэкап-снапшотом я хочу восстановиться:
zfs send pool-backup/mysql@base | ssh root@prodserver zfs recv -F tank/mysql
Он ведь перезатрёт только tank/mysql ,как он убьёт всё остальное в tank ?
Где я не прав
George
George
рутовый датасет - это сам tank
Николай Орлов
Что я не так делаю? Было так пул в нем папка data , на неё линк в веб Nextcloud все норм и работает. Решил сделать по правильному создал датасет , примонтировал ее прямо в веб , а итоге nc пишет нету папки
Николай Орлов
Владимир
так он там присутствует?
Николай Орлов
Права дал
Николай Орлов
Да
Николай Орлов
В том то и затык
Николай Орлов
В смысле не права а пользователя веб