Vladislav
https://github.com/openzfs/zfs/commit/a10e552b9992673626f7a2ffcc234337f23410c9
Vladislav
ну так это только лишь "currently")
Учитывая сколько ждали вливание этого патча
Айтуар
Vladislav
Vladislav
proxmox over iscsi
Vladislav
proxmox local zfs
Vladislav
Ну в целом всё
Айтуар
Ivan
любители делать qcow2 поверх zfs наконец-то смогут насмехаться над любителями бестпрактисов
Станислав
любители делать qcow2 поверх zfs наконец-то смогут насмехаться над любителями бестпрактисов
Понять бы, какие преимущества дает qcow2 over ZFS относительно raw over zvol. Мне кажется у qcow2 есть какие-то свои фишки, но давно не использую и уже не помню
Ivan
Понять бы, какие преимущества дает qcow2 over ZFS относительно raw over zvol. Мне кажется у qcow2 есть какие-то свои фишки, но давно не использую и уже не помню
можно делать снапшоты пока ты делаешь снапшоты. плюс есть тонкое размещение. и там свой кэш, отчего пошли всратые советы делать qcow поверх zfs.
Ivan
Не понял что тут имеется ввиду
тонкое размещение - это когда сказали что размер 200 гигов, а на диске занимает ровно сколько занято данными. про кэши: кристалдискмарк показывает крсоту для тех кто не вникал в правильный бенч дисков.
Станислав
А, так это независимые функции. Ясно
Станислав
Но нет direct io.
У qcow2 over ZFS ему тоже неоткуда взяться
Станислав
ну... можно откатываться на любой снапшот, а не только на последний
Для этого есть клоны, тоже можно на любую версию перейти
Fedor
Добавил антиспам бота, если будет реагировать не на то, что нужно, пишите, плз
Okhsunrog
Кто может подсказать, почему может быть такая ошибка? zfs mount hddpool/restore_home cannot mount 'hddpool/restore_home': Permission denied команда выполняется от рута, никаких AppArmour или SELinux нет, ZFS 2.2.6
Okhsunrog
zfs mount что показывает ?
тут его в списке нет: zfs mount zroot/ROOT/default / zroot/data/home /home zroot/data/root /root zroot/vm /vm zroot/var/lib/docker /var/lib/docker zroot/var/lib/libvirt /var/lib/libvirt zroot/tmp /home/okhsunrog/tmp_zfs hddpool/data /mnt/hdd hddpool /tmp/hddpool hddpool/backups /tmp/hddpool/backups
Okhsunrog
zfs list hddpool -r
❯ zfs list hddpool -r NAME USED AVAIL REFER MOUNTPOINT hddpool 242G 343G 208K /tmp/hddpool hddpool/backups 182G 343G 192K /tmp/hddpool/backups hddpool/backups/or 182G 343G 224K none hddpool/backups/or/zroot 182G 343G 192K none hddpool/backups/or/zroot/data 182G 343G 192K none hddpool/backups/or/zroot/data/home 181G 343G 107G none hddpool/backups/or/zroot/data/root 976M 343G 968M none hddpool/data 60.4G 343G 60.4G /mnt/hdd hddpool/restore_home 0B 343G 84.7G /tmp/hddpool/restore_home
Okhsunrog
mount | grep hddpool
нет там его. hddpool/backups/or/zroot/data/home не могу смонтировать вообще, почему-то Permission denied. он точно никуда не примонтирован
Ivan
lsattr /tmp/hddpool/restore_home
Okhsunrog
lsattr /tmp/hddpool/restore_home
ничего не выводит
Ivan
ничего не выводит
ls -la /tmp/hddpool/restore_home lsattr /tmp/hddpool/
Okhsunrog
нет, ставлю разные mountpoint, он ставит, но не монтирует. permission denied. не могу понять, что же он хочет. и перезагружаться пробовал
Okhsunrog
ls -la /tmp/hddpool/restore_home lsattr /tmp/hddpool/
❯ ls -la /tmp/hddpool/restore_home total 18 drwxr-xr-x 2 root root 2 Nov 5 16:25 . drwxr-xr-x 4 root root 4 Nov 5 16:25 .. root in or/zroot/data ❯ lsattr /tmp/hddpool/ ---------------------- /tmp/hddpool/restore_home ---------------------- /tmp/hddpool/backups
Станислав
вроде нет
У датасета в сообщении, на которое я сослался, как раз none
Okhsunrog
это я через zrepl делал бэкапы с zroot пула на пул hddpool теперь не могу добраться до бэкапов
Okhsunrog
У датасета в сообщении, на которое я сослался, как раз none
я уже установил: zfs list hddpool -r NAME USED AVAIL REFER MOUNTPOINT hddpool 242G 343G 208K /tmp/hddpool hddpool/backups 182G 343G 200K /tmp/hddpool/backups hddpool/backups/or 182G 343G 232K /tmp/hddpool/backups/or hddpool/backups/or/zroot 182G 343G 200K /tmp/hddpool/backups/or/zroot hddpool/backups/or/zroot/data 182G 343G 208K /tmp/hddpool/backups/or/zroot/data hddpool/backups/or/zroot/data/home 181G 343G 107G /tmp/hddpool/backups/or/zroot/data/home hddpool/backups/or/zroot/data/root 976M 343G 968M /tmp/hddpool/backups/or/zroot/data/root hddpool/data 60.4G 343G 60.4G /mnt/hdd hddpool/restore_home 0B 343G 84.7G /tmp/hddpool/restore_home zfs mount -a -l cannot mount 'hddpool/backups/or/zroot/data/home': Permission denied cannot mount 'hddpool/backups/or/zroot/data/root': Permission denied cannot mount 'hddpool/restore_home': Permission denied
Okhsunrog
hddpool/restore_home это клон снэпшота из hddpool/backups/or/zroot/data/home я пытаюсь добраться до hddpool/backups/or/zroot/data/home
Okhsunrog
шифрованный, ключи загружены все
Станислав
hddpool/restore_home это клон снэпшота из hddpool/backups/or/zroot/data/home я пытаюсь добраться до hddpool/backups/or/zroot/data/home
Так у этого датасета none в качестве точки монтирования. Но на клон не должно влиять
Okhsunrog
Так у этого датасета none в качестве точки монтирования. Но на клон не должно влиять
нет zfs get mountpoint hddpool/backups/or/zroot/data/home NAME PROPERTY VALUE SOURCE hddpool/backups/or/zroot/data/home mountpoint /tmp/hddpool/backups/or/zroot/data/home local
Ivan
zpool status что показывает ?
Okhsunrog
zpool status pool: hddpool state: ONLINE config: NAME STATE READ WRITE CKSUM hddpool ONLINE 0 0 0 ata-WDC_WD10EZEX-07WN4A0_WD-WCC6Y1EDPYLP-part4 ONLINE 0 0 0 errors: No known data errors pool: zroot state: ONLINE config: NAME STATE READ WRITE CKSUM zroot ONLINE 0 0 0 rootpart ONLINE 0 0 0 errors: No known data errors
Okhsunrog
и даже не показывает, почему именно не может смонтировать. хоть дал бы более подробное сообщение. ничего не понимаю, mountpoint стоит, canmount стоит, ключи загружены, ничего по этому пути не смонтировано, директория пустая. да и несколько разных путей пробовал. не могу смонтировать ни mountpoint hddpool/backups/or/zroot/data/home, ни его клон. а родительский датасет монтируется без проблем
Ivan
https://openzfs.github.io/openzfs-docs/Getting%20Started/Debian/Debian%20Bookworm%20Root%20on%20ZFS.html#rescuing-using-a-live-cd
Okhsunrog
спасибо, попробую
Андрей🧛
Всем привет, может подсказать два диска отображаються вот так 0 disk └─mpatha
Sergey
Коллеги, а существует ли в природе performance calculator для zfs?
Fedor
Перфоманс очень сильно зависит от типа нагрузки, настроек и нюансов используемого железа. Тут сложно что-то скалькулировать
Sergey
Если совсем конкретно - мне нужен максимум полосы для 24 NLSAS дисков
Fedor
надо смотреть наихудший сценарий по иопсам. максимум полосы - все данные только на чтение, которые не вылезают из арк - десятки гигабит в секунду
Fedor
а минимум - с одного диска 100-200 иопс (написано в спецификации) с учетом используемой топологии (тип подключения дисков в пул)
Fedor
иопсы в 4к передадут меньше данных, чем иопсы в мегабайт
Fedor
всего не учесть
Fedor
>>7200 RPM - up to 100 IOPS 10K - up to 140 IOPS 15K - up to 200 IOPS
Андрей🧛
сами настроили мультипас и забыли ?
Достался от других админов
Fedor
в самом худшем сценарии, при котором оптимизации зфс работать не будут, всего с дисков можно будет снять до 2400 иопс на рандомном чтении. если аналог райд 10 - до 1200 или ниже (накладные расходы). Но это маловероятно. С четырех дисков сас15к(по 200 иопс) я на тестах нагрузки r/w снимал 2.5к иопс. а наилучший я описал выше.
Sergey
Иопсы не очень интересно, понятно, что из этих дисков много не выжать. Там бэкап будет лежать, мне гораздо интереснее полоса при последовательной записи. Один диск выдает где-то 180МБ\с, а в zfs 12 mirror vdev почему-то 122
Fedor
а нужен ли в таком кейсе зфс?
Fedor
если преимущественно запись, и бекапы уже сформированы (срезами по датам рулит софт бекапов), то зфс тут будет больше тормозить
Sergey
а нужен ли в таком кейсе зфс?
А почему нет? Аппаратного рейда нет, только хба. Диски в кучу надо чем-то собрать
Fedor
лвм может быть легче
Sergey
raid в лвм ещё хуже производительность показывает
Fedor
линейно аналог жбод он собирать умеет точно, а раскидывать аналог слайсов по дискам вроде тоже должен уметь
Fedor
raid в лвм ещё хуже производительность показывает
может, вопрос в том, как пишет софт. если пишет кусками по 512 байтиков, то тут никакая фс не поможет
Fedor
запись бекапов это обычно жирные куски данных
Fedor
я с тормозами ядерного лвм сталкивался от 100к иопс в свое время. тут, кажется, немного не тот кейс