Откройте гугл, прочтите что такое профильные чаты и троллинг, а ещё немного о пустословие. Вы уже надоели своими бестолковыми комментариями, когда другие могли бы что-то полезное подсказать, если не терялись бы в куче пустых сообщений

ладно. конкретно по zfs есть вопросы ?

ладно. конкретно по zfs есть вопросы ?

Чем лучше отдавать датасет по сети?

Чем лучше отдавать датасет по сети?

ответ выше есть )

ответ выше есть )

Там вообще предложили все известные термины, в том числе iscsi, который к вопросу не относится

Там вообще предложили все известные термины, в том числе iscsi, который к вопросу не относится

всмысле не относится ???

всмысле не относится ???

Он прям каталог может отдать? Я почему-то считал, что только блочное устройство

Самый лёгкий путь, создать ещё один zvol и подключить к ВМ. Но всегда же может быть другой метод, возможно более интересный. К тому же вчера увеличил том в винде, в итоге 1Ска послала и потребовала лицензию. Вот и ищу что-то по типу NFS. Решил поинтересоваться, может есть и другие хорошие решения

Человек говорит про zvol Также человек - iscsi к вопросу не относится

Человек говорит про zvol Также человек - iscsi к вопросу не относится

Троллинг, почитайте

Всем привет! Подскажите, товарищи, кто-то в виртуальную машину с win server 2019 пробрасывал датасет? Как это лучше сделать?

Вот вопрос

Вот вопрос

iscsi подходит

если нет, то надо лучше объяснить свои хотелки

iscsi подходит

Хорошие, спасибо, глубже копну в этом направлении

Хорошие, спасибо, глубже копну в этом направлении

Smb и nfs тоже подходят))))

А ещё использование драйвера lxd подходит

А ещё использование драйвера lxd подходит

Я уже вышла написал, почему не хочу использовать zvol

Я уже вышла написал, почему не хочу использовать zvol

Как же здорово, когда ты не понимаешь принцип работы технологии, всё вокруг кажется магией Кстати для 1С iscsi не подойдёт, но это уже нюансы которые не касаются вопроса

(А это просто мысли вслух)

Коллеги, доброй ночи. Столкнулся с непонятной вещью. Есть пул zol 2.0.7 на centos 7. Включаю ACL в режиме posix. ДЕлаю снапшот. Вношу какие-нибудь изменения в ACL файла или диры на датасете, который снапшотил. После чего делаю rollback на снапшот - но сделанные изменения в ACL сохраняются! Т.е snapshot не сохраняет ACL (posix) ? При этом роллбек отрабатывает - это видно по изменению в ФС. Как такое возможно? %|

в книжках и доках крайне скудно этот вопрос освещен

в книжках и доках крайне скудно этот вопрос освещен

https://serverfault.com/questions/313937/zfs-acls-with-snapshots Правда? Не освещён говорите

https://serverfault.com/questions/313937/zfs-acls-with-snapshots Правда? Не освещён говорите

ну так там 12 лет назад по сути кто-то задал примерно похожий вопрос , а ему ответили что-то вроде: "да, есть такое" :) Это прекрасно, но интересны детали , причины, и учитывая, что в zol эту фичу запилили примерно в 2011 , т.е как раз порядка 12 лет назад - поактуальнее :)

6.6 -- LTS https://kernel.org/category/releases.html ждём релиза openzfs с поддержкой

ну так там 12 лет назад по сути кто-то задал примерно похожий вопрос , а ему ответили что-то вроде: "да, есть такое" :) Это прекрасно, но интересны детали , причины, и учитывая, что в zol эту фичу запилили примерно в 2011 , т.е как раз порядка 12 лет назад - поактуальнее :)

а оно как бы по человечьи не умеет posix acl

а оно как бы по человечьи не умеет posix acl

Мне хватит и по-линуксовски =) А что вы имеете в виду? Фича запилена openzfs/zfs/issues/170 , кстати, в 2013, так что ссылка выше на вопрос на серверфолте от 2011 года выглядит еще более нерелевантной =(

Из того, что я вижу - posix ACL нормально отрабатывают, даже из докера. Единственное , вот удивительное со снапшотами

Нужно посмотреть куда эти ацл кладутся. Если в фс, то странно. А если нет, то оно и понятно.

Т.е объективно всё-таки ожидаешь, что ACL ездят вместе со снапшотом. А оно нет. Получается, ACL хранится на уровне датасета... чисто логически.

Нужно посмотреть куда эти ацл кладутся. Если в фс, то странно. А если нет, то оно и понятно.

Absolutely. Об этом и мой вопрос. Тот факт, что они "прозрачны" к спапшоту - это я и сам уже ощутил, но остался вопрос- как же так? :)

Nfsv4 acl в расширенные атрибуты ложится нормально и снимки нормально содержат изменения...

Nfsv4 acl в расширенные атрибуты ложится нормально и снимки нормально содержат изменения...

Да, я поэтому и удивлен. ACL сохранилсь в EA, очевидно, должны быть частью фс.

Да, я поэтому и удивлен. ACL сохранилсь в EA, очевидно, должны быть частью фс.

Posix не уверен.

да блин. не дают мне внешние ссылки цеплаять

/software/emacs/manual/html_node/elisp/Extended-Attributes.html

на гну орг

Extended attributes are extensions to the normal attributes which are associated with all inodes in the system (i.e., the stat(2) data). They are often used to provide additional functionality to a filesystem—for example, additional security features such as Access Control Lists (ACLs) may be implemented using extended attributes.

из man7 тоже. Короче, там должны быть =(

кстати, на гитхабе там разработчик прямо пишет в openzfs/zfs/issues/170

"Posix ACLs are stored as an xattr and therefore will not overwrite any existing ZFS/NFSv4 ACLs which may be set. "

Absolutely. Об этом и мой вопрос. Тот факт, что они "прозрачны" к спапшоту - это я и сам уже ощутил, но остался вопрос- как же так? :)

А каким образом вы используете данные? Может монтируете в контейнер и ACL меняете внутри контейнера? А снапшот делаете снаружи?

А каким образом вы используете данные? Может монтируете в контейнер и ACL меняете внутри контейнера? А снапшот делаете снаружи?

Нет, тестирую уже без всяких докеров, всё максимально просто. сделал тестовый датасет, включил posix acl для него, выставил ACL, сделал снапшот, поменял ACL, сделал rollback -- смотррю getfacl -- изменения ACL не откатились

Нет, тестирую уже без всяких докеров, всё максимально просто. сделал тестовый датасет, включил posix acl для него, выставил ACL, сделал снапшот, поменял ACL, сделал rollback -- смотррю getfacl -- изменения ACL не откатились

Значит хранятся не на уровне файла, а отдельно

Все просто

Значит хранятся не на уровне файла, а отдельно

Да, похоже . Хочу докапаться до истины , где же =)

Как и где? Вот в чём вопрос

Ну и это, мягко скажем, неожиданное поведение

imho

кстати, на гитхабе там разработчик прямо пишет в openzfs/zfs/issues/170

^

мельком глянул, там не сохранение posix в расширенные ацл, там трансляция, так что обраная развертка не очень..

я еще видел каммент : "Posix ACLs are stored as an xattr and therefore will not overwrite any existing ZFS/NFSv4 ACLs which may be set. " Но проверяю, не влияет не то скопипастил, сорри: To obtain the best performance when setting posixacl users are strongly encouraged to set the xattr=sa property. This will result in the Posix ACL being stored more efficiently on disk.

[root@cvshamster2 ~]# zfs get all zpool/test |grep attr zpool/test xattr sa local [root@cvshamster2 ~]# setfacl -m g:777:rwx /test/test [root@cvshamster2 ~]# getfacl /test/test getfacl: Removing leading '/' from absolute path names # file: test/test # owner: root # group: root user::rwx group::r-x group:777:rwx mask::rwx other::r-x [root@cvshamster2 ~]# zfs snapshot zpool/test@s2 [root@cvshamster2 ~]# setfacl -m g:666:rwx /test/test [root@cvshamster2 ~]# getfacl /test/test getfacl: Removing leading '/' from absolute path names # file: test/test # owner: root # group: root user::rwx group::r-x group:666:rwx group:777:rwx mask::rwx other::r-x [root@cvshamster2 ~]# zfs rollback zpool/test@s2 [root@cvshamster2 ~]# getfacl /test/test getfacl: Removing leading '/' from absolute path names # file: test/test # owner: root # group: root user::rwx group::r-x group:666:rwx group:777:rwx mask::rwx other::r-x

"being stored more efficiently on disk." - сформулировано, конечно, расплывчато. Но интуитивно ждешь, что "на диск" - это внутри фс. А ACL вида NFSv4 , получается, тоже не снапшотятся?

"being stored more efficiently on disk." - сформулировано, конечно, расплывчато. Но интуитивно ждешь, что "на диск" - это внутри фс. А ACL вида NFSv4 , получается, тоже не снапшотятся?

А вот nfsv4 родное. Нормально в снэпах лежат.

Я шару самбой отдаю в бсд. Иногда ацл меняются. В теневые копии хожу, там другие права...так что всё гуд.

Да и клон до теневых копий со снэпа делал, права есть. Так что вполне работает.

Спасибо. БСДя не подводит, хотя видимо дело в NFSv4 типе. Тем интереснее. Чую, не баг ли это

Спасибо. БСДя не подводит, хотя видимо дело в NFSv4 типе. Тем интереснее. Чую, не баг ли это

Очень на то похоже

❓Вопрос по ashift Создал новый пул на SSD Intel DC S3510 480GB дефолтной командой без параметров zpool create db mirror ... Посмотрел, какой он поставил ashift - оказалось 0 😳. root@storg2:~# zpool get all db ... db ashift 0 default Что это означает? Какой размер блока будет использоваться? Нужно ли вручную поменять на 12?

❓Вопрос по ashift Создал новый пул на SSD Intel DC S3510 480GB дефолтной командой без параметров zpool create db mirror ... Посмотрел, какой он поставил ashift - оказалось 0 😳. root@storg2:~# zpool get all db ... db ashift 0 default Что это означает? Какой размер блока будет использоваться? Нужно ли вручную поменять на 12?

Вручную только пересоздать пул

❓Вопрос по ashift Создал новый пул на SSD Intel DC S3510 480GB дефолтной командой без параметров zpool create db mirror ... Посмотрел, какой он поставил ashift - оказалось 0 😳. root@storg2:~# zpool get all db ... db ashift 0 default Что это означает? Какой размер блока будет использоваться? Нужно ли вручную поменять на 12?

Нужно пересоздать с ашифт 12, чтобы наверняка был такой

в zbd можно глянуть что выбралось

Подскажите пожалуйста, чтобы я смог убедиться, что правильно понимаю эту часть теории. Я правильно, понимаю, что при создании датасетов не обязательно указывать квоту? И если в пуле несколько датасетов без квот, то они будут ограничены просто размером пула. Т.е. если полностью забить данными один датасет, то второй уже данные принять не сможет. Верно?

Все так

Все так

Спасибо

Подскажите пожалуйста, чтобы я смог убедиться, что правильно понимаю эту часть теории. Я правильно, понимаю, что при создании датасетов не обязательно указывать квоту? И если в пуле несколько датасетов без квот, то они будут ограничены просто размером пула. Т.е. если полностью забить данными один датасет, то второй уже данные принять не сможет. Верно?

... поэтому я люблю еще выставлять reservation :)

❓Вопрос по ashift Создал новый пул на SSD Intel DC S3510 480GB дефолтной командой без параметров zpool create db mirror ... Посмотрел, какой он поставил ashift - оказалось 0 😳. root@storg2:~# zpool get all db ... db ashift 0 default Что это означает? Какой размер блока будет использоваться? Нужно ли вручную поменять на 12?

Простр он автоматически выставил ашифт, командой zdb можно посмотреть, в целом если диски не экзотические это обычно 12

Простр он автоматически выставил ашифт, командой zdb можно посмотреть, в целом если диски не экзотические это обычно 12

Интересно было бы глянуть, что он по умолчанию поставил, но я переустановил уже с опцией -o ashift=12. Наверное, так надежнее 😉

Интересно было бы глянуть, что он по умолчанию поставил, но я переустановил уже с опцией -o ashift=12. Наверное, так надежнее 😉

Ну это понятно)

Интересно было бы глянуть, что он по умолчанию поставил, но я переустановил уже с опцией -o ashift=12. Наверное, так надежнее 😉

Если zbd говорит, что он 12, то пофиг. Но дефолтный 9, ибо диски репортят 512, если человек ничего не менял

❓Вопрос по ashift Создал новый пул на SSD Intel DC S3510 480GB дефолтной командой без параметров zpool create db mirror ... Посмотрел, какой он поставил ashift - оказалось 0 😳. root@storg2:~# zpool get all db ... db ashift 0 default Что это означает? Какой размер блока будет использоваться? Нужно ли вручную поменять на 12?

fdisk -l И smartctl -a /dev/sd* Покажет Вам что сообщил Ваш ссд

fdisk -l И smartctl -a /dev/sd* Покажет Вам что сообщил Ваш ссд

Говорят 512 bytes logical, 4096 bytes physical Имеет смысл пересоздать пул с дефолтным нулем (или установить на 9), или пусть останется 12, как я потом вручную сделал? Есть какие-то недостатки "завышенного" ashift?

Лучше сразу 12

Говорят 512 bytes logical, 4096 bytes physical Имеет смысл пересоздать пул с дефолтным нулем (или установить на 9), или пусть останется 12, как я потом вручную сделал? Есть какие-то недостатки "завышенного" ashift?

Тогда 9 сейчас у Вас

Там как раз 12, это винт косплеит под 9

Там как раз 12, это винт косплеит под 9

Он logical берет

Говорят 512 bytes logical, 4096 bytes physical Имеет смысл пересоздать пул с дефолтным нулем (или установить на 9), или пусть останется 12, как я потом вручную сделал? Есть какие-то недостатки "завышенного" ashift?

Недостатков нет

Но и преимуществ от такого не будет, пока Вы диски в 4к не переключите

Тогда 9 сейчас у Вас

Не, мне ведь 0 не понравился и я пересоздал пул с явным -o ashift=12 . Тогда так и оставлю