Огурцов не спрашивают...

@kote_matroskin покорректнее общайся, плз. Ро три дня.

Как до этого дошли вообще от темы про корректность использования бэкапов?

Я не знаю, я пытался объяснить что использование rm это очень частый случай в реальном мире, особенно там, где используется zfs

Тьфу, тьфу, тьфу, уже лет 7 их не видел у себя... Просто грамотно порезанные права и фильтрация)

Я как пользователь винды тихонько промолчу

!report

Я не знаю, я пытался объяснить что использование rm это очень частый случай в реальном мире, особенно там, где используется zfs

Коллеги есть рецепты поднять производительность 4к блока в рандом доступе?

Коллеги есть рецепты поднять производительность 4к блока в рандом доступе?

на 32 хотя бы переключить.

Переключить что?

/report

Какие есть способы мониторить статус zfs, аналогичных (зависающей, вот сволочь 😡) команде zpool status? Делал себе мониторинг состояния пулов на основе проверки статуса пула zpool status. Столкнулся с тем, что иногда команда просто зависает (часто вместе с ней - и другие команды, например, zfs list). Происходит такое, в частности, если на пуле из одиночного диска происходит ошибка i/o и он переходит в статус suspended. Наиболее типично, по отзывам в интернете - если сбойнёт внешний USB диск, но у меня и с внутренними иногда бывает. Думал, у меня что-то не так с настройками. Ведь если после сбоя диск восстановился - его вполне можно было бы вернуть в статус online средствами zfs (командами zpool)! Сегодня обнаружил, что (по крайней мере у Oracle) это считается совершенно стандартным поведением 😱: Commands such as zfs(1M) and zpool(1M) will hang even if the commands are not associated with the zpool that is suspended. A panic or reboot is the only way to clear the hang. (https://support.oracle.com/knowledge/Sun%20Microsystems/1457074_1.html) Не нашел явно, но подозреваю, что в openzfs это также не исправлено. В связи с этим вопрос: Каким способом хотя бы отследить, что пул suspended (чтобы идти перегружать сервер)?

А чего бы не взять готовый экспортер?

Для чего?

Насколько я понял - это нечто сбоку от zfs, что запрашивает у zfs какие-то параметры, анализирует, и посылает при необходимости. Но если базовые команды zfs подвиснут - то оно ничего не сможет получить и сообщить. Если кто-то реально этим пользуется - скажите, работает ли оно с зависшим zpool?

когда что-то такое странное происходит - следует убедиться что версия zfs не расходится с версией загруженного модуля.

root@S04:~# zpool upgrade This system supports ZFS pool feature flags. All pools are formatted using feature flags. Every feature flags pool has all supported and requested features enabled.

Какие есть способы мониторить статус zfs, аналогичных (зависающей, вот сволочь 😡) команде zpool status? Делал себе мониторинг состояния пулов на основе проверки статуса пула zpool status. Столкнулся с тем, что иногда команда просто зависает (часто вместе с ней - и другие команды, например, zfs list). Происходит такое, в частности, если на пуле из одиночного диска происходит ошибка i/o и он переходит в статус suspended. Наиболее типично, по отзывам в интернете - если сбойнёт внешний USB диск, но у меня и с внутренними иногда бывает. Думал, у меня что-то не так с настройками. Ведь если после сбоя диск восстановился - его вполне можно было бы вернуть в статус online средствами zfs (командами zpool)! Сегодня обнаружил, что (по крайней мере у Oracle) это считается совершенно стандартным поведением 😱: Commands such as zfs(1M) and zpool(1M) will hang even if the commands are not associated with the zpool that is suspended. A panic or reboot is the only way to clear the hang. (https://support.oracle.com/knowledge/Sun%20Microsystems/1457074_1.html) Не нашел явно, но подозреваю, что в openzfs это также не исправлено. В связи с этим вопрос: Каким способом хотя бы отследить, что пул suspended (чтобы идти перегружать сервер)?

zfs -V

root@S04:~# zfs -V zfs-2.2.3-1~bpo12+1 zfs-kmod-2.2.3-1~bpo12+1 PS Там пулы были с более древней версии перенесены, и я их апгрейдил - думал, про это вопрос.

Какие есть способы мониторить статус zfs, аналогичных (зависающей, вот сволочь 😡) команде zpool status? Делал себе мониторинг состояния пулов на основе проверки статуса пула zpool status. Столкнулся с тем, что иногда команда просто зависает (часто вместе с ней - и другие команды, например, zfs list). Происходит такое, в частности, если на пуле из одиночного диска происходит ошибка i/o и он переходит в статус suspended. Наиболее типично, по отзывам в интернете - если сбойнёт внешний USB диск, но у меня и с внутренними иногда бывает. Думал, у меня что-то не так с настройками. Ведь если после сбоя диск восстановился - его вполне можно было бы вернуть в статус online средствами zfs (командами zpool)! Сегодня обнаружил, что (по крайней мере у Oracle) это считается совершенно стандартным поведением 😱: Commands such as zfs(1M) and zpool(1M) will hang even if the commands are not associated with the zpool that is suspended. A panic or reboot is the only way to clear the hang. (https://support.oracle.com/knowledge/Sun%20Microsystems/1457074_1.html) Не нашел явно, но подозреваю, что в openzfs это также не исправлено. В связи с этим вопрос: Каким способом хотя бы отследить, что пул suspended (чтобы идти перегружать сервер)?

Сжатие и дедупликацию включать не хочу, т.к. во первых там всего 16 Gb RAM, а во вторых слабый CPU для этого, т.к. материнка с очень энергоэффективным процем для пассивного охлаждения.

1mb. без сжатия у всего что меньше 1мб будет все равно ужираться 1мб. так что лучше сжатие оставить хотя бы lz4

Там в основном и так уже сжато или h265 или LZMA...

эмм, а что я написал ты прочел?

Ну ок. Делай 128к потом качай торренты и получай расфрагрментированное всё в хлам. или теряй на каждом файле +500к на полный блок без сжатия

Так сжатие можно врубить только на файлуху с килобайтоой мелочью, или я путаю? Для гигабайтных видео понятно, что смысла в сжатии не особо

у меня есть некототые видео которые жмутся на 10%, например. вся помойка с мр3 у меня тоже жмётся примерно так же

Мп3 - это килобайтная мелочь. А с видео - всегда есть исключения из правил.

Так сжатие можно врубить только на файлуху с килобайтоой мелочью, или я путаю? Для гигабайтных видео понятно, что смысла в сжатии не особо

у меня есть некототые видео которые жмутся на 10%, например. вся помойка с мр3 у меня тоже жмётся примерно так же

На электричестве не больше экономия выходит?) Когда сжатие и распаковка постоянно.

Меня немного смущает выбор дисков для задачи и память потенциально без коррекции ошибок.

Что не так с дисками? ECC в хоум железе нет к сожалению, а серверное пассивное не делается.

Если диски SMR, может стрелять по производительности.

На электричестве не больше экономия выходит?) Когда сжатие и распаковка постоянно.

постоянно 24/7 крутить диски и париться о 0.1% на распаковку

Не 24/7, это помойка же, только скинуть и считать с неё.

и как часто вы ее будете включать?

Слить бекапы, слить фильмы, может чё то посмотреть с неё.

есть всего два типа людей которые проверяют уже проверяют бекапы и которые нет

Они проверяются при сливе, а дальше это уже забота ZFS.

Они проверяются при сливе, а дальше это уже забота ZFS.

уверен на соточку что нет

в том сценарии как вы хотите делать это ваша забота а не zfs

Коллеги, словил глюк на новом сервере с новыми дисками на свежеустановленном проксмоксе: root@pve-0:~# zpool status pool: rpool state: DEGRADED status: One or more devices could not be used because the label is missing or invalid. Sufficient replicas exist for the pool to continue functioning in a degraded state. action: Replace the device using 'zpool replace'. see: https://openzfs.github.io/openzfs-docs/msg/ZFS-8000-4J scan: scrub repaired 0B in 01:05:25 with 0 errors on Sun Apr 14 01:29:26 2024 config: NAME STATE READ WRITE CKSUM base DEGRADED 0 0 0 raidz2-0 DEGRADED 0 0 0 sda ONLINE 0 0 0 sdb ONLINE 0 0 0 sdc ONLINE 0 0 0 sdd ONLINE 0 0 0 sde ONLINE 0 0 0 sdf ONLINE 0 0 0 sdg ONLINE 0 0 0 sdh ONLINE 0 0 0 sdi ONLINE 0 0 0 sdj ONLINE 0 0 0 18306792666249521913 OFFLINE 0 0 0 was /dev/sdk1 9719412968676584709 FAULTED 0 0 0 was /dev/sdl1 errors: No known data errors Ни смарт не выдаёт ошибок, ни megacli не ропщет. Возможно ли эти два дивайса вернуть в пул, не перезагружаясь и не перетыкая их?

Там и те и те есть, и вообще это палёный китай с озона)

а диски вообще живые и разьемы куда они воткнуты?

Коллеги, словил глюк на новом сервере с новыми дисками на свежеустановленном проксмоксе: root@pve-0:~# zpool status pool: rpool state: DEGRADED status: One or more devices could not be used because the label is missing or invalid. Sufficient replicas exist for the pool to continue functioning in a degraded state. action: Replace the device using 'zpool replace'. see: https://openzfs.github.io/openzfs-docs/msg/ZFS-8000-4J scan: scrub repaired 0B in 01:05:25 with 0 errors on Sun Apr 14 01:29:26 2024 config: NAME STATE READ WRITE CKSUM base DEGRADED 0 0 0 raidz2-0 DEGRADED 0 0 0 sda ONLINE 0 0 0 sdb ONLINE 0 0 0 sdc ONLINE 0 0 0 sdd ONLINE 0 0 0 sde ONLINE 0 0 0 sdf ONLINE 0 0 0 sdg ONLINE 0 0 0 sdh ONLINE 0 0 0 sdi ONLINE 0 0 0 sdj ONLINE 0 0 0 18306792666249521913 OFFLINE 0 0 0 was /dev/sdk1 9719412968676584709 FAULTED 0 0 0 was /dev/sdl1 errors: No known data errors Ни смарт не выдаёт ошибок, ни megacli не ропщет. Возможно ли эти два дивайса вернуть в пул, не перезагружаясь и не перетыкая их?