Это точно квапс?

ну как бы выключил, но облегчения от этого не будет 😃

при отключении дедупа они не раздедупятся =)

жор памяти и тормоза не исчезнут

Всем доброго времени суток. Уважаемые, хм, участники сей беседы, а подскажите, пожалуйста, что делать в ситуации, когда при установки ubuntu я сделал файловую систему zfs, а сейчас ноут пришлось поменять, а файловая система на диске так zfs и осталась и ни винда ни macos по умолчанию этот диск не видят. Если есть что-то типо шагов или инструкции, с радостью прочитаю, просто 2 тб лежат мёртвым грузом.

Я озвучу самый простой вариант, а дальше коллеги, если захотят - способы с подвывертом. Но вам придётся уточнить, чем вам не подошел простой вариант. Ииии.... самым простым вариантом будет загрузиться с live образа с поддержкой zfs(поищите по сообщениям, тут публиковался. или возьмите ту же убунту), импортировать туда ваш пул, снять информацию, отформатировать диск в формат, который нативно понимают ваши ОС,

Всем доброго времени суток. Уважаемые, хм, участники сей беседы, а подскажите, пожалуйста, что делать в ситуации, когда при установки ubuntu я сделал файловую систему zfs, а сейчас ноут пришлось поменять, а файловая система на диске так zfs и осталась и ни винда ни macos по умолчанию этот диск не видят. Если есть что-то типо шагов или инструкции, с радостью прочитаю, просто 2 тб лежат мёртвым грузом.

Хорошо. Существует ли необходимость использования zfs в описанной вами ситуации и в чем она заключается?

А зачем Вы сделали zfs на Ubuntu, если не знаете что это? Она даже как экспериментальная помечена в установщике если не ошибаюсь И с каких пор винда понимает хоть что-то из файловых систем linux, кроме FAT? И да, если Вам нужны эти данные - копируйте их в нужную файловую систему

А зачем Вы сделали zfs на Ubuntu, если не знаете что это? Она даже как экспериментальная помечена в установщике если не ошибаюсь И с каких пор винда понимает хоть что-то из файловых систем linux, кроме FAT? И да, если Вам нужны эти данные - копируйте их в нужную файловую систему

Хорошо. Существует ли необходимость использования zfs в описанной вами ситуации и в чем она заключается?

Просто в большинсве тестов показывают скорость, а что там с CPU нет. Какой смысл сатвить тот же proxmox, если zfs съест половину, а то и больше CPU.

Что-то мне кажется, что это сжатие съедает проц) Какое стоит?

lz4, пробовал и без него , сейчас не доступна машина, чуть позже отпишу. ashift13 ставил

Всем доброго времени суток. Уважаемые, хм, участники сей беседы, а подскажите, пожалуйста, что делать в ситуации, когда при установки ubuntu я сделал файловую систему zfs, а сейчас ноут пришлось поменять, а файловая система на диске так zfs и осталась и ни винда ни macos по умолчанию этот диск не видят. Если есть что-то типо шагов или инструкции, с радостью прочитаю, просто 2 тб лежат мёртвым грузом.

А зачем Вы сделали zfs на Ubuntu, если не знаете что это? Она даже как экспериментальная помечена в установщике если не ошибаюсь И с каких пор винда понимает хоть что-то из файловых систем linux, кроме FAT? И да, если Вам нужны эти данные - копируйте их в нужную файловую систему

ну как бы выключил, но облегчения от этого не будет 😃

Всем доброго времени суток. Уважаемые, хм, участники сей беседы, а подскажите, пожалуйста, что делать в ситуации, когда при установки ubuntu я сделал файловую систему zfs, а сейчас ноут пришлось поменять, а файловая система на диске так zfs и осталась и ни винда ни macos по умолчанию этот диск не видят. Если есть что-то типо шагов или инструкции, с радостью прочитаю, просто 2 тб лежат мёртвым грузом.

А зачем Вы сделали zfs на Ubuntu, если не знаете что это? Она даже как экспериментальная помечена в установщике если не ошибаюсь И с каких пор винда понимает хоть что-то из файловых систем linux, кроме FAT? И да, если Вам нужны эти данные - копируйте их в нужную файловую систему

На самом деле, когда продавал нотик, надежда была, что macos поймёт диск, но, пока руки не дошли, да и мак только 1 тб.

Зачем полагаться на авось, если типы ФС, поддержываемые разными ОС, легко гуглятся?

В той ситуации, в которой при установке ubuntu я сделал zfs ную файловую систему я решил, что как раз можно поучиться и попробовать новое. (В целом у меня есть сервер с 2 zfs ными пулами, которые стоят на 4 2 тб дисках), просто сейчас диски полные (работой) и вот так взять и скопировать ещё туда 2 тб я не могу (просто места нет).

Да в том то и дело, что macos понимает zfs, а вот диск как устройство не видит :( (но я только учусь и мог что-то незаметить)

Сходить в магазин и купить диск на 2тб

Ценники после распродаж видели? Там какой-то ахтунг!

Да 7к както не гуманно

Ценники после распродаж видели? Там какой-то ахтунг!

Вот да, цена аховая, а если ещё и ssd, то плакать хочется :(

м*ководам суждено тратиться на то, что юзеры нормальных ос и компов имеют бесплатно )

Полностью согласен, но однажды мне вдруг стало дешевле прикупить с рук за недорого маковку для жены, чем чистить/переставлять ей на лапте винду или объяснять, что линь в обиходе с её нуждами ничуть не хуже последней — зато без виндозаморочек с глюками-вирусами. А мака она за неделю освоила и сама мышку в сторону отринула, потому что трекпад удобней. :)

Для дома да, можно и авито посмотреть, а если данные нужны по работе, то без разницы сколько стоит, а если и так дорого, то вр вскусно и точку, сейчас всегда требуются люди, там хорошие зарплаты)

а чтш мешало 1ый раз сдампить образ (а вот в зфс просто снапшот был бы гы) и потом не чистить-переставлять а раскатывать образ обратно?

Какой образ? Винды? Линя? Я о том, что в макось настолько низкий порог входа и мизерные риски, что ламера дешевле маковкой обеспечить, чем весь этот гемор претерпевать/админить. Дома я больше сисьобним, чем сисадмин на работе.

Полностью согласен, но однажды мне вдруг стало дешевле прикупить с рук за недорого маковку для жены, чем чистить/переставлять ей на лапте винду или объяснять, что линь в обиходе с её нуждами ничуть не хуже последней — зато без виндозаморочек с глюками-вирусами. А мака она за неделю освоила и сама мышку в сторону отринула, потому что трекпад удобней. :)

как всегда проблемы наверное токо с яблоосью )

кого "чистить-переставлять" приходилось

его тоже можно

м*ководам суждено тратиться на то, что юзеры нормальных ос и компов имеют бесплатно )

Оооо… знаток маков видно сразу )))🤣🤣🤣🤣🤣👋 Бесплатно лежать под столом и тюнить ось с железом вместо работы ))👍

или бесплатно жрать что дают без возможности оттюнить, ага

Мне работать а не тюнить :)) но мож кому нравится :))) 👋просто по вашим задачам не нужен эпле👋

предполагаю что по примерно никаким

ехтХ винда давно понимает. Внешними приблудами, конечно. Вопрос, нафига козе баян компу винда.

Кажется, речь про линуховые фс

Всем привет, что-то надоело уже медленное потоковое чтение большими блоками в ZFS. Тестирую zpool 7х 5400 дисков (увы, только такие есть прямо сейчас в кол-ве дома), просто в страйпе, собран с -o ashift=12 canmount=off -O xattr=sa -O dnodesize=auto -O compression=off -O atime=off -O recordsize=1M; железо - 1x Xeon2680v4, 32GB (arc=50%), Proxmox 8.1.3 (kernel: 6.5.11-6-pve, zfs 2.2.0-pve4). Тестирую программой frametest (эмулирует техпроцесс в кинопроизводстве - пишет/читает (в моем случае) 9000шт. 2к кадров (размером 1шт ~ 12МБ) в 4 потока) - собственно такой реальный техпроцесс и есть.. Получаю запись ~900МБ/с, чтение ~400МБ/с По мониторингу видно, что prefetch hit = 0%, соответственно на чтении почти половина операций из за этого идет зазря. При prefetch_disable=1 чтение еще немного хуже - все чтение идет в sync_read. Дальше особо не настраивал - только повысил все zfs_vdev_(a)sync_read_min(max)_active - не помогло .. Результаты и кое-что из мониторинга на https://pastebin.com/ZxdbV04y

Это чтение и запись одновременно или по отдельности?

Всем привет, что-то надоело уже медленное потоковое чтение большими блоками в ZFS. Тестирую zpool 7х 5400 дисков (увы, только такие есть прямо сейчас в кол-ве дома), просто в страйпе, собран с -o ashift=12 canmount=off -O xattr=sa -O dnodesize=auto -O compression=off -O atime=off -O recordsize=1M; железо - 1x Xeon2680v4, 32GB (arc=50%), Proxmox 8.1.3 (kernel: 6.5.11-6-pve, zfs 2.2.0-pve4). Тестирую программой frametest (эмулирует техпроцесс в кинопроизводстве - пишет/читает (в моем случае) 9000шт. 2к кадров (размером 1шт ~ 12МБ) в 4 потока) - собственно такой реальный техпроцесс и есть.. Получаю запись ~900МБ/с, чтение ~400МБ/с По мониторингу видно, что prefetch hit = 0%, соответственно на чтении почти половина операций из за этого идет зазря. При prefetch_disable=1 чтение еще немного хуже - все чтение идет в sync_read. Дальше особо не настраивал - только повысил все zfs_vdev_(a)sync_read_min(max)_active - не помогло .. Результаты и кое-что из мониторинга на https://pastebin.com/ZxdbV04y

По отдельности

И у эппл, и у линукс свои плюсы и минусы. Тут чат не про это.

Давай определимся, Вам нужна скорость или надёжность?

У вас в пуле данные лежат в zvol или в датасетах?

Мне нужна надежность и скорость чтения чтобы была поближе к скорости записи. В реальной жизни - хотябы 800МБ/с с 8 дисков с данными при потоковом чтении

в датасете. Прокс - это так просто дома тестирую, ничего общего с виртуальными машинами ))

Нуууу, может тогда стоит попробовать не ZFS? Bcachefs, хотя там ещё скраба нет А если серьёзно почитайте сперва это и это и в целом ссылки по *zfs tuning*

Спасибо. Я достаточно пробовал оптимизировать в свое время - на Люстре over ZFS у меня тоже конечно чтение медленнее. но не на столько же))

Попробуйте сделать рекордсайз 4 или 8 или еще больше мб, запишите новые данные (они запишутся новым размером). После чего попробуйте прочитать их, какая будет скорость? Для рекордсайза больше 1мб надо будет твикнуть немного

Раньше не рекомендовали > 1M в продакшн...

Всем привет, что-то надоело уже медленное потоковое чтение большими блоками в ZFS. Тестирую zpool 7х 5400 дисков (увы, только такие есть прямо сейчас в кол-ве дома), просто в страйпе, собран с -o ashift=12 canmount=off -O xattr=sa -O dnodesize=auto -O compression=off -O atime=off -O recordsize=1M; железо - 1x Xeon2680v4, 32GB (arc=50%), Proxmox 8.1.3 (kernel: 6.5.11-6-pve, zfs 2.2.0-pve4). Тестирую программой frametest (эмулирует техпроцесс в кинопроизводстве - пишет/читает (в моем случае) 9000шт. 2к кадров (размером 1шт ~ 12МБ) в 4 потока) - собственно такой реальный техпроцесс и есть.. Получаю запись ~900МБ/с, чтение ~400МБ/с По мониторингу видно, что prefetch hit = 0%, соответственно на чтении почти половина операций из за этого идет зазря. При prefetch_disable=1 чтение еще немного хуже - все чтение идет в sync_read. Дальше особо не настраивал - только повысил все zfs_vdev_(a)sync_read_min(max)_active - не помогло .. Результаты и кое-что из мониторинга на https://pastebin.com/ZxdbV04y

Вам бы тогда l2arc добавить кстати

Вам бы тогда l2arc добавить кстати

Одна из самых бесполезных фичей в зфсе

В частности убрать троттлинг

В реальной жизни там сотни тысяч 12М файлов читаются - никакого l2 не хватит..