сейчас zfs не жмёт блок если он не сжался хотя бы на 12.5%

сейчас zfs не жмёт блок если он не сжался хотя бы на 12.5%

У меня старая фринасина , 20 года, там еще не последний zfs

какая мотивация? целых 10% сжали и выкинули

больная тема, плюс ещё же нужно хотя бы один сектор (ashift) сэкономить, иначе тоже не будет пожато

этой логике лет 15

если этот коэффициент уменьшать, то начинается бОльший аффект по цпу

если этот коэффициент уменьшать, то начинается бОльший аффект по цпу

тут можно эпос почитать про это, с моим участием https://github.com/openzfs/zfs/pull/9416

16 гиговые по факту видно 12 кажется (точно не помню) - остально похоже про запас.... тут никто не спорит - если есть деньги всегда большой ОПТАН хорошо... все решает соотношение цена/плюшки но 16 гига стоит меньше 10 баксов + переходник PCIEx1 M.2 и того примерно 20 баксов чисто на LOG... а вот спешл надо избыточность не меньше пула (иначе это точка отказа) - и того скажем для RAIDZ2 - получится уже 3 оптана для моего пула (30 тера) - это по расчетам около 100 гига, то есть минимальный оптан 118 гига - стоит 100+ баксов на ебай... их надо 3 штуки, и к нем по хорошему для надо 12 свободных линий PCI-E... и того 300+ баксов и это без l2arc ибо он туда уже толком не влезет.... а оптаны по 480+ гига уже совсем не гуманно стоят, хотя да можно порезать - несколько гига на ЛОГ, сотню в тройное зеркало на СПЕШЛ, и хвосты в страйп для l2arc.... но дорого.... но кучеряво...

интересно где у вас что аффектило, но по коду это так

Не знаю, меня волнует практическая сторона - вкл сжатие , даже то, что по умолчанию, делало работу невозможной к сожалению (((

Не знаю, меня волнует практическая сторона - вкл сжатие , даже то, что по умолчанию, делало работу невозможной к сожалению (((

Каким алго сжатие?

Тот что изначально предлагается по умолчанию в веб морде 👋

там вообще будет пачка изменений дефолтов: - volblocksize = 16K - compression=on=lz4 - relatime=on

там вообще будет пачка изменений дефолтов: - volblocksize = 16K - compression=on=lz4 - relatime=on

Раз дефолтом делаете лз4, получается что он лучше zstd в большинстве случаев? В смысле, что например при таком же сжатии он жрёт меньше цпу?

так что то что бутер только zstd интегрировали - мне их жалко

Еще вот кстати, неужели хоть 0.1% юзеров нужно atime? До сих пор везде приходится отключать atime, zfs не исключение. Ради чего страдаю? :)))

Ну так-то да. Но мне кажется что в 2023 надо дефолтом отключать atime. Кому надо те сами включат

там вообще будет пачка изменений дефолтов: - volblocksize = 16K - compression=on=lz4 - relatime=on

Я пробовал, у меня более менее нормально работали 32Гб и производительность у них чуть получше. Но греются сильно почему-то, при перегреве дохнут. У меня несколько штук сдохло, но я их использовал под систему. Вод под систему musthave только срадиатор нужен на контроллер. Мне показалось что по iops они слабенькие, т.к. там всего 1 чип в 16гб и два в 32гб.

там вообще будет пачка изменений дефолтов: - volblocksize = 16K - compression=on=lz4 - relatime=on

там это где ?

да, именно

Странно это слышать. Я когда последний раз fio тесты гонял, его данные не жмутся, то на многоядерном проце (10с-20t E5-2666v3) в многопотоке выигрыш в разы был у zstd. Да, проц выжирало на 100%, а у lz4 - 30%, но запись и чтение чувствительно быстрее проходили.

Странно это слышать. Я когда последний раз fio тесты гонял, его данные не жмутся, то на многоядерном проце (10с-20t E5-2666v3) в многопотоке выигрыш в разы был у zstd. Да, проц выжирало на 100%, а у lz4 - 30%, но запись и чтение чувствительно быстрее проходили.

блин, это гениально👍 , а то я тупо копировал 200 гиговый файловый набор когда недавно тоже тестил разные комбинации параметров сжатия

Я тоже файлы битрикса копировал, их больше 400Гб. Сравнивал, есть ли толк заниматься этим. Сделал вывод, что fio более чем достаточно, по крайней мере в моих кейсах

к вопросу насколько lz4 эффективно игнорит уже сжатое $ ./lzbench -t16,16 -elz4 ~/Downloads/silesia.zip lzbench 1.8 (64-bit Linux) AMD Ryzen 7 5800U with Radeon Graphics Assembled by P.Skibinski Compressor name Compress. Decompress. Compr. size Ratio Filename memcpy 17489 MB/s 17323 MB/s 67633896 100.00 /home/gmelikov/Downloads/silesia.zip lz4 1.9.3 15676 MB/s 16672 MB/s 67899128 100.39 /home/gmelikov/Downloads/silesia.zip done... (cIters=1 dIters=1 cTime=16.0 dTime=16.0 chunkSize=1706MB cSpeed=0MB)

Кто будет тестироват, проверьте пожалуйста zstd-fast против lz4

Странно это слышать. Я когда последний раз fio тесты гонял, его данные не жмутся, то на многоядерном проце (10с-20t E5-2666v3) в многопотоке выигрыш в разы был у zstd. Да, проц выжирало на 100%, а у lz4 - 30%, но запись и чтение чувствительно быстрее проходили.

вообще я тут кидал уже, lz4 на несжимаемых данных просто бесподобно быстр

вообще я тут кидал уже, lz4 на несжимаемых данных просто бесподобно быстр

а zstd тоже несжимаемые данные не трогает?

вот такой диск урвал по смешной (для нас цене) - мне он как ИПу обошелся в 222 $ на 16 тера... будет использоватся в "тревожном чемоданчике" - не дай бог (дисклеймер: бога нет)

ну как показывает опыт украины - внезапно всё может стать очень плохо... а восток дело тонкое.... и НАС на 12 дисков + полочка на 15 тяжелые

Бля … в таких делах не до дисков … вот уж … фоточки домашние тащить ? 🤷🏻‍♂️

Бля … в таких делах не до дисков … вот уж … фоточки домашние тащить ? 🤷🏻‍♂️

криптокошельки, приватные ключи...

16 терабайт ключей ?🤣

16 терабайт ключей ?🤣

да чойта... пачку блокчейнов

на самом деле восспоминания и "фоточки" это всё что делает личность человека - остальное покупается

на самом деле восспоминания и "фоточки" это всё что делает личность человека - остальное покупается

Часто просматриваете фото 5 летней давности к примеру ? )))

часто

Часто просматриваете фото 5 летней давности к примеру ? )))

Я вот воооще не смотрю даже месяц назад ))