советуют держать гиг рамы на терабайт данных

Вот это интересно 🤔 А кто источник?

Всем привет! Подскажите, плз, а можно сделать массив такой, чтобы данные динамически перемещались между SSD и HDD?

только третьими средствами. хочется горячие держать на ссд, холодные на хдд?

только третьими средствами. хочется горячие держать на ссд, холодные на хдд?

ага)

третьими только.

я такого в зфс вообще не встречал. @gmelikov поправь меня, пожалуйста, если не прав.

и второй вопрос по дедубликации - когда включаю, массив от клиента отваливается ZFS средствами FreeNAS, клиент iSCSI Win2019

и второй вопрос по дедубликации - когда включаю, массив от клиента отваливается ZFS средствами FreeNAS, клиент iSCSI Win2019

было ли у кого такое?) вообще дедубликация работает?

сначала скорость записи падает до нуля, потом вообще диск у клиента пропадает

может мало рам для работы дедупликации

и он просто тормозит сильно из за этого

может мало рам для работы дедупликации

по мониторингу память даже не тратится, как до включения, так и после остается на том же уровне

пока приходится использовать дедубликацию отдельно на iSCSI томах виндовую, хотел бы централизованно на уровне ZFS сделать насколько корректное решение в целом?)

было ли у кого такое?) вообще дедубликация работает?

работает, но требует много памяти

Вот это интересно 🤔 А кто источник?

https://web.archive.org/web/20140818042550/http://hardforum.com/showpost.php?s=8d31305e57c1dd2853eb817124ff18d9&p=1036865233&postcount=3

гугол:zfs 1gb per tb

Всем привет! Подскажите, плз, а можно сделать массив такой, чтобы данные динамически перемещались между SSD и HDD?

если большой пул, мало памяти то l2arc по сути и выполняет эту задачу - держит на l2arc горячие данные.

https://web.archive.org/web/20140818042550/http://hardforum.com/showpost.php?s=8d31305e57c1dd2853eb817124ff18d9&p=1036865233&postcount=3

Спасибо

если большой пул, мало памяти то l2arc по сути и выполняет эту задачу - держит на l2arc горячие данные.

при перезагрузке хранилки l2arc стирается же?

при перезагрузке хранилки l2arc стирается же?

сейчас да. но патч на подходе который будет сохранять данные. Чуть выше в группе Георгий давал ссылку

при перезагрузке хранилки l2arc стирается же?

https://github.com/openzfs/zfs/pull/9582

но будет уже в v2.0

спасибо!

https://github.com/openzfs/zfs/pull/9582

это типа Tiered Storage получается?

не уверен. Ведь если я правильно понимаю, то в tiered storage перемещение данных происходит по какой-то логике. А тут это получается как "побочный" эффект. Ведь данные продолжают первично храниться на основном пуле и даже потеря L2ARC не приведёт к краху

я такого в зфс вообще не встречал. @gmelikov поправь меня, пожалуйста, если не прав.

zfs вообще сейчас не трогает уже записанное никогда, даже баланс свободного места по vdevs только при перезаписи будет выполняться

Вот вот

Вчера поднял зфс зеркало на старом целероне с 2гб рам)

Доволен до усрачки

Tt ещё раз и бан

Добрый день подскажите а как то zfs можно ограничить чтобы он столько памяти не ел? две виртуалки 8ГБ, а памяти съел 40 ГБ

Первый запрос в Гугле https://wiki.orzfly.com/topics/zfs-on-linux-memory-limit#:~:text=Limit%20ZFS%20on%20Linux%20Memory%20Usage,-echo%20%22options%20zfs&text=1073741824%20is%201%20GiB.,performance%20shortage%20of%20the%20host.

Добрый день подскажите а как то zfs можно ограничить чтобы он столько памяти не ел? две виртуалки 8ГБ, а памяти съел 40 ГБ

zfs_arc_max

а сколько можно оставить если общий объем 64 гб

Я 8 ставил

по умолчанию пишут 50 процентов

Зависит от винтов, нагрузки и т.д.

один nvme и в зеркале два hdd по теру

поставлю 8 попробую

один nvme и в зеркале два hdd по теру

Почитай выше, поднимали вопрос о настройке включая кэш на партицию nvme

так вроде кеш настроил

а сколько можно оставить если общий объем 64 гб

По тестам, скорость при 50% памяти в 2 раза выше в виртуалках чем при 8гб

это заметно

сейчас ограничил скорость упала

Если тебе нужны скорости в 11-13гб/с то 50%, если достаточно 4-5 то оставляй 8

а по дефолту она 50%

?

или сожрет все что есть

а по дефолту она 50%

50, но если будешь с ней работать то лучше почитай матчасть, лучше знать о ней поболее инфы 😉

да пока тестирую, ну я что то приуныл когда после двух виртуалок она сожрала больше половины памяти, хотя скорость хорошая

Добрый день подскажите а как то zfs можно ограничить чтобы он столько памяти не ел? две виртуалки 8ГБ, а памяти съел 40 ГБ

https://www.linuxatemyram.com

да пока тестирую, ну я что то приуныл когда после двух виртуалок она сожрала больше половины памяти, хотя скорость хорошая

как съела, так и "отрыгнёт" обратно. Вы запустите не две виртуалки, а 6-8 виртуалок. Ну или сколько там по плану собирались

то есть все норм? я заметил что она упала

но поставил 16 ГБ zfs_arc_max

Есть в нем смысл?

то есть все норм? я заметил что она упала

нормой является использование свободной памяти. Зачем вам на хосте память, если она не используется? Шобы была?)) Ну это не юниксвэй

то есть надо это крутить когда с памятью совсем туго?

то есть надо это крутить когда с памятью совсем туго?

ну или когда жаба очень сильная)))

ладно пока уберу, запас еще есть, меня просто напугало что она так быстро сожрала ее, но потом восстановилась

думаю нормально

ну скорость как работают виртуалки меня радует

ладно пока уберу, запас еще есть, меня просто напугало что она так быстро сожрала ее, но потом восстановилась

обычная фс тоже так же ее жрет, только это уходит в графу cache

Добрый день подскажите а как то zfs можно ограничить чтобы он столько памяти не ел? две виртуалки 8ГБ, а памяти съел 40 ГБ

Она свободную память занимает, кто-то попросит - отдаст. Выше накидали объяснений😁

Она свободную память занимает, кто-то попросит - отдаст. Выше накидали объяснений😁

Ну так и показывает что сожрала всю в проксмоксе, все таки ограничил 16гб пока наблюдаю, вроде все шустро работает

Ну так и показывает что сожрала всю в проксмоксе, все таки ограничил 16гб пока наблюдаю, вроде все шустро работает

Если не упирались - зря. Единственное, на чём arc может стрелять - это на случаях, когда приложение хочет огромное количество памяти и сразу. Я только на запуске vm такое ловил, когда на хосте оч мало памяти (физически), а кему за раз и сразу хочет много озу. Но это не только на arc может стрелять

В общем не стреляет такое - не ограничивайте

шалом православные

привет!

шалом православные

ну привет!

шалом православные

только религии тут нехватало

Шалом шаббат :)

после 20 или 30% начинается деградация zfs скорости?

после 20 или 30% начинается деградация zfs скорости?

20/30% чего?

свободного оставшегося места

при 20% уже нашел

у меня 13 осталось, начал тупить даже на du

Георгий писал что если занято более 80%, то уже начинаются проблемы.

а если массив например на петабайт, пропорции те же ?

после 20 или 30% начинается деградация zfs скорости?

медленно но неуклонно начинает падать процентов с 20, постепенно ускоряясь примерно по экспоненте