Немного не понял. Special можно задать как массив из 2х дисков

у меня несколько десятков миллионов мелких файлов, и мне надо чтобы процесс их обхода занимал ну скажем чуть меньше чем полгода хотя бы.

скажем так если блин умрёт мне конечно будет жалко, но если умрёт весь массив я не переживу

А принципиально важно делать это именно через сканирование всех файлов?

Так у тебя массив вылет одного переживет. Вылет одного диска из спешл тоже, если вылетят 2 то у тебя и так так все развалится

вот мне бы кейс чтобы всё развалилось (из нвме) но ничего не похерилось бы

а вот если бы л2 кэшировал всю мету было бы идеально

стратегия настраивается, надо @gmelikov спросить как )

Я честно не понимаю чего миррор не нравится. А трипл нравится. У тебя пул какой raid?

пул без избыточности совсем, 10 отдельных пулов на каждом блине по пулу

Так у вас шансов потерять данные из-за вылета диска в пуле выше чем потерять данные из-за вылета спешл

сделаешь 10 рейд - прибавится скорости 😁

кмк при таком раскладе проще на ext4 все сделать, а мету на nvme вынести. от zfs будут только лишние накладные расходы.

как раз с ext4 съезжаю, т.к. там это вообще никак не побороть ни спешлом ни л2 никак

17 это конечно вообще ни о чём

у меня за год больше 6% не поднимается.

vfs.zfs.l2arc_noprefetch = 0 если кому интересно

Подскажите, что этой вам дало? Тоже имеем проблему чтения мелочи

главное чтобы кэш меты не вымывался из л2 как он это делает из арк

если с разрастанием л2 арк производительность на чтение драматически снизится, то для зфс выделено мало оперативки.

я пока еще наблюдаю насколько это изменение будет константно по времени. как я и сказал у меня задача убрать нагрузку на блины при обходе файлов, сделать это можно либо спешлом (что очень дорого и потенциально можно потерять всё), либо (возможно, с помощью л2арк, что почти бесплатно и совсем не опасно в смысле развала нвме устройства) я еще понаблюдаю в общем. но основная задача вроде как выполнена, файлы пробегаются порядка на два быстрее чем без кэширования метаданных

нет команда другая

в других системах может быть другое место, найдите где этот файл лежит у вас

который l2arc_noprefetch

vfs.zfs.l2arc_noprefetch = 0 если кому интересно. Вот этой командой в консоли ? У вас какая ссд по размеру ? У меня 1,6 стоит и 192 оперативы 🤔

Извините за мой ломаный технический - суть чтобы он типа кэшировал не сами файлы а ярлычки(метаданные) так? И меньше крутил блинами

ну грубо говоря да, имя файла размер и проч его метаданные

я поизучаю сколько нужно в итоге для моего кейса (десятки миллионов файлов)

я поизучаю сколько нужно в итоге для моего кейса (десятки миллионов файлов)

У меня на каждом блине десяток процессов каждый из которых когда ему вздумается начинает перебирать файло. Ладно бы если они как то друг с другом это согласовывали. Так нет же иногда дерут блины все вместе одновременно

А спешл ведев чисто под мету? Как я понял 🤔мож его соберу

vfs.zfs.l2arc_noprefetch = 0 если кому интересно

ну теперь просто всё чтение в l2arc едет. secondarycache=all|none|metadata смотрите, не забывайте что primarycache должен включать эти значения, т.к. arc первичен

ну теперь просто всё чтение в l2arc едет. secondarycache=all|none|metadata смотрите, не забывайте что primarycache должен включать эти значения, т.к. arc первичен

Добрый день, а скажите , 50 sas шпинделей 7,2к не будут ли быстрее l2arc u2 ssdшки? Может вообще он не нужен (((

7.2к это переделанный сата, там от саса мало что имеется. с каждого из них в рандоме в лучшем случае в пределах 75-100 иопс можно снять.

Это просто в высшей степени замечательно, спасибо!

Добрый день, а скажите , 50 sas шпинделей 7,2к не будут ли быстрее l2arc u2 ssdшки? Может вообще он не нужен (((

но конечно только special vdev даст гарантии наличия меты на ссд, если 100% хочется попадание

озу ставьте сначала, нежели l2arc )

хотя персистентность l2arc немного это правило пошатнуло

я честно говоря не сильно понял в чем боязнь спешла в мирроре.

я честно говоря не сильно понял в чем боязнь спешла в мирроре.

хотя персистентность l2arc немного это правило пошатнуло

Что есть персистентность ? Да вот думаю удвоить ага. Но боюсь лезть в рабочий сервак

после ребута состояние подгрузится, раньше с нуля заполнялся