Да вот тоже про него … Под кэш тоже ?

Да, у меня нагрузка не такая большая. Под кэш Samsung PM9A3

PMEM достаточно дорогой, я выбрал модули по 128G

Надо прям чтобы между рам и l2 был минимальный провал ))

как и задержки - у ссд десятки-сотни мкс, а рамы - десятки наносекунд

Надо 500-900 )))

там чем больше кеш тем больше РАМы надо, а если много РАМы можно поставить то нафига кеш?

Думаю над этим еще ))

@Georg_post , кстати оно локально или по сетке ? а то по сетке может и не надо такую скорость - упрется в сетку

GELI BOOT-FLAG нашед как починить если кому нада.... убирает BOOT и ставит GELIBOOT - тогда и в новых верисях спрашивает, причем еще раньше чем BOOT-flag, прямо на этапе загрузчика.... geli configure -B -g DISK B - убирает BOOT g - добавляет GELIBOOT

Думаю над этим еще ))

Пащему не DDR4?

Линейные скорости не особо важны ..

Дорого да и какой профит 🤷🏻‍♂️

Там сразу готовые от 256 до двух гигов продаются...в смысле есть...

Ну кстати .. есть опасения … чтоб в моем случае трунас их увидел

Так обсуждали ведь уже, что там контроллер как в m2 ssd, чего бы ему не видеть их?

Всем здравствуйте. Помогите, кто может (да, не по основной теме, но дальше будет о zfs)))). Сидел и ковырялся на домашнем серваке с Ubuntu 22.04 и выстрелил себе в ногу и используя chmod go-rx из домашнего каталога пользователя закрыл себе доступ к "..". Да, то есть сам себе запретил читать и выполнять объекты всей файловой системы выше /home/user . Решил исправить это дело и используя эту статью (https://losst.pro/sbros-parolya-ubuntu) зашёл через grub и загрузился через "init=/bin/bash" ctrl+x в root и оттуда обратно все права доступа поправил. Вышел. И перезагрузил комп. После этого появляется стандартный лог с clean а дальше отрубается видеосигнал и ubuntu не грузится. При этом машина не загружается и не видится в локальной сети. Есть идеи. Логи смотреть пытался, но не знаю, что искать. И во всей этой ситуации самое страшное. На этом компе в zfs массиве подсоединены 4 диска. Вопрос второй - а смогу ли я, снеся систему и поставив её заново подключиться к этому массиву?

я что-то много читал что hot spare работает не так как сходу ожидается и лучше сразу raidz3 в таком случае

я что-то много читал что hot spare работает не так как сходу ожидается и лучше сразу raidz3 в таком случае

я что-то много читал что hot spare работает не так как сходу ожидается и лучше сразу raidz3 в таком случае

Затем я зачистил диск sdf, и вот что получилось: root@exp2:/home/art# zpool status pool: hahapool state: DEGRADED status: One or more devices could not be used because the label is missing or invalid. Sufficient replicas exist for the pool to continue functioning in a degraded state. action: Replace the device using 'zpool replace'. see: http://zfsonlinux.org/msg/ZFS-8000-4J scan: resilvered 120M in 0 days 00:00:02 with 0 errors on Fri Apr 28 20:02:59 2023 config: NAME STATE READ WRITE CKSUM hahapool DEGRADED 0 0 0 raidz2-0 DEGRADED 0 0 0 sde ONLINE 0 0 0 spare-1 DEGRADED 0 0 0 sdf UNAVAIL 0 0 0 corrupted data sdj ONLINE 0 0 0 sdg ONLINE 0 0 0 sdh ONLINE 0 0 0 sdi ONLINE 0 0 0 spares sdj INUSE currently in use

именно. подключается диск сам, но потом происходит ресильверинг, что вечность на больших объмах Поэтому в этой ситуации лучше повышать уровень raidz

Я логику не пойму) Ок, допустим в пуле raidz3 один диск вылетел, как действовать надо?🤔

можно никак, на потере данных и скорости это не скажется. Планово заказать новый диск и планово поставить его вместо мертвого

другое дело, если иметь рейдз3 сразу и к нему еще добавить хотспаре, но это странный сценарий, типа если уверен что диск умрет, но некогда идти к серверу ставить новый и деньги на купить заранее лишние есть

другое дело, если иметь рейдз3 сразу и к нему еще добавить хотспаре, но это странный сценарий, типа если уверен что диск умрет, но некогда идти к серверу ставить новый и деньги на купить заранее лишние есть

У кого-нибудь был опыт втыкания сата ссд дисков под кеш l2arc + slog, типа s3700, в сата2 порты без trim? От этого что-то становится принципиально медленее/хуже?

Вот думаю что лучший l2 - это оптан, пока нет подходящего недорогого попробовать , скорость случайного чтения у него что надо 👍🤔но еще не пробовал , это теория ..

С его обьемом лучше уж ОЗУ докинуть

Озу ограничено платой и процом.. к тому же есть полутеровые варианты … ну это когда ОЗУ уже некуда пихать

Я написал про ОЗУ выше - много где можно увеличить обьем

Я написал про ОЗУ выше - много где можно увеличить обьем

Вот думаю что лучший l2 - это оптан, пока нет подходящего недорогого попробовать , скорость случайного чтения у него что надо 👍🤔но еще не пробовал , это теория ..

я пробовал оптан как только они появились и мне не удалось его никакими синтетическими тестами прогрузить по иопсам даже на половину от заявленных. Из чего я сделал вывод, что для реальной жизни можно и попроще ставить, разницы нет

Наверно это от области применения все же

нужен совет, raidz2 на 6 дисков по 8 или 12 терабайт под бекапы - чтение редкое и очень произвольное (сжатие и дедупликация, чанки от бекапного софта стоит ожидать разбросанными по дискам). Какие диски и какого объема взять под slog и l2arc? Пока думаю взять что-то с около 1-1.3 dwpd гигабайт на 800 и слог и л2арк положить на него. Ну и если умрет - просто выкинуть и поставить следующий. слог сделать гигабайт 16, л2арк сделать гигабайт 400, остальное оставить под оверпровизионинг. Сервер в сеть воткнут двумя гигабитными портами с бондингом, теоретический предел входного литья бекапов - 200 мегабайт в секунду.

или наоборот primarycache=metadata ? памяти на сервере 32 гига и проц больше не умеет (

но не уверен что второй раз взял бы такое, похоже возможность поставить очень много памяти перевешивает экономию на юнитах

если там чтение ОЧЕНЬ произвольное и размер масива 40 +/- тера, то нафига там нужен l2arc ? ведь чем больше l2arc тем больше памяти он сожрет и даже при кеше в 1 терабайт шанс попасть в него будет 1 к 40 (при 40 теровом масиве и очень произвольном чтении) slog по умолчанию сбрасывается раз в 5 секунд, при сетке 10 гига его не имеет смысл делать больше 6 гига (он никогда не заполнится) с 2 гигабитами это не больше 1 гига

А я хотел 1тб озу, но купили только 512гиг, расстроен

Не хватает ?

Аааа … я б и 2 тера вкатил - денег много надо (((

LRDIMM-модули бывают даже по 256 гб вроде

Что за модули такие ?🤔низкое потребление ?

Буферизированные регистровые

Я и так их юзаю ecc reg

если там чтение ОЧЕНЬ произвольное и размер масива 40 +/- тера, то нафига там нужен l2arc ? ведь чем больше l2arc тем больше памяти он сожрет и даже при кеше в 1 терабайт шанс попасть в него будет 1 к 40 (при 40 теровом масиве и очень произвольном чтении) slog по умолчанию сбрасывается раз в 5 секунд, при сетке 10 гига его не имеет смысл делать больше 6 гига (он никогда не заполнится) с 2 гигабитами это не больше 1 гига

обычные регистровые это RDIMM, а в случае с LRDIMM что-то у них там снижено, и как результат в один модуль влезает дофига гигабайтов, но это оборачивается нюансами... кои мне неведомы) У меня такой памяти тоже нигде нет)

У LRDIMM просто есть буфер памяти, который позволяет ей притворяться не 8 ранговой, а 4 ранговой https://servomarket.ru/blog/polezno-znat/lrdimm-i-rdimm-/

хм, а ведь получается общее правило можно сформулировать: практический максимальный размер для слог-девайса = (скорость_записи_в_пул)*5

Сначала максимум рамы, потом л2арк, все правильно