Владимир
в общем это в любом случае тут оффтоп, если хочется - можем продолжить в https://t.me/sds_flood
та нее, время нет), я с отпуска вышел, я только предложил так сказать своего рода помощь), не интересно), ну ваше дело)
Georg🎞️🎥
«Ну что вы, не хотите , не надо, но может все таки давайте 🤣🤣🤣🤦‍♂️»
Владимир
«Ну что вы, не хотите , не надо, но может все таки давайте 🤣🤣🤣🤦‍♂️»
Георг обосновал свой отказ, я написал что его обоснование не корреткно, и пояснил что это настраивается
Владимир
мне надо было промолчать?
Владимир
простите, я вижу не корректную информацию, я её поправляю
Владимир
хорош, я предложил в оффтоп чат идти, ты не захотел
потому что исчерпывающе ответил на предыдущее сообщение на мой взгляд)
George
потому что исчерпывающе ответил на предыдущее сообщение на мой взгляд)
я бы тебе ответил в соответствующем чате, но тебя там нет
Владимир
я бы тебе ответил в соответствующем чате, но тебя там нет
есть личка, я не буду заходить в флуд чат который будет дополнительно отвлекать меня от работы
Georg🎞️🎥
Кто напомнит соотношение arc и arcL2 ?👋 что то не могу найти :((( из серии на каждый 1gb оперативы столько то ssd кэша, спасибо 👋👋
Владимир
Кто напомнит соотношение arc и arcL2 ?👋 что то не могу найти :((( из серии на каждый 1gb оперативы столько то ssd кэша, спасибо 👋👋
а разве там именно так работает?, когда я пытлася в этом разобраться на памяти у меня такое..., что в ОЗУ кешится то что в него помещается, что не помещается то уже на SSD, я даже помню отключал кое где arc совсем чтобы всё кешилось в SSD ...
George
Кто напомнит соотношение arc и arcL2 ?👋 что то не могу найти :((( из серии на каждый 1gb оперативы столько то ssd кэша, спасибо 👋👋
если вопрос про "расход метадаты в ОЗУ на l2arc" то ответ "ДО 320байт на блок", в openzfs он в районе 190байт чтоли был
Georg🎞️🎥
https://www.truenas.com/community/threads/formula-for-size-of-l2arc-needed.17947/
Ага типа того, спасибо, а на сколько актуально это в 23, не в курсе ?🤔
Georg🎞️🎥
Владимир
И как ? И под какие задачи ?
ну меня не впечатлило, конечно лучше чем без него, но всё равно это не та производительность которой хотелось бы)
Владимир
И как ? И под какие задачи ?
куча виртуалок в основном для работаботки и немного продакшена
Владимир
ничего особенного вроде
Georg🎞️🎥
если вопрос про "расход метадаты в ОЗУ на l2arc" то ответ "ДО 320байт на блок", в openzfs он в районе 190байт чтоли был
Скорее, какой баланс соблюдать для максимальной производительности , отталкиваясь от размера озу 🤔типа если у меня 100 гиг рам, то оптимальный ssd - это …?
Georg🎞️🎥
куча виртуалок в основном для работаботки и немного продакшена
Гигантский это какой в вашем понимания ? 🤔
George
т.к. есть зависимость от размера recordsize сколько l2arc требует озу для работы
Georg🎞️🎥
Оптимальный ССД - это еще докинуть 100Гб ОЗУ)))
Ну это мало: 350-400гиг - это вес проекта порой , никакой озу не напасешься(
Владимир
Гигантский это какой в вашем понимания ? 🤔
это пропорционально не сильно отличающийся от оригинального хранилища
Владимир
у нас было вроде 4Тб пул, и кеш 1Тб
Georg🎞️🎥
у нас было вроде 4Тб пул, и кеш 1Тб
Проще пул на ссд в таких объемах )))
Владимир
Проще пул на ссд в таких объемах )))
так SSD всего 1)), и говёненький)), чисто как расходник))
Georg🎞️🎥
т.к. есть зависимость от размера recordsize сколько l2arc требует озу для работы
Вот и сколько он требует сейчас на каждый гиг ssd? ))
Владимир
а из нормальных собрать дорага))
George
Вот и сколько он требует сейчас на каждый гиг ssd? ))
я же написал выше формулу, берёте свой recordsize и считаете
George
умножая его на 320байт
Georg🎞️🎥
а из нормальных собрать дорага))
4тб говноссд всяко быстрее hdd)) а если ssd у вас был не серверовый, может потому и не профитно было (((
Georg🎞️🎥
я же написал выше формулу, берёте свой recordsize и считаете
Это который ashift? 🤦‍♂️я все еще путаю понятия 🤷🏻‍♂️
George
умножая его на 320байт
т.е. для recordsize=128k это до 2.5ГБ озу примерно на каждый 1ТБ ссд
Georg🎞️🎥
нет, это именно recordsize
У меня 1MB стоит - файлы то больше
George
У меня 1MB стоит - файлы то больше
для recordsize=1M меньше 1ГБ ОЗУ нужно на мету на каждый 1ТБ ссд
Georg🎞️🎥
для recordsize=1M меньше 1ГБ ОЗУ нужно на мету на каждый 1ТБ ссд
На каждый тер пула или arc2, извините если глупость уточняю ?👋спасибо
Ivan
нет, это именно recordsize
а для zvol размер блока используется ?
Georg🎞️🎥
на каждые тер l2arc
Благодарю 👋 я так понимаю, arc2, в разы превышающий озу, большого профита не даст ? Или ?
George
Благодарю 👋 я так понимаю, arc2, в разы превышающий озу, большого профита не даст ? Или ?
даст, при большом recordsize требования не большие по мете в ОЗУ. Но ОЗУ всегда лучше чем l2arc, но l2arc часто лучше чем ничего. НО если вы по arcstat видите, что у вас cache hit без добавлений итак очень высокий (99+%), то смысла может не иметь его увеличение. В общем как обычно от кейса зависит
Y
Раз пошла такая пьянка.... Поставил 64 гига рамы (больше проц не жрет), планирую добавить zil (оптан на 16 гига) и l2arc на 512 гига... zil по слухам уменьшает фрагментацию ? да или нет ? l2arc будет на 8и диска по 64 гига (можно и 8 по 120 гига - тогда если это имеет смысл) стоит 512 гига на 64 гига РАМы или таки 960 ? зы. диски есть - их просто девать некуда - почему бы не заточить под кеш (особенно когда он теперь "постоянный") пока живые... еще момент всё это полключено PCI-E x8 v3 > SAS3408 > 1 кабель (пропускная 6 гигабайт, но могу поставить 2 кабеля - но там скорее всего всё равно всё в диски упрется, это если локально, а так сетка наружу 10 гига так что вообще) SAS3 Expander > диски стоит вообще ставить эти кеши на 30 тера полезной инфы (12 тритер в RAIDZ2) ?
Y
и еще поврос, стоит часть дисков (может часть кеша ССД) подключить через САТА ? (счас САТА отключен за ненадобность, как например и аудио) , да 10 гигабит висят на PCI-E x4 который от DMI а не от проца... могу перевесить на х8 (контроллер все равно х4) которые от проца - там слот свободный
Y
про zil, надеюсь, имеется в виду "два оптана по 16 гигов"?
если критично то могу поставить второй через переходник PCI-E (так как слот м2 у меня только один)
Y
про zil, надеюсь, имеется в виду "два оптана по 16 гигов"?
короче заказал второй оптан, как раз всё равно слот писиай 1 пустой есть и переходник для поигратся едет... (есть еще пререходнки с MiniSAS на m2 pci - приедет оптан на нем попробуи или заведется, ибо на контроллере есть свободный порт и он должен уметь PCI-E диски (SAS3408)
Ivan
тот случай когда проще норм платформу подобрать, чтоб кушала больше памяти
Y
тот случай когда проще норм платформу подобрать, чтоб кушала больше памяти
Это если с нуля собирать и уже зная что надо... Да и по адекватной цене только китайчатина... Хрен ее знает как она себе будет вести в течении лет 5-10
redexp
Подскажите плез, как правильно перенести pool на другую рейд-массив? Ситуация такая, есть truenas, там зеркало, есть один пул с данными. хочу перенести на другой массив (тут два варианта, либо трунас запускаю как виртуалку или на свежем рейде на другой машине, не решил) Можно как то файлом перенести? есть команда zfs pool export но куда она экспортирует как файл не понял
LordMerlin
он ни куда как файл не экспортрирует. Оно подготавливает пул чтобы он правильно импортировался на другой системе
LordMerlin
Если нужны данные и есть на новой машине дырки куда воткнуть, суете в новую диска, импортируете а потом переносите со старого на новый.
LordMerlin
Если дырок нет то по сети zfs send
redexp
он ни куда как файл не экспортрирует. Оно подготавливает пул чтобы он правильно импортировался на другой системе
Спасибо за ответ. Я пытался в системе трунас от существующего пула отцепить и на другой диск импортировать. Не отображалось так.
redexp
Δαρθ
Если нужны данные и есть на новой машине дырки куда воткнуть, суете в новую диска, импортируете а потом переносите со старого на новый.
если сенд и ресив делать локально (на 1 машине) главное запретить дестинейшену монтировать сеты какойто опцией в команде. а то замонтирует туда же и настанет пздц. только ребут
Δαρθ
ваще странно что это нужно явно запрещать, а без запрета ломается все нах
Δαρθ
Y
это в zfs
не понял... куда туда же он замонтирует ?
Δαρθ
не понял... куда туда же он замонтирует ?
в тот же маунтпоинт у меня монтировал
Y
это в zfs
zfs на чем бегает ?
Δαρθ
linux
Y
freebsd
линюкс же
Fedor
на соляре
Y
и тут спрошу - мало ли.... есть у кого идеи зачем нужет (и как работает) PERSISTANT L2ARK в слуачи пустого АРК, то есть при перезагрузке (иначе нафига он "постоянный" нужен? - не постоянный и так всё понятно)