ещё идея - может прошивку на винтах попробовать обновить?....

Благодарю 👋👋 Кстати а почему б реально вместо arc большого не использовать большой большой arc2 ? Страйп u2 дисков даст много места и скорости 🤔

потому что л2арк медленнее?

Медленнее памяти да но в разы быстрее блинов же

потому что л2арк медленнее?

Ну вот например тайм линия на исходниках это где то 500-1tb может быть 🤷🏻‍♂️это ж оперативны не напасешься

тогда может сразу фуллфлеш делать и не париться? сейчас 4ТБ ссд миксед лоад доступны

Ну вот например тайм линия на исходниках это где то 500-1tb может быть 🤷🏻‍♂️это ж оперативны не напасешься

Ну вот например тайм линия на исходниках это где то 500-1tb может быть 🤷🏻‍♂️это ж оперативны не напасешься

если данные около 1 раза читаются то смысла мало

В том и прикол - когда цепляют исходники - идет постоянное туда сюда чтение и не один порой рендер

В том и прикол - когда цепляют исходники - идет постоянное туда сюда чтение и не один порой рендер

А нужно, чтобы оно именно в arc/l2arc лежало?

Только массив на две три сотни тер на флэш пока дороговато (((

Я предполагаю, что оно идёт достаточно крупными блоками, в чём и hdd сильны

и верно подмечено, по полосе большой пул быстро растёт в производительности и на блинах

В том и прикол - когда цепляют исходники - идет постоянное туда сюда чтение и не один порой рендер

Хочется чтобы бегало максимально шустро конечно

я с обратной стороны спрошу - часто ли в итоговом рендере видеоряд повторяется?

Покажите zpool iostat в процессе работы

Я на трунасе сижу - там можно это сделать ? И я так понимаю это под нагрузкой надо глянуть ?

Так вы опишите задачу, какой конфиг сейчас, какие проблемы

должно мочь, они же себе на сколько помню во фрю втащили zfsonlinux, не обязательно под нагрузкой zpool iostat собирает статистику с момента загрузки системы

Не скажу что прям проблема ) Разумеется хочется чтобы железо работало на максимум. Пока что вот как: рендер одних и тех же файлов с массива по smb и с локального ssd может отличаться солидно. Хочу добиться максимально возможной скорости чтения с массива , насколько это возможно в текщй конфигурации . 50 блинов в 5 ведев raidz2 200gb оперативки Arc2 убрал Hba 6гигабитный

Для линейных операций хорошо иметь recordsize побольше

1mb стоит 🤷🏻‍♂️

А hba какой ?

А zfs достаточно быстро фрагментируется, случайное чтение блоками по 128к для hdd — не особо удачная нагрузка

Я почему про 8+2 написал На диски 1мб уйдёт как 8+2 записей по 128к

А zfs достаточно быстро фрагментируется, случайное чтение блоками по 128к для hdd — не особо удачная нагрузка

128к для блинов уже близки к последовательному доступу, бОльший блок чем 1М попробовать конечно можно, но обычно он медленнее будет за счёт латенси. Только эффективность хранения повысится

что-то с математикой не то )))

128к для блинов уже близки к последовательному доступу, бОльший блок чем 1М попробовать конечно можно, но обычно он медленнее будет за счёт латенси. Только эффективность хранения повысится

будет интересно чужой опыт с 2М+ блоками послушать, но я пока не видел кейса где они по производительности выигрывают

hdd выдаёт условно 120 iops в случайном доступе и 200+ мегабайт в секунду в последовательном сейчас табличку сварганю

скорее там просто фрагментация маленькая )

не понял почему быстрее

а на пул и мета пишется, и zil и тд

и о какой фрагментации речь? ) ЕМНИП фрагментация в общепринятом смысле и фрагментация в zpool list — это разные вещи

у меня почти везде уже special под мету )

фрагментация свободного места приводит и к фрагментации данных в конечном итоге, если не следить за местом

даже на синтетических тестах на пустом массиве без фрагментации на кейсе раздачи видео для CDN я не получал выигрыша от 2+М блоков, а там тестил как раз последовательную раздачу

ну потому что fio даст цифры как ведет себя zfs и аппаратка, а "восстанавливаю виртуалку полтора часа а на zfs пол часа" а откуда она восстанавливается, в каких условия хз, может там карма и просадка сети идет каждый раз когда крутится аппаратка =)

Чтобы было понимание всей прелести ситуации - это продакшн сервер)) который тупит - вот и разбираюсь. Восстанавливаю ВМ так - чтобы как раз создать максимально одинаковые условия - копирую слепок ВМ на тот же рэйд10 и qmrestore... Слепок весит 50гб. Короче буду ставить какую нибудь машинку вместо этого сервера, всё равно тупит - заберу его - переберу - почищу - потестирую спокойно - Днём, а не ночью 😡 а то похож уже на гребаного вампира 👻🤪

Да Вы сударь мазохист на проде такое делать =) тут встает вопрос а как этот сервак в прод попал то?

на пустом массиве и не будет, надо на «уставшем». и, повторюсь, это должен быть raidz с кучей дисков

по вашей проблеме есть такие мысли https://community.hpe.com/t5/proliant-servers-ml-dl-sl/smart-array-p420i-extremely-slow-writes/td-p/6497596

проверил - с этого начал )) да полюбому разберусь )) если интересно - могу отписаться по результатам)) вскрою сервак - а там окажется какая нить банальщина))

Вариантов тьма, но если что не так, всегда можно откинуться с аппаратки на mdadm или zfs если не жалко от 128 гиг отдать хотя бы 16. Главное что бы работало :)

16 гиг кстати дешёвле аппаратного рейда стоят)

Вариантов тьма, но если что не так, всегда можно откинуться с аппаратки на mdadm или zfs если не жалко от 128 гиг отдать хотя бы 16. Главное что бы работало :)

Это если с нуля покупать, а если рейд уже есть и куплен :) так сказать достался в наследство.

У которого оперативы будет гига 2 или 4

И все равно он будет шустрее zfs, особенно на всяких 5,6 рейдах и их производных.