Vladimir
Про параметры так и не ответили. Доступ к мете можно ускорить через xattr=sa , также не помешает atime=off
из параметров - только компрессия включена, всё остальное по-умолчанию
Aleksandr
доклад не хардкорный, но постарался сделать интересно-ознакомительно
очень круто, хотелось бы еще Ваши доклады послушать, поделитесь ссылками если не затруднит
George
очень круто, хотелось бы еще Ваши доклады послушать, поделитесь ссылками если не затруднит
по zfs это пока первый, через пару недель будет видео с похожим выступлением на английском, там около 70% доклада другие
George
в закрепах ещё есть ссылки на мои статьи с хабра, и на запись подкаста о zfs тоже
Georg🎞️🎥
Доброй ночки )) дада я уже писал, но вдруг все же … уже две недели работы с новым объемом памяти, видео монтаж , но ОЗУ он есть очень очень неохотно … Хотя видео файлы жирные, как сумоисты перед соревнованиями … 🤷🏻‍♂️ может так и должно быть ? Или можно как то его «заставить» использовать память более охотно ?👋👋👋
Georg🎞️🎥
@gmelikov очень рассчитываю на ваше мнение , частно говоря 👋👋👋 :))
Fedor
а жирные это сколько?
Georg🎞️🎥
а жирные это сколько?
4-25 -40 гиг в основном Есть по - 1-2
Fedor
вполне может быть так, что обращение к файлам со стороны стораджа однократное. например, они оседают в кеше монтажных станций
Georg🎞️🎥
вполне может быть так, что обращение к файлам со стороны стораджа однократное. например, они оседают в кеше монтажных станций
Да там кэша не напасешься )) Например , один съёмочный день - это 1,5 тера в среднем , там сис. диск - 500гиг)) куда такое кэшировать ))) а эти файлы минимум два раза прогоняем 👋
Georg🎞️🎥
zfs arc min-max-free тюнили как-то?
Вроде у него по умолчанию макс, когда памяти больше 8 или 16
Maksim
что говорят? cat /sys/module/zfs/parameters/zfs_arc_min cat /sys/module/zfs/parameters/zfs_arc_max
Maksim
а, это бсдя?
Georg🎞️🎥
а, это бсдя?
Угу … с гуем для нубов, как я )))
Maksim
кажется так тогда: sysctl vfs.zfs.arc_max vfs.zfs.arc_min
Georg🎞️🎥
что говорят? cat /sys/module/zfs/parameters/zfs_arc_min cat /sys/module/zfs/parameters/zfs_arc_max
Я поищу где эти команды , чтобы глянуть … но вроде по умолчанию нет лимитов , когда памяти норм, он растет все равно потихоньку
Fedor
Вроде у него по умолчанию макс, когда памяти больше 8 или 16
Мне казалось, вроде бы половина, в некоторой степени поделенная между мру и фру
Georg🎞️🎥
кажется так тогда: sysctl vfs.zfs.arc_max vfs.zfs.arc_min
Мин с третего разв вбил 🤣🤣🤣
Fedor
В бсд они могут сидеть в ядре
Fedor
Или в сисцтл или аналоге кстат
Georg🎞️🎥
О, еще оптан на 480 гиг на L2 стоит 🤦‍♂️
Georg🎞️🎥
В бсд они могут сидеть в ядре
Чуть проще пожалуйста )) 🙏🙏🙏
Maksim
вообще подозрительно. кажется что arc_max 180 гигабайт, а на скриншоте уже zfs cache 280 занято
CARA
Здравствуйте пожскажите пожалуйста есть контроллер asr-71605 выбрал HBA мод. В биосе винтов не видно соответсвенно система с них загрузится не может((( Если начать устанавливать с флэшки например проксмокс то видно) Как починить?)Ткните пожалуйста что сделать(((Не гуглится что то такая проблема(((
CARA
в it-mode можно зашить ?
Я думал что это одно и тоже)Только имена разные)
Shaker
Например adaptec вызывает зависания при высоких нагрузках на процах xeon v3v4 и далее новее все остальные. Не умеет новый шедулер для блочных устройств , из-за его нужно руками приставить Grub none, и там еще у нас большой список проблем по нему.
Shaker
Это старое %}вно , для такого-же старого железа , драйвера давно нормально не обновляются , прошивки стали менее стабильные. Ценность железки только в микрограммах полезного металла. Выкидывай прямо сейчас , чтобы не создавать проблем ни себе ни потомкам ;)
Shaker
Для zfs подойдут только hba или прямое подключение через встроенные в mbd не рейд контроллеры.
Shaker
adaptec зверь сложный и сам в себе. Вот, скажем, LSI с HBA-прошивкой - лапочки, никакой специнформации на диски не пишут
Перешитый рейд lsi/broadcom/avago/perc/hpe raid - настоятельно не рекомендую тоже. Но вроде adaptec это самое худшее что может быть. Оно еще и греется как не в себя и тормозит / виснет.
Shaker
Этожопыт подсказывает , что это не всегда так :)
Vladislav
Этожопыт подсказывает , что это не всегда так :)
С LSI подобными это так (Perc это перешитый LSI)
Shaker
Точнее , есть вопросы к «нормально». Но это явно лучше adaptec, в любом случае.
Vladislav
Да, с адаптеком согласен
Алексей
Единогласно
Shaker
С LSI подобными это так (Perc это перешитый LSI)
У нас инстансы zfs сейчас растут как грибы после дождя. Граблей там накидано тоже нормально. Вот как раз perc, внезапно забывает свою прошивку , и говорит «я больше не работаю». Если это еще и perc вставленный в супермикро например , то все еще сложнее.
Shaker
У меня из перков два 730, поэтому это я не смогу комментировать
Но даже на нем такое бывает. Точнее у нас не 730, но суть та-же.
Vladislav
Но даже на нем такое бывает. Точнее у нас не 730, но суть та-же.
Ему немного сложно забыть его прошивку, в основном потому что у него есть отдельный режим hba
Shaker
У dell это типовая история , с h330 по крайней мере. В режиме hba для них это «бывает».
Shaker
Ему немного сложно забыть его прошивку, в основном потому что у него есть отдельный режим hba
Это пример из работы, серьезно. Будет время , пришлю фото. Надеюсь это у тебя никогда не случится :) но вероятность есть , знай это )
Vladislav
Это пример из работы, серьезно. Будет время , пришлю фото. Надеюсь это у тебя никогда не случится :) но вероятность есть , знай это )
У меня уже чуть сложнее уже Perc в режиме рейда у меня теперь под бэкапы, потому что мне нужен был кэш на запись А на старой работе - он крутится, но это меня уже к сожалению не касается
Александр
Перешитый рейд lsi/broadcom/avago/perc/hpe raid - настоятельно не рекомендую тоже. Но вроде adaptec это самое худшее что может быть. Оно еще и греется как не в себя и тормозит / виснет.
Если есть штатная прошивка по HBA - не вижу проблем. Попыткой подобрать нештатную я один экземпляр закирпичил, впрочем, он все равно был старый и ненужный
Evgeny
Добрый вечер
Evgeny
Вопрос по zpool
Evgeny
Есть pool из 4 дисков, собран из 2-х групп по 2 диска в зеркале
Evgeny
Сдох 1 диск, я его поменял. Сделал старый диск detach и новый attach. На команде attach висит уже с полчаса. Так и должно быть?
Evgeny
Диски по 8TB
Alexander
zpool status чо кажет?
Alexander
кстати диски по 8 тб мягко говоря не оптимальный выбор
Alexander
ну сколько он даст на запись? мегабайт 300 в лучшем случае
Evgeny
replace делал, но ресилвер повис на одном месте надолго. Где-то прочел, что можно сделать detach для ускорения процесса. Теперь пул вообще не отзывается и команда attach не завершается уже с час
Alexander
8 часов примерно в идеальном случае
Alexander
на ресинк
Evgeny
Вопрос простой: как долго оно может висеть на attach? Где-то можно посмотреть что там происходит?
Alexander
zpool status
Evgeny
zpool status
На нем тоже висит
Evgeny
pool сильно занят - не обслуживает никого
Vladislav
Вопрос простой: как долго оно может висеть на attach? Где-то можно посмотреть что там происходит?
Учитывая, что у Вас на этапе replace что-то пошло не так - возможно стоило сперва разобраться почему
Evgeny
Полагаю не хватило скилов для этого и как следствие первый рецепт из интернета :))
Georg🎞️🎥
ну сколько он даст на запись? мегабайт 300 в лучшем случае
250 линейно в идеале🤷🏻‍♂️ а если надо много хранить, по 2 тера диски что ли ставить 🤷🏻‍♂️
Alexander
мне кажется такой конфиг вообще не живучий, вылет 1 диска убивает 1/4 объема, если они покупались все у одного вендора то есть риск что масив вообще в тыкву превратится
Alexander
по время ресинка
Alexander
тут или надо как-то с дисками поменьше, либо тип рейда другой
Georg🎞️🎥
Я на 8 собрал … вот на 16 тых что то боязно ))
Alexander
потому что 1 шпиньдель дает крайне низкую производительность по отношению скорости ресика к объему
Alexander
мне вообще кажется что для такого рода хранилок(с малым количеством дисков) лучше просто бекап на другой диск регулярный