Oleh
отвечай на вопрос
Я тебе уже обо всём рассказал. Ты глупый.
blkmrkt
если взять неограниченное количество помойных ssd и непрерывно менять те которые дохнут, то оно наверное будет работать
blkmrkt
а с NVMe/PCIe дисками софтвер раид можно создать?
Oleh
но опять таки: дороговато
Oleh
у тебя ава прикольная)
blkmrkt
вот такой хочу
а сколько kWh такой потребляет примерно, полностью забитый дисками?
Oleh
что-то попроще спроси. в любом случае не больше мощьности блока питания.
Oleh
угу, только отзеркалю сначала на новый диск все
на всякий случай может пригодится после зеркалирования данных: http://www.linuxjournal.com/article/8874
Viktor
часто можно помигать индикатором корзины напрямую, большая часть контроллеров это умеет
Viktor
смотрите опцию в cli
Viktor
zfs из разных дисков можно, но не нужно, много граблей
Viktor
нужны жирные и взрослые SSD под ZIL
Alexander 🐕
Обоснуй
Viktor
много IO при активной нагрузке, если будет тупить - тупить будет все
Viktor
мы ж про назгрузку говорим или чтобы было?
Viktor
на бюджетных SSD просто быстро сожрет ресурс по записи
Alexander 🐕
Тезис первый: в ZIL вообще попадает только то, что пишется на разделы с включенным sync
Viktor
если храним мало и денег много и очень крепкие яйца можно положить zil в рам
Alexander 🐕
Тезис второй: ZIL не должен быть более, чем размер потока секунд за 10 - смысла нет
Alexander 🐕
Так что жирные SSD не нужны
blkmrkt
мы ж про назгрузку говорим или чтобы было?
угу, каждый ssd наверное раз в неделю перезаписывается, процентов 20 данных меняется каждые сутки, и дофига рандомных ридов и записей
Alexander 🐕
Также можно поставить на разделах sync=disabled
Alexander 🐕
Но элиминирует ли это запись в ZIL полностью я не знаю, не буду врать
Viktor
Так что жирные SSD не нужны
это под какой нагрузкой? вы так сразу шашкой рубите
Alexander 🐕
Надо смотреть стенд собирать
Viktor
откуда цифра в 10 секунд?
Alexander 🐕
это под какой нагрузкой? вы так сразу шашкой рубите
Штатно в соляре fsync наступает раз в 5 секунд
Alexander 🐕
В линуксе - раз в сколько секунд, кто знает?
Alexander 🐕
Нууу, не стесняйтесь?
Viktor
как настроить
Alexander 🐕
Штатно
Alexander 🐕
Штатно - как настроено?
Alexander 🐕
Сука, тонкие тюнеры одни в чате
blkmrkt
fsync это же системный вызов, который дергает юзерское ПО
Alexander 🐕
Все ясно, спасибо
blkmrkt
вот я в прошлый раз постгрес захерил, fsync был отключен)
Alexander 🐕
Если вы не делаете fsync руками, ядро сбрасывает буфера принудительно
Alexander 🐕
Вопрос - как часто
Viktor
fsync это же системный вызов, который дергает юзерское ПО
система еще сама его дергает периодически
Alexander 🐕
Ответ очень простой - раз в 30 секунд
Alexander 🐕
Но, ZoL делает сброс ARC раз все в те же 5 секунд
blkmrkt
а если хардвар раид с кешем 512мб например и батарейкой, и если в буфере меньше 512мб, то fsync возвращает моментально*
blkmrkt
?
Alexander 🐕
Так как ZoL не имеет отношения к стандартному файловому кэшу линукс
Alexander 🐕
Да, так и вот
Alexander 🐕
Получается, что между вызовами принудительного fsync в ZFS проходит 5 секунд
Alexander 🐕
Рекомендации по размеру ZIL звучат как "чтобы на пару раз от барьера до барьера хватило"
Alexander 🐕
То есть - 2*5
Alexander 🐕
А далее надо смотреть поток
Alexander 🐕
И помнить, что в ZIL попадает не все
Viktor
L2arc куда?
Alexander 🐕
L2ARC куда что?
Alexander 🐕
L2ARC это кэш на чтение
Viktor
на чем хранить будем
Viktor
у вас zfs на проде есть?
Viktor
как оно?
Alexander 🐕
Есть
Alexander 🐕
Нормально
Viktor
у нас дальше стендов не пошло
Alexander 🐕
Ну - а вы что с ним пытались делать?
Alexander 🐕
На каком железе?
Viktor
Нормально
сколько IO выжимает?
Alexander 🐕
сколько IO выжимает?
У меня где-то были отчеты fio, но я тестировал два года назад
Alexander 🐕
И все забыл
Alexander 🐕
Нам хватает с запасом
Viktor
sas 10K как освновное хранилище, разные ssd под zil и l2arc
Viktor
мы ходели его как сторадж для виртуалок
Alexander 🐕
Ну - у нас он так и используется
Viktor
но с масштабированием без даунтайма не получилось
Viktor
не смогли в это
Alexander 🐕
И знаю еще несколько мест, где он так же используется или использовался
Viktor
закончилось все брендовым SAN
Viktor
с недорогими SSD с записью начинались проблемы, с дорогими этот огород в малых масштабах не имел смысла
Viktor
у нас цель была 20ТБ в максимальной емкости при 5К iops