Ivan
пусто, только заголовки. Это первое что попробовал
сорян, не увидел в портянке что ты это посмотрел 😅
Ivan
ssd-pool-1/nfs/data@snap-2022-04-12-000000 org.znapzend:mbuffer_size 1G inherited from ssd-pool-1/nfs/data ssd-pool-1/nfs/data@snap-2022-04-12-000000 org.znapzend:recursive off inherited from ssd-pool-1/nfs/data ssd-pool-1/nfs/data@snap-2022-04-12-000000 org.znapzend:post_znap_cmd off inherited from ssd-pool-1/nfs/data ssd-pool-1/nfs/data@snap-2022-04-12-000000 org.znapzend:pre_znap_cmd off inherited from ssd-pool-1/nfs/data ssd-pool-1/nfs/data@snap-2022-04-12-000000 org.znapzend:mbuffer off inherited from ssd-pool-1/nfs/data ssd-pool-1/nfs/data@snap-2022-04-12-000000 org.znapzend:zend_delay 0 inherited from ssd-pool-1/nfs/data ssd-pool-1/nfs/data@snap-2022-04-12-000000 org.znapzend:enabled on inherited from ssd-pool-1/nfs/data ssd-pool-1/nfs/data@snap-2022-04-12-000000 org.znapzend:tsformat snap-%Y-%m-%d-%H%M%S inherited from ssd-pool-1/nfs/data root@stor-02:~# zpool list -v NAME SIZE ALLOC FREE CKPOINT EXPANDSZ FRAG CAP DEDUP HEALTH ALTROOT ssd-pool-1 27.9T 20.3T 7.67T - - 69% 72% 1.00x ONLINE - raidz2-0 27.9T 20.3T 7.67T - - 69% 72.6% - ONLINE scsi-STOSHIBA_KPM5XVUG3T84_X......... - - - - - - - - ONLINE scsi-STOSHIBA_KPM5XVUG3T84_X......... - - - - - - - - ONLINE scsi-STOSHIBA_KPM5XVUG3T84_Y......... - - - - - - - - ONLINE scsi-STOSHIBA_KPM5XVUG3T84_Y......... - - - - - - - - ONLINE scsi-STOSHIBA_KPM5XVUG3T84_Y......... - - - - - - - - ONLINE scsi-STOSHIBA_KPM5XVUG3T84_Y......... - - - - - - - - ONLINE scsi-STOSHIBA_KPM5XVUG3T84_Z......... - - - - - - - - ONLINE scsi-STOSHIBA_KPM5XVUG3T84_Z......... - - - - - - - - ONLINE подскажите куда копать ?
https://github.com/openzfs/zfs/issues/1810#issuecomment-525862730 мб перемаунт датасета поможет ? zfs какой версии ?
Nikolay
https://github.com/openzfs/zfs/issues/1810#issuecomment-525862730 мб перемаунт датасета поможет ? zfs какой версии ?
root@stor-02:~# cat /sys/module/zfs/version 2.1.2-0york1~20.04 root@stor-02:~# uname -a Linux stor-02 5.4.0-104-generic #118-Ubuntu SMP Wed Mar 2 19:02:41 UTC 2022 x86_64 x86_64 x86_64 GNU/Linux mout попробую, пасиб
Nikolay
zfs version
root@stor-02:~# zfs version zfs-2.1.6-0york1~20.04 zfs-kmod-2.1.2-0york1~20.04
Δαρθ
нехорошо
но для убунтов - в порядке вещей )
Animal
но для убунтов - в порядке вещей )
хз. у мне убунту просто 2.1.6-1 показывает
Animal
а там видать ведро пересобранное я так понимаю
Egor
Добрый день всем Вопрос: есть ли команда для принудительной записи данных из txg на диск? Или как-то можно поймать это событие?
Egor
sync ?
Находил инфу о том, что даже при синхронной записи она на самом деле синхронно пишется в zil
Egor
Кажется нашёл: zpool sync
Maksim
подскажите, пожалуйста: если предстоит собирать zfs на nvme дисках, использование nvme switch карты типа такой https://lenovopress.lenovo.com/lp1288-thinksystem-raid-adapter-and-hba-reference#term=1611 допустимо?
Maksim
производительность не суперважна (ну то есть важна, раз nvme берём, но супернагрузок не будет). скорее просто вопрос в том что raid нельзя, можно hba, а это как-то невнятно обозначено как ни то ни другое
Georg🎞️🎥
А зачем nvme то стесняюсь спросить ?😱
Maksim
надо писать нечасто линейно где-то 2-3ГБ/с
Maksim
скорее 2
Georg🎞️🎥
надо писать нечасто линейно где-то 2-3ГБ/с
Ого, а что за задача такая ? 👋интерестно
Maksim
Ого, а что за задача такая ? 👋интерестно
ах если бы я знал, мне только в общих чертах описывают. оказалось что на самом деле не ленийное, а в много потоков, но каждый поток линейно. там чот типа запускают несколько вычислялок, которые пишут артефакты на диск , и оценивают что в пике будет суммарно 2ГБ/с но обычно меньше. объем - ну типа 20 минут поработало в таком режиме потом дальше идёт это всё
Maksim
если перформанс не важен, то любая hba-подобная плата это ок
а какие есть HBA с nvme и U.2/U.3? нам просто продаван Lenovo что-то впаривает и сам не знает что у них есть
Александр🇷🇺
Я теперь не Вася
ДА ТЫ ШУТИШЬ?!
Georg🎞️🎥
а какие есть HBA с nvme и U.2/U.3? нам просто продаван Lenovo что-то впаривает и сам не знает что у них есть
Не уверен что такие вообще есть 😱могу ошибаться Есть просто адаптеры с чипом чтобы линии делить Есть вроде проф решения с рейдом 🤔 Чтоб hba отдельно под nvme не видел 😱
ウァシーリイ
ДА ТЫ ШУТИШЬ?!
Перепутали, молодой человек
Fedor
Здесь флудить не надо.
Vladislav
а какие есть HBA с nvme и U.2/U.3? нам просто продаван Lenovo что-то впаривает и сам не знает что у них есть
Любые tri-mode рейд контроллеры Любые платы с использованием бифускации
Vladislav
@ruspartisan К примеру: https://srv-trade.ru/catalog/kontrollery/lsi_logic_broadcom_kontrollery/kontroller_broadcom_megaraid_9440_8i_tri_mode_sgl_hba.html
Maksim
Любые tri-mode рейд контроллеры Любые платы с использованием бифускации
вы имеете в виду что вообще любой tri-mode контроллер умеет прикидываться HBA? Нет же? https://lenovopress.lenovo.com/lp1282-thinksystem-raid-940-series-internal-raid-adapters вот такой кажется только raid?
Maksim
Буквально написано в описании
вроде уже много раз говорили что jbod может быть ненастоящим jbod и контроллер всё равно может что-то кэшировать?
Vladislav
Combot
Andrey Zubkov has been banned! Reason: CAS ban.
Fedor
можно снять статистику прочитанного с интервалом в 24 часа
Fedor
zdb -s что скажет?
Fedor
где-то должны быть каунтеры. на солярке я из кстат это вытаскивал
Fedor
может в линуксе есть отражение патаметров из кстат куда нибудь
Fedor
да, а в каких числах? можно скрин?
Fedor
vmstat -d 1
Fedor
из пакета sysstat
Fedor
где-то тут должны быть каунтеры
Fedor
пул должен быть виден в виде отдельного девайса, вроде как. у меня зфс на линуксе нигде нет, но предполагаю, что отражение в отдельный блочник у пула должно быть.
Fedor
не думаю
Fedor
ага, так. а может где-нибудь есть возможность вести хистори через какую-нибудь sar.
Fedor
на всякий случай - у меня зфс очень старая, в новых может быть хистори
Fedor
надо по фичам зфс смотреть
central
А не лучше смотреть на дисках обьем записи?
Fedor
они различаются с записью на пул
central
Зачем вообще эти данные нужны?
Fedor
а на самом деле да - проще мониторинг поставить, он покажет срез на любых интервалах
Fedor
если было локально, и уедет по нфс, если пул на быстрых дисках был, тогда станет медленнее из-за увеличения задержек по сети
central
Че то думаю так влоб не получится оценить
Fedor
можно взять дельту по метрике с окном 24ч
Fedor
delta(metric{}[24h])
Fedor
или как-то так, давно уже для него правил не писал
Fedor
только лучше запрос делать в самом прометее, не в графике
central
Че б ему ругаться если только связь будем дном но это уже про другое
Fedor
если брать одну метрику, например лейтест и выводить в чиселку последнее значение, то он будет проводить вычисление один раз. если график - будет проводить вычисление для всех точек графика
central
Тогда днище не зависимо от объема
Fedor
а какая ему разница, если ты держишь трафик от домашнего оборудования в пределах условий тарифного плана)
Fedor
и оно будет тормозить сильно
Fedor
у нфс оверхед еще процентов 30 чтоль
Fedor
так и так в 1500 байт упрешься мту
Fedor
да
Fedor
задержки в общем возрастут
Fedor
если ро, решается простыми средствами. если рв - то нет
central
Что за файлы?
central
И что с ними делаешь?
central
Это надолго, что за софт или это что то ваше самописное?
Δαρθ
какая самая легковесная и быстрая гостевая фс для размещения в zvol'e? многие скажут что ехт4, но есть ли какие бенчмарки?
Egor
где-то слышал что xfs самая быстрая, но пруфов и бенчмарков у меня нет
Egor
а ещё в ней разделы уменьшать нельзя
Egor
https://www.phoronix.com/news/Linux-5.14-File-Systems
Ivan
https://github.com/openzfs/zfs/releases/tag/zfs-2.1.7