@ru_zfs - страница 220 - Telegram web archive

--execd, -e Run in daemon mode compatible with telegraf`s execd plugin. In this mode, the pools are sampled every time there is a [return] on stdin. Once a sample printed, zpool_influxdb waits for another [return]. When run on a terminal, use [ctrl+C] to exit.

nikolay

вообще не припомню чтобы была явная возможность это посмотреть легко, на памяти только дебаггерами вешаться на нужные места. пороги буферов можно понять по размеру txg, таймаут - по времени в общем то

а описание события инициирующего генерацию txg только в коде искать?

George

а описание события инициирующего генерацию txg только в коде искать?

доки и презентации есть разные, под рукой нет которую порекомендую, либо конечно код

Vladislav

https://shirosaidev.github.io/diskover/ а есть что-то подобное опенсорсное и self-hosted ?

Qwerty

https://shirosaidev.github.io/diskover/ а есть что-то подобное опенсорсное и self-hosted ?

https://github.com/dadoonet/fscrawler не подойдёт?

Vladislav

Посмотрю

Qwerty

https://shirosaidev.github.io/diskover/ а есть что-то подобное опенсорсное и self-hosted ?

А разве оно не self hosted с апачевской лицензией?

Vladislav

Там есть ограничения для коммерческого использования

Qwerty

Там есть ограничения для коммерческого использования

Скорее другое, в коммерческой версии есть фичи, которые вам нужны. А коммьюнити версию можно использовать в коммерческих целях

NikolayS

Ещё раз прошу, может всё-таки кто-то знает рецепт: Как выяснить для конкретного процесса, сколько он прочитал с диска, а сколько по-hit-ил блоков в ARC?

Fedor

Может, через dtrace можно увидеть

Dmitry

Может, через dtrace можно увидеть

в линуксе он сильно меньше может:( может есть какой-то порт конечно но я пока не нашел

Mikhail

в линуксе он сильно меньше может:( может есть какой-то порт конечно но я пока не нашел

eBPF / bpftrace?

Dmitry

да тоже его мучал, но так и не удалось его нормально заставить работать для zfs на ubuntu, чего-то не хватает но чего не могу пока понять: Failed to load BPF program b'trace_read_return': Invalid argument

Fedor

Может, неверно параметры подобрал, в структуре какой-нибудь ошибся ( предполагаю - так как знаком только с дтрейс)

Speedy

Доброе утро, уважаемые коллеги, подскажите пожалуйста насколько минимально необходим RaidZ2 vs RaidZ ? SSD pci X (серверный самсунг) целевая модель использования: горячие данные (много субд postgres) master / slave n+1 дополнительно raw VAL на CEPH льем .

Dmitry

господа, может кто подскажет почему zfsslower-bpfcc может не показывать операции read и write а только Open и Sync? какие-то настройки модуля или ядра?

d

Доброе утро, уважаемые коллеги, подскажите пожалуйста насколько минимально необходим RaidZ2 vs RaidZ ? SSD pci X (серверный самсунг) целевая модель использования: горячие данные (много субд postgres) master / slave n+1 дополнительно raw VAL на CEPH льем .

Зависит от объема

Speedy

Зависит от объема

ну сейчас диски по 3,2 ТБ по схеме 3+1 с пространством 9ГБ

d

ну сейчас диски по 3,2 ТБ по схеме 3+1 с пространством 9ГБ

Извини, я перепутал

d

RaidZ это (почти) raid5 - ненужен вообще обычно RaidZ2 это raid6 - минималка для небольших объёмов

d

You can go further and try RAID-Z3, which has a maximum of at least five disks and the ability to survive damage to up to three disks. RAID-Z3 is rarely used due to its size. It is also not as space-efficient as other RAID-Z options.

Speedy

RaidZ это (почти) raid5 - ненужен вообще обычно RaidZ2 это raid6 - минималка для небольших объёмов

а что вы называете небольшими обьемами ?

d

а что вы называете небольшими обьемами ?

единицы терабайт

d

z3 требует много дисков физических

d

я диванный если что, только описание читал

Speedy

z3 требует много дисков физических

ну это условно схема N + n хочу понять насколько хуже N + (n-2), где N > 3

d

ну это условно схема N + n хочу понять насколько хуже N + (n-2), где N > 3

Где-то была удобная таблица для выбора

d

не нашёл сходу

Aleksei

ну сейчас диски по 3,2 ТБ по схеме 3+1 с пространством 9ГБ

А есть для этих SSD сведения о bit error rate?

Aleksei

и вдогонку второй вопрос: а какой объём данных по внутренним счётчиками в течении года пробегает через каждый диск?

Aleksei

заранее скажу, что точного ответа я не знаю, но могу предложить такой подход для оценки: - в случае raidz нам будет нужно прочитать трёхкратный объём данных для восстановления (для случая 3+1 диск) - добавить к нему для оценки предполагаемый усреднённый объём уже прочитанных данных (т.к. я думаю, что износ может влиять на вероятность ошибочного чтения) - сравнить эту величину с показателем BER и оценить насколько вероятно, что при восстановлении данных произойдёт ошибка чтения и данные будут потеряны

Aleksei

а дальше уже думать, что будет дешевле: ещё несколько дисков и какой проигрыш в производительности на raidz2

d

а дальше уже думать, что будет дешевле: ещё несколько дисков и какой проигрыш в производительности на raidz2

а откуда проигрыш будет?

Speedy

А есть для этих SSD сведения о bit error rate?

диск 1735 samsung (ссылка умерла к сожалению) по заявлению самсунга - там сами диски по себе организованы очень хорошо, и умирает чаще контроллер, чем память.

Speedy

и вдогонку второй вопрос: а какой объём данных по внутренним счётчиками в течении года пробегает через каждый диск?

так как с ZFS ниразу не работали (это первая попытка сделать хорошо и и правильно), то не очень понимаю как там считается этот самый обьем.

Aleksei

а откуда проигрыш будет?

а разве raidz2 не имеет penalty по сравнению с raidz1?

Speedy

а разве raidz2 не имеет penalty по сравнению с raidz1?

нет, он имеет производительность исключительно в рамках основного массива дисков N

Speedy

а разве raidz2 не имеет penalty по сравнению с raidz1?

(судя по нашим тестам - больше ядер и памяти надо)