Ivan
зато какой буст !
George
Делаю sync и снапшот следом
А почему не
FLUSH TABLES WITH READ LOCK;
Специально же для этого, так сказать)
Сергей
Из дополнительного тюнинга: вынесли в память ZFS-разделы с метаданными и логами l2arc и zil.
Ссзб блин
+++, только хотел написать подобное)
Сергей
При том что cache в их случае практически бесполезен на их ссд дисках
George
При том что cache в их случае практически бесполезен на их ссд дисках
ну видно что не глубоко в архитектуру zfs автор ещё вошёл. Видимо на авось собирали рядом с lvm потестить
George
там кучка мифов и выдумок из головы
Сергей
ну видно что не глубоко в архитектуру zfs автор ещё вошёл. Видимо на авось собирали рядом с lvm потестить
)) И зачем то gzip включили, он латенси даёт больше чем lz4, а сжатие не намного лучше.
George
)) И зачем то gzip включили, он латенси даёт больше чем lz4, а сжатие не намного лучше.
одно радует - даже с небольшим погружением и кучкой misconceptions у них успех с zfs)
Сергей
Согласен)
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
Всем привет 🖖🏻
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
Имею Proxmox с парой виртуалок, годик жужжит, не тужит. Ща решил апгрейд сделать, пару винтов поменять. И тут на этот чат попал. Почитал бегло, и вот думаю: может мне zfs то и не нужен, а?) Или мне просто чат с косяками LVM надо найти и почитать?)))
Ivan
lvm проще. а какие косяки в zfs волнуют ?
George
Имею Proxmox с парой виртуалок, годик жужжит, не тужит. Ща решил апгрейд сделать, пару винтов поменять. И тут на этот чат попал. Почитал бегло, и вот думаю: может мне zfs то и не нужен, а?) Или мне просто чат с косяками LVM надо найти и почитать?)))
Ну если по перформансу он вас устраивает, то лучше остаться на zfs
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
А вообще есть задача с нормальной ессшной оперативкой из 5ти таких винтов+ссд под кэш сервервачок собрать
George
Ivan
прокс рекомендует не делать свап на zfs
Fedor
И сами зфс не любят свап даже вне прокса
Fedor
Какие-То там сложности
Gustavo Imputsa
Всем привет 👋
Отдаю по iscsi на проксмос пул из ssd, но прокачать больше 200мбит не выходит. С random iops все вообще очень плохо
Сеть 10гбит, ConnectX-3, все offload что есть включены.
Заметил что load average за 50 (проц 20 потоков Intеl Xеon E5-4610-v3)
Это вопрос не про конкретных конфиг и крутилки, а про то куда копать. На ум приходит только профилирование ядра, но я уверен что должны быть механизмы попроще.
Gustavo Imputsa
George
Всем привет 👋
Отдаю по iscsi на проксмос пул из ssd, но прокачать больше 200мбит не выходит. С random iops все вообще очень плохо
Сеть 10гбит, ConnectX-3, все offload что есть включены.
Заметил что load average за 50 (проц 20 потоков Intеl Xеon E5-4610-v3)
Это вопрос не про конкретных конфиг и крутилки, а про то куда копать. На ум приходит только профилирование ядра, но я уверен что должны быть механизмы попроще.
Отдаёшь пул zfs? Оч много переменных, как пул собран, как утилизированы диски, какой таргет и тд.
Gustavo Imputsa
диски dc500r, пулл miror striped vdevs, занято меньше 50%, хотя вчера пока тестировал там и 75% было, и хуже особо не было
Таргет через веб консоль создавал, дефолтный наверное
Fedor
Мелланоксы это не сетевушки
Fedor
top чего говорит?
Fedor
По интеррупт
Fedor
А телеграф течёт кстати
Fedor
С ним осторожнее
Gustavo Imputsa
Счас дошьется и чекну
Мб в прошивках дело
Сергей
диски dc500r, пулл miror striped vdevs, занято меньше 50%, хотя вчера пока тестировал там и 75% было, и хуже особо не было
Таргет через веб консоль создавал, дефолтный наверное
этот хост занят только под раздачу по iscsi или на нём ещё какая-то нагрузка есть?
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
Vladislav
найдите тут свой диск ls -l /dev/disk/by-id
Vladislav
и покажите вывод zpool import
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
Vladislav
точно диск sdd ?
Vladislav
zdb -l /dev/sdd1
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
Vladislav
на то, что выдает панель - несмотрите
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
Vladislav
zpool import -d /dev/disk/by-id tpool
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
Vladislav
бинго!
Vladislav
zpool import -d /dev/disk/by-id tpool newpool
Vladislav
а стоп
Vladislav
попробуйте так
Vladislav
может быть удасться импортнуть, не трогая активный tpool
Vladislav
стоп все равно
Vladislav
zpool import -d /dev/disk/by-id/ata-WDC-..... tpool newpoolукажите правильно метку раздела диска sdd1
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
Да не даёт)
Vladislav
ls -l /dev/disk/by-id | grep ssd1
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
Надо не по имени, а по циферкам наверное. Делал недавно так
Vladislav
у вас с именем все хорошо
Vladislav
sdd1
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
Vladislav
или
zpool import -d /dev/disk/by-id 244280322... newpoolподставите нужный pool_guid
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
Чота вообще мракобесие какоето
Vladislav
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
wwn.. которая?
Vladislav
и вообще, пользуйтесь разметкой \``` text \```
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
\``` root@pve:~# zpool import -d /dev/disk/by-id ata-WDC_WD40EZRZ-00GXCB0_WD-WCC7K1YR2VVP-part1 newpool
cannot import 'ata-WDC_WD40EZRZ-00GXCB0_WD-WCC7K1YR2VVP-part1': no such pool available \```
Так?)
Vladislav
без слешей
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
root@pve:~# zpool import -d /dev/disk/by-id ata-WDC_WD40EZRZ-00GXCB0_WD-WCC7K1YR2VVP-part1 newpool
cannot import 'ata-WDC_WD40EZRZ-00GXCB0_WD-WCC7K1YR2VVP-part1': no such pool available
Yes&
Vladislav
zpool import -d /dev/disk/by-id/ata-WDC_WD40EZRZ-00GXCB0_WD-WCC7K1YR2VVP-part1 ${pool_guid} newpool
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
root@pve:~# zpool import -d /dev/disk/by-id/ata-WDC_WD40EZRZ-00GXCB0_WD-WCC7K1YR2VVP-part1 2442803225721095774 newpool
cannot import '2442803225721095774': no such pool available
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
Владислав, спасибо. Не стоит больше тратить своё время на это. Пойду лучше обратно в старый серв винты воткну и скачаю что надо
Vladislav
zdb -l /dev/sdd1 | grep pool_guid
Vladislav
должно монтироваться
𝕋𝕒𝕘𝕚𝕣𝔾𝕚
root@pve:~# zdb -l /dev/sdd1 | grep 2442803225721095774
pool_guid: 2442803225721095774
Vladislav
тогда не знаю, почему не импортируется....
Сергей
Сергей
у вашего sdd тот же серийный номер что и у tpool. просто в tpool он указан под именем ata-WDC-....
Vladislav
у вашего sdd тот же серийный номер что и у tpool. просто в tpool он указан под именем ata-WDC-....
насчет одинакового серийного номера пула - это неизвестно.