сейчас нет такой возможности.

Adaptec ASR71605

собрать на другом сервере нормально, туда скопировать, потом на этом сервере нормально сделать.

там 16 ЖД

один диск помер. заменили. Массив перестроился. Ну хорошо, что-то там не срослось. Где-то ошибки, но как их поправить? На каких файлах не понятно - там HEX какой-то. показал бы файлы - удалили файлы, восстановили из рез. копии.

ну вы там посчитайте что дешевле. данные потерять или бу сервак купить. на шасии под 16хдд+hba контроллер примерно 50к выйдет.

смотрите, я сейчас не могу рассматривать решения - давайте все поломаем, и создадим по новой. Сейчас если нет возможности поправить ошибки я могу Я могу либо забить, т.к. файло помойка жива, все zvol видны. Дождаться конда кто-то скажет что его файл не открывается - и достать его из рез копии хотя этого может вооще не произойти, там большая файло-помойка. Убить пул на котором ошибки - ну очень не хочу. т.к. потом придётся перераздавать права на шару.

если у вас проблемы на уровне аппаратного рейда - есть реальный шанс что скоро все встанет колом и zfs откажется писать на этот логический диск пометив его как failed, другими словами ваши данные станут недоступны для потребителей.

к этому нет ни каких предпосылок. + есть рез контроллер.

нет, не понимаю, и вы то же этого не знаете. только предположения.

смотрите, я сейчас не могу рассматривать решения - давайте все поломаем, и создадим по новой. Сейчас если нет возможности поправить ошибки я могу Я могу либо забить, т.к. файло помойка жива, все zvol видны. Дождаться конда кто-то скажет что его файл не открывается - и достать его из рез копии хотя этого может вооще не произойти, там большая файло-помойка. Убить пул на котором ошибки - ну очень не хочу. т.к. потом придётся перераздавать права на шару.

zfs trim zvol ?

после - scrub пару раз

но я могу и руками запустить. Я так понимаю, в этом случае если возникнут еще ошибки, надо копать глубже?

Приветствую джентльмены. Необходима консультация. -> Дано: Сервер + JBOD. OS - Proxmox 6.4. Cобрано зеркало из 4-х raidz2. Диски SAS подключены через два бэкплейна 12 гигабит каждый. Собран multipath, т.е. каждый диск для zfs виден как алиас мультипаз устройства с двумя путями. -> Инцидент: Ночью во время интенсивного резервного копирования на пул умирает один диск в одном из raidz2. Утром в почте вижу ошибку - таймаут резервного копирования. Весь пул висит намертво как и процесс резервного копирования. zpool status заявляет "все зашибись" пул бодрячком, но при попытке провалится внутрь каталогов пула по ls - висяк сбрасываемый по Ctrl+C. smartctl говорил что мертвый диск трудно виден по шине, об этом же после relоad заявляет мультипаз. Выводить всю систему оффлайн нельзя, но можно дропнуть пул. С пулом я ничего сделать не смог - ни размонтировать через zfs unmount -f, ни экспортнуть через -f или отправить в оффлайн т.к. к нему пытался обратится процесс резервного копирования. Сам процесс уже в состоянии зомби, kill -9 его не убивает. -> Действия: Т.к. multipath -f ничего не дает ибо диск официально якобы занят в пуле zfs, на горячую вынимаю диск, вставляю резервный. Процесс резервного копирования на пул умер сам. Удалось сделать unmount + export пула, перепрописать новый диск в мультипазе и сделать релоад. Мультпаз увидел диск. После этого делаю импорт пула ... и zpool status заявляет что пул опять же в норме, диск на месте и все ок. Т.е. я не делал replace для диска, zfs просто увидев диск считала что он в норме. Я решил выполнить zpool scrub. Пошел репейр. Новый диск был вообще новый, без фс разделов, таблиц gpt/mbr и всего прочего, просто из запечатанной коробки достал. -> Вопросы: Что я сделал не так, что надо было бы сделать, что может пойти не так, есть ли опасность для пула, делать ли ресилвер, и вообще где я облажался. С zfs работаю давно, но вот в такую ситуацию попал впервые.

нужно jbod на hba менять

в смысле на hba, он через два hba к серверу подключен, все диски с прямым доступом, без рейдов и прочей ерунды.

оке, чет из описания не очень понятно что jbod просто полка, а не тип массива на контроллере.

ага

Изучил я доки. Я так понимаю чтобы засинхронить данные с удалённого хоста строить команду надо вот так? syncoid root@10.0.6.1:HDD/media HDD/media --create-bookmark --no-sync-snap Вроде всё просто), проще чем я думал) ТО есть если я верно прописал команду, то по сути я вот могу эту команду воткнуть в системд службу, сделать службе авторестарт через 60 сек) и всё что ли) Или есть какие-то более подходящие варианты?

а почему снапшоты делать не хочешь ? это ж иногда бывает удобно, когда имеется снап за вчерашний день, например.

вродь как многие репликаторы имеют весьма неплохой меджмент времени жизни снапов по часу,дню,неделе и далее.

Изучил я доки. Я так понимаю чтобы засинхронить данные с удалённого хоста строить команду надо вот так? syncoid root@10.0.6.1:HDD/media HDD/media --create-bookmark --no-sync-snap Вроде всё просто), проще чем я думал) ТО есть если я верно прописал команду, то по сути я вот могу эту команду воткнуть в системд службу, сделать службе авторестарт через 60 сек) и всё что ли) Или есть какие-то более подходящие варианты?

А то страшно запускать))

Просто потесть на пулах из файликов)))

Просто потесть на пулах из файликов)))

о, я кстати на пуле из 2 дисков и 2 файликов переежал со старого рейд1 на зфс раидз2 об 4 дисках )

ох уж эти девопсеры-смузихлёбы, прибежал один, предлагает распространять код для ФС (!) через curl | sudo bash , типа зачем собирать под разные дистры, репы с пакетами это уже не модно и бессмысленно https://github.com/openzfs/zfs/issues/12592

А тут вообще кто-то syncoid юзает?, я корректно составил команду?

если операция не будет грузить фс, то реально можно хоть постоянно выполнять, а снапшоты только усложнят ситуацию

Изучил я доки. Я так понимаю чтобы засинхронить данные с удалённого хоста строить команду надо вот так? syncoid root@10.0.6.1:HDD/media HDD/media --create-bookmark --no-sync-snap Вроде всё просто), проще чем я думал) ТО есть если я верно прописал команду, то по сути я вот могу эту команду воткнуть в системд службу, сделать службе авторестарт через 60 сек) и всё что ли) Или есть какие-то более подходящие варианты?

в том то и дело, что у меня условно будет непрерывная репликация

вот для этого и потребуются снапшоты, смотрите видео с объяснением от автора саноид/синкоида

Нет

Я же проверил уже)

В чем проблема, понимаешь что такое маркер?

про маркер я где-то что-то я упустил?

Почитай про этот аргумент