Станислав
/report
Muhammad Ali
Привет ребята)) Был бы очень рад если найдется чел который бы помог по восстановлению ZFS пула. Был ZFS пул в Truenas Scale, который был виртуалкой vsphere. Пул DataStore1 составил из себя один stripe vdev, который виртуальный диск конечно. Решил расширить размер диска, Расширил через vcenter и в truenas scale сделал expand на пуле, чтоб расширить размер пула на весь диск. После этого диск отвалился от пула. zpool import говорит что пула нет, а zdb говорит что кеша нет.
Vladislav
Больше его никто не видел
Vladislav
/report
Muhammad Ali
zpool history можно глянуть ?
Пусто. Попробовал klennet[com]/zfs-recovery/ вроде нашел все файлы. 20 минут назад оплатил за лицензию чтоб восстановить. Пока лицензия не пришла. Случайно ни кто не знает разработчика? Аж не терпится восстановить по бистрее
Vladislav
win pe стрельца запускали?
Muhammad Ali
нее
Muhammad Ali
а там было это
Muhammad Ali
?
Muhammad Ali
тут стоит рассказать в виде конкретных команд, и что такое "диск отвалился от пула"
даа, правильно сказали. Так как я все делал через веб интерфейс Truenas Scale , там не видно какие ZFS команды он отправляет
Fedor
https://github.com/openzfs/zfs/pull/16330 это войдёт в 2.2.5?
Vladislav
r.saver поддерживает zfs
Muhammad Ali
оба можно натравливать на конкретную директорию, например zpool import -d, стоит в манах попичать
По интересуюсь по этой теме, когда все на место поставлю, когда по спокойнее будет
George
https://github.com/openzfs/zfs/pull/16330 это войдёт в 2.2.5?
тут патч 2.2.5 собирают, можно посмотреть https://github.com/openzfs/zfs/pull/16359/commits
Vladislav
минимум загрузиться с live-cd с zfs и посмотреть что с диском и пулом
Vladislav
даа, правильно сказали. Так как я все делал через веб интерфейс Truenas Scale , там не видно какие ZFS команды он отправляет
Использовать Scale, который является GA, в чём-то важном конечно прикольная идея Но вместо бытия публичным бета тестером, лучше бы Core ставил
Muhammad Ali
Вот теперь буду предлагать начальникам купить Dell PowerScale
Vladislav
Vladislav
Хотя бы базовые рекомендации почитал бы
Vladislav
Вот теперь буду предлагать начальникам купить Dell PowerScale
И интегратора, который его поставит ещё
Vladislav
Muhammad Ali
А что вы рекомендуете использовать как nas и для s3. Аппаратные решении, qnap, synology ...?
Vladislav
Ребутал ВМ после расширения?
Muhammad Ali
да
Muhammad Ali
Что лучше в замен truenas имею ввиду, мне удобно из за того что могу там и SMB шары поднять и minio s3 Видел есть готовые NAS сторажы со своим девайсом/сервером. Хотел бы узнать ваши мнении насчет этих
Vladislav
Synology(mdadm+LVM+BTRFS) & Qnap(ZFS) тебе дадут более красивый ГУИ. Впрочем возможно тебе как раз подобное и нужно
Muhammad Ali
Хорошие бэкапы
Да, это точно
Vladislav
Потом, либо покупать отдельное решение с интегратором, либо разворачивать системы по рекомендациям
Fedor
тут патч 2.2.5 собирают, можно посмотреть https://github.com/openzfs/zfs/pull/16359/commits
https://github.com/openzfs/zfs/issues/16278 ошибка к сожалению не полностью ушла
Dexex
Я ещё самбу шару загнал в active directory smb krb5.
Dexex
Работает замечательно. Просто два массива. Один рабочий, второй - бекап. В целом ок.
Dexex
И не надо никаких железок за 100к голых
Dexex
Две сетевучки в lacp, можно 4 засунуть если не хватит. Цепляется такое хранилище без проблем. Репликация syncoid норм делается. Только интервал надо делать часов 8 хотя бы, а не чтобы оно пушило в процессе работы. Можно кронтабом грамотно настроить и все.
Dexex
Самое главное бекапы быстрые
sexst
Одна проблема: наличие lacp сами бэкапы без ухищрений вообще никак не ускоряет. Тут рулит скорость отдельно взятого единичного линка. Не?
Vladislav
Debian + lacp + nfs. У меня два года работает такая схема. Бекапы обязательно! Репликация. Х2 хранилища сразу в расчет
Я открою ахуенный секрет. TrueNAS имеет встроенный репликатор https://www.truenas.com/docs/scale/scaletutorials/dataprotection/replication/
sexst
Будут потоки раскидываться между линками - уже хоть что то.
Это если будут параллельные потоки и если вам повезёт
sexst
Тут на два "если" больше, чем нужно
sexst
Лучше и проще жирный линк воткнуть. А lag чисто для HA сделать
Dexex
Потоки чего?
Я проверял с ним и без. Если идет какая то операция и параллельно еще задача прилетает - не так все замедляется. А на одном линке сразу на половину падает. Так что вот так. Эффект есть таки
Vladislav
Меня всегда радует "я настроил lacp, обязательно надо" Нахуя настроил ответ обычно "чтобы быстрее было", а потом выясняется, что нихуя не так работает в конфигурации, либо вопрошающего, либо того, кто советует lacp
Dexex
Лучше и проще жирный линк воткнуть. А lag чисто для HA сделать
Что жирный? Ну максимум 1г например и что?
sexst
Что жирный? Ну максимум 1г например и что?
Если вы хотите стабильно и всегда больше 1г, - сделайте 10g
sexst
Или 25g
sexst
lacp - лотерея. Почему - читайте сами
Dexex
Если у тебя канал в 10Г утилизируется на 100% - стоит задуматься о том, что что-то не так спланировано
Я про 10г вообще ничего не писал. В моем случае стоит циска 2960х на гиг по портам и все.
Vladislav
lacp - лотерея. Почему - читайте сами
И пиздец усложняет траблшутинг, особенно если уникум менедж по нему же пускает
Dexex
Если вы хотите стабильно и всегда больше 1г, - сделайте 10g
Смешно. А кто этого не понимает? Если есть оптика - лучше ее воткнуть и нет проблем.
sexst
Ну и у вас может быть будет лучше. А может и не будет. Тут уж как "хэши" заголовков сложатся.
Artem
Или 25g
400 лучше
Vladislav
400 лучше
Мне нравится, что если 25Г (стоимостью на уровне 10Г для не БУ) - то сразу 100\400\800
Artem
Мне нравится, что если 25Г (стоимостью на уровне 10Г для не БУ) - то сразу 100\400\800
Но если начал собирать дурь, становится трудно остановиться. (С)
Artem
Эрм, мы вроде не про хом лабу?
Дай ссылу на недорогой 25г свитч портов на 12, плиз
Vladislav
Дай ссылу на недорогой 25г свитч портов на 12, плиз
??? не про хом лабу Но если очень хочется
Vladislav
Я на 10+40 покупал, ибо 25+100 на момент закупки были сложны (CX4 тогда стоил х2 от текущих цен)