Дмитрий
Тут уже смотря под какие вам задачи. У меня до 10 пользователей, не вижу никаких ограничений. Зато ECC работает. Серверные решения новые - дорогие, б/у Я не рассматривал) это был МОЙ компромисс)
Ну мне по сути или отдельный комп под немощные и хранилку . И отдельный под автокады и ТД. Или все в 1 сделать, пробросив видюху в проксмос например. Или вм , если железо пойдет.
Дмитрий
И я так понимаю что в плане шума не стоечные серверы тоже не вариант ? Ну кроме микросервера , который ещё и найти надо .
Vladislav
x10 и x11 матери там очень даже прекрасно работают, и возврат работает также как и с Озоном. Не работает - вернул. Проверял на контроллере, который сам же и спалил Но тот факт, что супермикро залочило подключение ISO файлов к html5 kvm за отдельной лицензий это достойно премии
Maksim
а ещё кажется бывают кхм кейгены для этих лицензий?
Vladislav
а ещё кажется бывают кхм кейгены для этих лицензий?
Там rsa4096 ключ для лицензии. Его просто нет :)))))))
Maksim
ну значит тогда мучиться раз в несколько лет когда прижмёт. не первой необходимости вещь обычно, часто ли на серверах систему переставляют?
Fedor
Я про алишные, а не супермикры
Vladislav
Наблюдал веселье с подбором и запуском оперативки на такой материнке, мне этого достаточно)
Учитывая, что я покупаю память по 16ГБ ddr4 2400 за 2.5к на протяжении уже года, и купил 4 матери (и всё работает с самого начала) - Ваши "наблюдения" больше похоже на покупку супермикро за 1000 рублей у продавца с 1* и 0 подписчиков с названием shop192401734
Дмитрий
Вы на Авито покупаете?
Я пока ещё нигде не покупаю , но склоняюсь больше к али, или Авито, если конторы которые бу торгуют. У частников как то стрёмно
Fedor
И я опять же не про супермикро, а про десктопные материнки на ксеонах
Vladislav
Так это ощутимо больше года назад было, когда это барахло там только начало появляться
У меня получается год назад был куплен проц EPYC там и x10 для Xeon v3
Vladislav
*почти год назад, так как я заказывал в конце ноября. С того момента было закуплено ещё 1 x11 для EPYC, ещё два проца EPYC и ещё 3 штуки X10 матерей.
Fedor
Видимо, мы о разном хламе говорим, потому как ни эпик, ни х10 не связаны с тем, что было в начале времён. Дальше - во флуд.
Arseniy
Хм.. а чего это новое вдруг стало дешевле БУ?😱
Нет. Я имел ввиду, что из нового, собрать самому дешевле, чем купить готовое
Сергей
Нет. Я имел ввиду, что из нового, собрать самому дешевле, чем купить готовое
Драматически зависит от 2х факторов 1. сколько стоит ваше время 2. сколько ошибок будет во время сбора
Arseniy
Самостоятельный сбор это всегда новый опыт
Arseniy
ProxMox можно установить на ZFS-root? Не нашел мануалов
Georg🎞️🎥
Самостоятельный сбор это всегда новый опыт
В 90е прикольно было ))) сейчас уже лень с подбором маяться )))
central
RTFM
Arseniy
Можно сделать Z-pool Из двух SSD, один из которых 500Гб, второй 120ГБ, выделив из первого 120Гб? Оставшееся место под приложения отдать
Arseniy
В L2ARC можно отдать не весь диск целиком, а только часть?
Станислав
Поставил, покрутил, не взлетело, поставил Root на Ext4, подтянул zfs, понял, что почему-то в /lib/modules/4.19.0-21-amd64/ zfs.ko не встал. Собрал еще раз именно туда apt install zfs-dkms и зажило. Наверное, если теперь опять пойти с начала по тому мануалу и проследить установку модуля, будет ок, но я в ЭТО больше не пойду
Я тоже пробовал по ману и также не вышло запустить. Притом знаю, что импорт проходил, но доступ в ОС не было и логов тоже. К сожалению, это сервер на хетцнер и экран с легкой руки не посмотришь) Пробовал по ману потому, что хотел по нему попробовать. Но это та ещё головная боль. Как оказалось, ещё есть баг в grub (в п.6 написал) Есть гораздо более простое и элегантное решение, выкрутился даже на Digital Ocean, где ОС установлена на голом ext4. 1) Устанавливаем ОС на lvm, оставив немного свободного места (PE Free, кажется) для снапшота lvm. 2) Устанавливаем в ОС всё, что нужно для ZFS 3) Создаем ZFS пул (ы) на каком-нибудь носителе, создаем датасеты как нравится (можно по инструкции в статье). 4) Создаем снимок в lvm, монтируем, rsync'ом переносим всё в корень ZFS 5) chroot в ZFS, update-initramfs и update-grub 6) Так как граб некорректно прописывает имя пулов ZFS, нужно ручками пофиксить в /boot/grub/grub.cfg 7) Ещё нужно установить загрузчик на диск с ZFS. Это инструкция для общего понимания, что из себя представляет установка, т.е. перенос уже рабочей ОС в пул. Может что-то упустил.
LordMerlin
А можно проще. Просто поставить Проксмокс))
Александр
Я тоже пробовал по ману и также не вышло запустить. Притом знаю, что импорт проходил, но доступ в ОС не было и логов тоже. К сожалению, это сервер на хетцнер и экран с легкой руки не посмотришь) Пробовал по ману потому, что хотел по нему попробовать. Но это та ещё головная боль. Как оказалось, ещё есть баг в grub (в п.6 написал) Есть гораздо более простое и элегантное решение, выкрутился даже на Digital Ocean, где ОС установлена на голом ext4. 1) Устанавливаем ОС на lvm, оставив немного свободного места (PE Free, кажется) для снапшота lvm. 2) Устанавливаем в ОС всё, что нужно для ZFS 3) Создаем ZFS пул (ы) на каком-нибудь носителе, создаем датасеты как нравится (можно по инструкции в статье). 4) Создаем снимок в lvm, монтируем, rsync'ом переносим всё в корень ZFS 5) chroot в ZFS, update-initramfs и update-grub 6) Так как граб некорректно прописывает имя пулов ZFS, нужно ручками пофиксить в /boot/grub/grub.cfg 7) Ещё нужно установить загрузчик на диск с ZFS. Это инструкция для общего понимания, что из себя представляет установка, т.е. перенос уже рабочей ОС в пул. Может что-то упустил.
Интересный вариант на потрахаться
Alexander
про zfs вопросы можно ли добавлять диски в zfs уровня RAIDZ ? можно ли менять по живому RAIDZ на RAIDZ2 ? хочу сделать массив из 4 дисков потом нарастить до 6-8 команды читал: знаю что добавить диск можно, но вот нюансы работы именно с RAIDZ пока не ясны
Maksim
Если я правильно понимаю, можете добавить только во второй vdev
Alexander
2-нет
то есть надо будет пересобирать с переносом данных? а что насчет 1 ?
Сергей
то есть надо будет пересобирать с переносом данных? а что насчет 1 ?
да. ответ выше. только еще один вдев. в существующий нельзя добавлять
Сергей
Если я правильно понимаю, можете добавить только во второй vdev
а еще в такой конфиге, если первый вдев будет заполнен, то никакого ребаланса не будет. данные будут не равномерно по пулу размазаны. и итак тормозной raidz будет еще больше боли причинять
Alexander
да. ответ выше. только еще один вдев. в существующий нельзя добавлять
ух. если подскажете что значит vdev буду признателен. пока только разобрался, что raidz это тип защиты массива с потерей емкости одного диска
Сергей
ух. если подскажете что значит vdev буду признателен. пока только разобрался, что raidz это тип защиты массива с потерей емкости одного диска
берете 4 диска. делаете из них пул raidz. потом покупаете еще 4 диска. и подключаете к пулу еще один raidz. пуле увеличивается на объем второго raidz
Сергей
получается в одном пуле два разных raidz
Egor
всем доброго дня Столкнулся с проблемой: после падения питания на корневом пуле повредилось 590 файлов + syslog спамит об аппаратных ошибках на системном SSD. zpool status -x говорит что надо восстанавливать файлы из бэкапа или полностью пул. Я так понимаю что свойство copies=2 (или 3) могло бы спасти от повреждения файлов, но копии же не создадутся после задания свойства? Нужно поменять каждый блок чтобы свойство применилось к ним. Каким образом можно применить это свойство и проконтролировать что копии действительно выполнены?
Vladislav
#norton_undelete https://www.reddit.com/r/zfs/comments/ysfd3a/today_i_have_written_zfsundelete_a_filerestore/
Vladislav
да. ответ выше. только еще один вдев. в существующий нельзя добавлять
Можно ведь, эту фичу добавили некоторое время назад https://freebsdfoundation.org/blog/raid-z-expansion-feature-for-zfs/
Юрий
Всем привет. Подскажите пожалуйста варианты PCI-E контроллеров на 6 портов SATA для домашнего сервачка. Сейчас остановился на ASM1166, интересует какие ещё варианты стоит рассматривать
Юрий
Вы проверили, что вставив такой контроллер, не откусить парочку имеющихся sata портов на материнке?
Не очень понял вопрос… Совмещённые порты бывают только на M.2 вроде, нет?
Egor
а в пуле нет избыточности?
нет, это корневой "страйп" из 1 SSD
Владимир
Владимир
лучше всего наличие избыточности
Egor
да это понятно, но 2-3 копии всех файлов тоже могут помочь, и вот вопрос как это реализовать на zroot и всех дочерних датасетах после установки ОС?
Владимир
иначе говоря совершить перезапись всего
Egor
zfs по-моему не хватает команды "применить свойство", чтобы не было ручных действий
Владимир
Владимир
так что хватает
Владимир
естественно что то что уже записано останется как есть
Сергей
Всем привет. Подскажите пожалуйста варианты PCI-E контроллеров на 6 портов SATA для домашнего сервачка. Сейчас остановился на ASM1166, интересует какие ещё варианты стоит рассматривать
нормальный Hba контроллер. у этих всех китайских поделок скорее всего никакая скорость. у меня валяется такой, там скорость на все про все гигабит
Vladislav
хе. в опензфс вроде нет еще такого
https://www.reddit.com/r/programming/comments/snyyrg/raidz_expansion_feature_for_zfs_goes_live/
Vladislav
В смысле нет
Окей, да, пул реквест ещё не в мастере
Сергей
Типа 9210-i8? Какие ещё варианты стоит рассмотреть?
да любой серверный hba контроллер. на авито килограммы их. на 8 дисков в районе 3-4.5 будет стоить. можно сразу в хламаде на 16 за 7.5 купить
Сергей
ну и 8087-sata(sas) надо будет на этом же авито, либо на алике
Юрий
Спасибо, пойду читать
Egor
свойство будет работать на следующие операции записи
в таком случае ещё вопрос: если я отправлю zroot с помощью zfs send -R по ssh на диск на другой физической машине, свойство copies=3 применится на удалённой стороне? (разумеется на источнике оно выставлено на момент отправки)
George
https://www.reddit.com/r/programming/comments/snyyrg/raidz_expansion_feature_for_zfs_goes_live/
в мастер ещё не влито https://github.com/openzfs/zfs/pull/12225