Georg🎞️🎥
Друзья! Дайте пару дельных советов, кто с опытом.
На данный момент имеется 2 сервера:
1) На Xeon 2696v3 с Debian 11 (скоро апну до 12), ZFS зеркало на 2х Samsung PM883 2Тб, ОП 128Гб. Тут крутиться терминальный сервер в ВМ (не нужно говорить, что странная смесь), люди работает на нём с 1С. Сама БД 1с находится в посгре в соседнем контейнере.
2) Планируется вынести контейнер с посгре на более производительный сервер с ASRock WC621D8A-2T (2 RJ45 10GbE Intel X550-AT2) , Xeon Platinum 8275CL, Debian 12, ZFS зеркало 2х PM1725b 1.6Тб, ОП 512Гб.
Собственно, вопрос:
1. Какую лучше 10Гб сетевуху поставить в первый сервак? А может и во втором следует?
2. На первом сервере планируется добавить 2 HDD, думаю по 8Тб, под зеркало на ZFS, чтобы синхронизировать на них видео с 3х видеорегистраторов. Какие диски посоветуете?
Vladislav
Друзья! Дайте пару дельных советов, кто с опытом.
На данный момент имеется 2 сервера:
1) На Xeon 2696v3 с Debian 11 (скоро апну до 12), ZFS зеркало на 2х Samsung PM883 2Тб, ОП 128Гб. Тут крутиться терминальный сервер в ВМ (не нужно говорить, что странная смесь), люди работает на нём с 1С. Сама БД 1с находится в посгре в соседнем контейнере.
2) Планируется вынести контейнер с посгре на более производительный сервер с ASRock WC621D8A-2T (2 RJ45 10GbE Intel X550-AT2) , Xeon Platinum 8275CL, Debian 12, ZFS зеркало 2х PM1725b 1.6Тб, ОП 512Гб.
Собственно, вопрос:
1. Какую лучше 10Гб сетевуху поставить в первый сервак? А может и во втором следует?
2. На первом сервере планируется добавить 2 HDD, думаю по 8Тб, под зеркало на ZFS, чтобы синхронизировать на них видео с 3х видеорегистраторов. Какие диски посоветуете?
Mellanox Connectx-4 если не хотите приколов с интелом и броадкомом
Vladislav
Если хотите багов в прошивках то броадком, если хотите наличие мистических проблем - интел
Vladislav
Имхо: Ну а если Вам нужны медные 10Г - то Вам стоит пересмотреть архитектуру решения
Uncel
Vladislav
А че там
У броадкома у меня была три бага:
1) карта умерла после установки ОС и перезапуска
2) непонятные проблемы с задержкой и vsan
3) отказывался собираться lacp в винде, он просто мгновенно разбирался и карточка умирала из системы (прошивка последняя была)
Uncel
А штеуд?
Fedor
Броадком это недосетевушки
Uncel
P2000 линейка
Fedor
у меня с броадкомами под брендом hp проблем не было
Fedor
речь 10ках
Δαρθ
Станислав
Δαρθ
там есть 2 меди -- одна вместо оптики 1 дифпара, очень недлинная, 2ая это 10gbase-t с дикой летенси в миллисекунды
Vladislav
Самое неприятное в них для меня было
А) нагрев
Б) стоимость медных трансиверов
В) необходимость cat6&7, для длины больше 20см-30см
Поэтому и ИМХО, потому что очень зависит от того, где планируется их использовать, но даки и оптика обойдутся дешевле, холоднее и длиннее
Ну и 25Г в мелланоксах неплохой залог на будущее,а цена как у 10Г
Станислав
Самое неприятное в них для меня было
А) нагрев
Б) стоимость медных трансиверов
В) необходимость cat6&7, для длины больше 20см-30см
Поэтому и ИМХО, потому что очень зависит от того, где планируется их использовать, но даки и оптика обойдутся дешевле, холоднее и длиннее
Ну и 25Г в мелланоксах неплохой залог на будущее,а цена как у 10Г
Скорее всего сервера удастся поставить рядом, но это не точно, так что спасибо за инфу про длину проводов.
Просто в новом серваке, в матери, уже есть порты под медные 10Г, потому хотелось бы использовать их, если не будет значительный ущерб.
Про летенси и раньше слышал, но сам не щупал и как скажется на обмене с БД 1с даже предположить не могу
Vladislav
Может кто-то скажет, что у него и на 10м кат5 было ок, но у меня был только опыт на 30см проводах (коммутатор был портами на жопе и поэтому соединили максимально короткими)
Vladislav
С интелом веселье былом точки зрения скорости, сперва один порт работал только в 1Г, т.е. один порт 10Г, второй только в 1Г
А в какой-то момент проблема ушла сама собой, поэтому и мистика
Vladislav
Ну а на современных интелах с ESXi просто полно проблем с драйверами
Fedor
интелы 100ки в целом ничего
на уровне 5 мелланокса
это если абстрагироваться от zfs
Uncel
Uncel
есть E810-2CQDA2 где будет почти все норм, кроме того что нужно настроить бифуркацию
Uncel
два чипа на доске у каждого x8
Еvgeniy
всем привет
жил был TrusNAS на виртуалке ESXi, три диска железные в него прокинуты, собран массив zfs raid из трех дисков
по незнанию было добавлено два диска dedup, которые не в зеркале и которые удалить нельзя )
решил пересобрать, от виртуалки не мог отцепить эти диски, мешали снапшоты виртуалки, которые удалить не дает ESXI
в итоге снапшоты удалены неправильно, трунас не стартует
собираю массив в новой убунте, прокинул туда три железных диска и два виртуальных dedup, все онлайн, но массив поврежден, не собирается ни с -f, ни с -F, ни с -m если один из дисков убрать временно
ни с -f -F -m -X не собирается )
если вдруг кто сможет помочь, буду благодарен
Еvgeniy
Еvgeniy
Vladislav
Vladislav
Это
Vladislav
Не называется
Vladislav
Прокинуты 3 железных диска
Еvgeniy
три железных диска прокинуты внутрь виртуалки через RDM
внутри они вядится как эти железные диски, SMART, температура и т.п.
да, могу сказать что прокинуты внутрь.
Vladislav
Vladislav
всем привет
жил был TrusNAS на виртуалке ESXi, три диска железные в него прокинуты, собран массив zfs raid из трех дисков
по незнанию было добавлено два диска dedup, которые не в зеркале и которые удалить нельзя )
решил пересобрать, от виртуалки не мог отцепить эти диски, мешали снапшоты виртуалки, которые удалить не дает ESXI
в итоге снапшоты удалены неправильно, трунас не стартует
собираю массив в новой убунте, прокинул туда три железных диска и два виртуальных dedup, все онлайн, но массив поврежден, не собирается ни с -f, ни с -F, ни с -m если один из дисков убрать временно
ни с -f -F -m -X не собирается )
если вдруг кто сможет помочь, буду благодарен
Как?
Еvgeniy
Еvgeniy
Как?
там было пару файлов снапшотов, vms по-моему, вот эти два файла не перемещены для проверки, а удалены
Vladislav
Еvgeniy
Еvgeniy
Vladislav
Еvgeniy
это не вопрос обсуждения
Vladislav
Еvgeniy
Еvgeniy
это я пытался импортировать с разными параметрами
Еvgeniy
Еvgeniy
Vladislav
Последнюю строчку из zpool events
Еvgeniy
Еvgeniy
ничего нового после этой попытки импорта не написалось в events
Vladislav
Еvgeniy
диски не отцеплялись, что-то мешало ему, esxi
Vladislav
Еvgeniy
ладно, это всё былое, радиус кривизны моих рук сейчас не обсуждаем )
Еvgeniy
Vladislav
Нет, это как раз связано, у тебя либо похерились данные на дисках, либо ZFS свято уверен, что у тебя отсутствует кусок данных
Vladislav
Покажи последние строчки dmesg
Vladislav
И если у тебя не отцеплялись диски от ВМ - значит их что-то держало, как раз чтобы не убить данные на них
Еvgeniy
Еvgeniy
Еvgeniy
Vladislav
Я даже не буду пытаться рассмотреть
Vladislav
Я попросил
Vladislav
последние строки
Vladislav
А не всю выгрузку в скриншотах
Еvgeniy
Vladislav
Vladislav
Тогда продолжим диалог
Vladislav
И ты всё ещё не ответил как диски подключены к ESXi
Еvgeniy
Еvgeniy
в материнку
Еvgeniy
Vladislav
может уже посмотришь dmesg и найдёшь там выделенные красным сообщения?
Еvgeniy
после ребута было только одно красное
Еvgeniy
Еvgeniy
по одному диску буду отключать и пробовать
zpool import zfs -f -F -m -X
Vladislav
Тебя не напрагяет, что у тебя дедуп диски это виртуальные диски, да?