Mark ☢️
да и зачем
Александр
Можно же заменить /dev/sda
Александр
Я спрашиваю, именно про сеть
Александр
Интересно
Александр
Сильно упадёт или не упадет
Denis
не тот какнал оказывается.
Anonymous
у ceph cluster network в двух разных фабриках сделать никак не получится?
J
у ceph cluster network в двух разных фабриках сделать никак не получится?
Фабриках? Поподробнее бы.
Anonymous
м. я в том смысле как в FC например. полностью отделенные друг от друга сетевые сегменты.
J
Так FC или не FC?
Задача какая полностью если?
Anonymous
по 2 сетевух в кластер сети на хосте + 2 не связанных коммутатора например
J
А.
J
Ну, маршрутизацию динамическую использовать можно.
Anonymous
задача - обеспечение непрерывной доступности. чтобы криво настроенный stp при схождении не положил весь storage.
J
Я так делаю.
J
Типа два бродкаст домена, две ip сети линковых, а кластерная сеть - на пустых бриджах или ovs internal интерфейсах или чем там еще.
Соответсно, OSPF используется для сигнализации доступности северов через обе сети отдавая /32 маршруты к адресам из кластерной сети.
J
Получается, на каждом сервере OSPF работает и рассказывает в две разных сети что его кластерный адрес через них доступен.
Anonymous
идею понял. но честно говоря не нравится оно мне
J
Почему?
stp в ядре сети норм, а OSPF - Нет?)
Anonymous
тем что все-равно получается единая точка отказа
J
Какая?
Anonymous
OSPF
J
Чот не понял.
Anonymous
я пока сам до конца не понял 😊
Anonymous
нужно подумать. идея интересная. нужно ее обмозговать. поискать грабли.
Anonymous
раньше что FC что ISCSI резервировал именно двумя "фабриками". но там есть мультипатч и подобных проблем не возникает.
Anonymous
Anonymous
типа такого.
J
Ну тут ничо не скажу.
С энтерпрайзным ни с чем вообще никогда не работал, а уж про FC только в бабкиных сказках слышал.
Anonymous
да там сам принцип - организации двух полностью независимых каналов. в случае необходимости работ - над одной из фабрик можно издеваться как угодно - она принципиально не может повлиять на вторую.
Александр
Нахуя, если можно сделать bond из двух разных интерфейсов типа, active-passive и отправить это можно на 2 разных свича-хуича
Александр
чО т странное решение придумываете пустые интерфейсы и т.д.
Александр
Доступность будет если даже один из свичей вырубится
J
Нахуя, если можно сделать bond из двух разных интерфейсов типа, active-passive и отправить это можно на 2 разных свича-хуича
А. Ну потому что у меня одна сетевушка это Infiniband, а другая 10GE.
Anonymous
bond если не ошибаюсь требует одного бродкаст домена
Sergei
Доступность будет если даже один из свичей вырубится
это требует плоского общего L2 между твоими свитчами, что не всегда норм
Александр
это требует плоского общего L2 между твоими свитчами, что не всегда норм
Ну да, свои минусы тут есть,.. огроменные)
J
К тому же, поверх OSPF можно натянуть уже и Traffic Engineering, если захочется упооться совсем)
Sergei
Евгений
cluster network = 1.3.4.0/24, 5.6.7.0/24, не?
J
упарываюсь таким довольно давно, брат жив, никакой зависимости
Тогда если соберусь делать, поможешь советом чутка, коль понадобится?
Sergei
Тогда если соберусь делать, поможешь советом чутка, коль понадобится?
если ты про сборку относительно автоматических сетей с OSPF/BGP на хостах - то мб
J
Я именно про Traffic Engineering.
J
Ну короче, коротко если резюмировать, то если выбирать между L2 и L3, я бы выбирал L3. Меньше шансов нахуевертить и отлаживать легче.
Anonymous
из явных минусов - латенси больше.
J
Нет, уже давно нет.
J
Это чисто религиозный спор и вопрос удобства.
J
В чем проще тебе разобратсья и что больше на твой взгял подходит, то и делай.
А в плане времени перестроения L3 еще и выиграть может.
Anonymous
ну и точка отказа все-таки одна. в том смысле что нечаяно все-равно можно положиь обе сети. хоть и сложнее.
J
ну и точка отказа все-таки одна. в том смысле что нечаяно все-равно можно положиь обе сети. хоть и сложнее.
Ну если так рассуждать, то точка отказа одна, да.
Инженер который обслуживает. Он может все вообще и положить и убить.
Anonymous
не. у меня тут вопрос не в религии 😊
а в том что в принципе присутствует единая точка пересечения. понятно что положить ospf в изолированной сети нужно еще попытаться (хотя кто-нибудь туда может фулвью средистрибьютить)
Anonymous
две полностью раздельные сети с multipath положить в этом плане сложнее.
Anonymous
кстати, а паблик сеть случаем для резервирования не используется?
J
Используется если не указана кластерная.
Ну а вообще да, можно вроде с каких-то пор и несколько сетей указывать через запятую.
Anonymous
не. я в плане бекапа для кластерной. т.е. что происходит при падении кластерной сети?
через запятую нельзя. точнее можно но между указаными сетями должна быть маршрутизация (согласно мануалу).
Mike
Странные вы ребята. Тупо MLAG, а выше коммутатора - ospf или bgp
J
Чот меня уж доебало, пацаны что время от времени начинается "странные вы, вот я знаю как".
J
MLAG - сложно отлаживать и что важнее даже - чо делать если нет его?
J
Выдумывать приходится вот)
Mike
Если ты сделал так, что у тебя разные типы сетей и тебе приходится упарываться с динамикой на хостах - у меня скорее вопрос, зачем ты так сделал.
J
Если ты конкретно меня хочешь спросить, у меня выбора нет. Количество 10G портов ограничено, а вот Infiniband свитч полупустой. К тому ж, никакого бюджета нет, соответственно и купить ничего не могу. Пользуюсь тем что есть.
Ну и мы тут вроде собрались чтобы опытом делиться, а не хуесосить друг друга)
Mike
Если ты конкретно меня хочешь спросить, у меня выбора нет. Количество 10G портов ограничено, а вот Infiniband свитч полупустой. К тому ж, никакого бюджета нет, соответственно и купить ничего не могу. Пользуюсь тем что есть.
Ну и мы тут вроде собрались чтобы опытом делиться, а не хуесосить друг друга)
Ну и тогда не нужно говорить, что твоё решение лучше - оно просто вынужденное в твоём случае.
У меня нет проблем с MLAG, который работает и собирается за доли секунды.
J
Чот ну его к хренам. Дискуссия все равно щас вывернется так будто я чот попутал и стал пропихивать свое кривое решение.
Mike
Чот ну его к хренам. Дискуссия все равно щас вывернется так будто я чот попутал и стал пропихивать свое кривое решение.
Не говорю, что твоё хуже - возможно оно единственное подходящее в твоей ситуации.
Если же мы говорим о задаче, без таких ограничений, то собрать MLAG самое логичное и простое решение, давно опробованное и используемое повсеместно.
J
Не говорю, что твоё хуже - возможно оно единственное подходящее в твоей ситуации.
Если же мы говорим о задаче, без таких ограничений, то собрать MLAG самое логичное и простое решение, давно опробованное и используемое повсеместно.
Эт ты прав.
Но для MLAG нет никакого общепринятого стандарта еще. А значит свитчи разных производителей в MLAG не соберешь.
Но это тоже проблема тех мест где нихрена нету денег и планирования)
J
Так что да, если свитчи могут MLAG, то это гораааздо проще.
J
Не говорю, что твоё хуже - возможно оно единственное подходящее в твоей ситуации.
Если же мы говорим о задаче, без таких ограничений, то собрать MLAG самое логичное и простое решение, давно опробованное и используемое повсеместно.
Чот короче я опять сагрился напрасно)
Достаточно было сказать что млаг не везде есть.
Извини)
Sven
мне больше is is нравится
Sven
не. у меня тут вопрос не в религии 😊
а в том что в принципе присутствует единая точка пересечения. понятно что положить ospf в изолированной сети нужно еще попытаться (хотя кто-нибудь туда может фулвью средистрибьютить)
ну это надо еще постараться) да и коммутаторы последние фулл вью переваривают
Sergei
Anonymous
В итоге все сошлись на MLAG для тех у кого есть бюджет и OSPF для нищебродов?
Sergei
я бы не согласился. когда MLAG взъебывает где нибудь на магистральных линках - это крайне неприятно и после этого может возникнуть желание уехать на какой нибудь роутинговый протокол + ecmp