Vyacheslav
может оно там уже шагнуло далеко вперед от того, что мы с тобой лицезрели
я честно не понимаю до конца зачем в приватных облаках и публичных сложные истории с сетями
Vyacheslav
кажется немного избыточно
icewolf
я честно не понимаю до конца зачем в приватных облаках и публичных сложные истории с сетями
это… как его, вон вчера парень по l3 сеф цеплял.. вот это к примеру зачем
icewolf
мягко говоря вопрос зачем я задавать не стал(потому что по l3 может случился внезапно ассиметричный роутинг). Но сам факт того что sds под виртуализацию через l3, уже говорит о том что с сетями явно перекручено не с проста, а наверное потому что так отдано сетевиками у которых все построенно по феншую
icewolf
Ваще то цеф всегда работал по L3.
я даже спорить не буду, но я так не делаю.
icewolf
потому что можно хоть на пенопласте, хоть на bgp, но! «storage сеть должна быть физически развязана с data сетью»
icewolf
и весь феншуй сетевиков идет нафиг когда у вас iopsы клиенты не получают
icewolf
там же в tcp оборачивается?
ага и будет выбор лучшего маршрута через другой интерфейс
icewolf
плавали, знаем
gwaewion
ага и будет выбор лучшего маршрута через другой интерфейс
Ну вот. Все беды от резервирования. Бритва Оккэма в лучшем виде: дополнительный сущности излишни. На сервере должен быть только один ЦП, один диск и один сетевой интерфейс
gwaewion
Ага один Epyc на 178 ядер🤣
Причитал Epyc не как "эпик", а как "ерус" =)
gwaewion
Ага один Epyc на 178 ядер🤣
Зато не нужно будет нумы считать
Artem
Подскажите кто то запускал SR-IOV bonding? Как получилось решить проблему когда при attach портов выбираются VF сначала с одного физического порта, а потом с другого. Фактически у меня сейчас все работает и при малом количестве VF можно все порты приаттачить собрать bond, а потом лишние порты сделать detach. Но хочется сделать по нормальному, что бы была возможность сделать автоматическую сборку bond
Artem
В том что не берутся например по очереди или по параметру какому-то с разных портов.
Artem
Например у меня 4 VF на одном порту и 4 VF на другом. Пока я не добавлю 5 портов на VM я не могу собрать бонд
J
Например у меня 4 VF на одном порту и 4 VF на другом. Пока я не добавлю 5 портов на VM я не могу собрать бонд
А попробуй мапить в sr-iov агенте порты в разные физические сети и в passthrough_whitelist указывать для разных сетевушек разные physical_network в атрибутах. Вот: https://docs.openstack.org/nova/latest/admin/pci-passthrough.html#special-tags
J
Во, нашел статью. https://www.redpill-linpro.com/techblog/2021/01/30/bonding-sriov-nics-with-openstack.html
Artem
Спасибо
icewolf
Во, нашел статью. https://www.redpill-linpro.com/techblog/2021/01/30/bonding-sriov-nics-with-openstack.html
а у вас когда нить был такой вот рейд контролер praid ep400i ?
J
а у вас когда нить был такой вот рейд контролер praid ep400i ?
Не, как-то вообще рейд контроллеры мимо меня прошли)
icewolf
нда… плохо.
icewolf
Почему?
У одного моего знакомого с этим контролером беда, херовый перформанс
J
Так работает. Еще раз спасибо
Пожалуйста. Это автоматизировать только нужно слегка для телекома то)
Artem
Обязательно нужно будет:)
Artem
Еще с Numa Affinity придется повозиться
Artem
И с OSM от ETSI
NS 🇷🇺
И с OSM от ETSI
о там все просто
Artem
Интегрируется легко. С дескрипторами придется повозиться
Artem
А в чем там сложность?
Не читал еще про Numa affinity. В целевой схеме каждая нума будет работать только со своей сетевой картой что бы не грузить шину.
J
Не читал еще про Numa affinity. В целевой схеме каждая нума будет работать только со своей сетевой картой что бы не грузить шину.
Сходу может и неверно рассужу, но при таком раскладе стоит еще и жестко пинить vCPU к физическим ядрам.
Алексей
Скорее всего и память тоже
Если выставить во флейворе hw:cpu_policy=dedicated
Алексей
То шедуллер сам размещает кпуухи и память на нужной нуме
Artem
Отлично, Спасибо
Алексей
Это описано в NUMATopologyFilter
Алексей
И плюсом с вф-ками он тоже пытается садить на ту нуму куда карта вставлена
icewolf
Отлично, Спасибо
С вас 980тыс рублей, Алексею
icewolf
🤣🤣🤣
Artem
980 999,99 :)
Алексей
980 999,99 :)
Лучше ко мне давай если работаешь с nfv))
Алексей
Уже два года человеков ищу
NS 🇷🇺
Интегрируется легко. С дескрипторами придется повозиться
ну у меня остался в памяти только заеб с их редактированием
NS 🇷🇺
J
Скорее всего и память тоже
У меня нету опыта с хардкорным HPC и NFV, поэтому вообще хз насколько сильно NUMA будет влиять на производительность этих самых NFV.
Artem
Лучше ко мне давай если работаешь с nfv))
Я бы себе тоже взял человека, но не получается пока:)
Artem
У меня нету опыта с хардкорным HPC и NFV, поэтому вообще хз насколько сильно NUMA будет влиять на производительность этих самых NFV.
Главное что бы трафик не ходил между нума иначе все будет очень плохо работать. Там 50 Гб с одной сетевой карты и 50 с другой. Думаю шине от такого будет не по себе
Artem
Я тесты еще не делал, как сделаю отпишусь
icewolf
у вас столько не дают =)
Вы посмотрите на него? Еще и денег хочет!
NS 🇷🇺
Вы посмотрите на него? Еще и денег хочет!
Скоро буду с вытянутой рукой просить, за деплой опенстоков :D
J
Главное что бы трафик не ходил между нума иначе все будет очень плохо работать. Там 50 Гб с одной сетевой карты и 50 с другой. Думаю шине от такого будет не по себе
А это спорный уже вопрос c современным железом. NUMA ноды это не то ж самое что сокеты ведь теперь. В новых эпиках настраивается количество NUMA нод на сокет. А как там чудо-данные бегающие по infinity fabric нагружают эту фабрику ты уже и не поймешь небось.
icewolf
Скоро буду с вытянутой рукой просить, за деплой опенстоков :D
я смею дерзнуть и напомнить что не все измеряется деньгами. Далеко не все.
J
Тесты смотреть надо на конкретных задачах. Синтетика не очень показательная штука.
J
Тут и задачу и железо надо учитывать.
gwaewion
Там же была где-то табличка с пенальтями, емнип
NS 🇷🇺
https://www.gptshunter.com/gpt-store/MmEzMTIwMjU1NjIyMzkyODM0
Из ру сегмента что ли не работает?
Artemy
Массово поперли, твари
icewolf
Массово поперли, твари
Может шилди прикрутим?
icewolf
шоп учились складывать?
Artemy
Только лив стрим с кнопками указания что стримерше делать
icewolf
Ах да сегодня же нюдсо четверг
Grundik
Ascii Stream
icewolf
не тут надо именно не сканом работать а именно с текстом. И вот тут многие спамботы ломаюцо
Artemy
$ openstack nude … Одобряю
icewolf
а еще есть спамдестроер от тырдыкса
icewolf
первому кто сделает такую платформу с таким названием я думаю многие админы задонатят
Grundik
первому кто сделает такую платформу с таким названием я думаю многие админы задонатят
помню была трансляция футбольных матчей ... telnet diego.ascii-wm.net 2006... но сейчас уже все(
Aleksandr
срестримом на онлифанс