Denis
Артем
И есть ещё вопросик, как можно сделать плоскую сеть, что бы POD IP были из той же сети что и другие локальные сервисы которые не в кластере k8s. Как я понимаю нужно сделать bridge , но вот какой CNI это может обеспечить
Если нужно, чтобы всё обновлялось динамически, то нужно настраивать BGP и использовать CNI, которые поддерживают его (kube-router, calico как примеры). Если кластер достаточно статичен (ноды редко удаляются/добавляются), то можно "сэмулировать" работу BGP и просто везде в сети прописать статичные маршруты. Т.к. CNI обычно выдаёт каждой ноде по определённое подсети для подов, то достаточно иметь маршруты, которые будут посылать траффик в эти подсети на соотв. ноды.
Sergey
Sergey
Как я понимаю нужно использовать что-то типа Host-network
Артем
или MetalLb
Артем
он отлично справится с этой задачей, проверено
Sergey
Мне нужна плоская сеть просто )
Andrey
возьми молоток и сделай плоской :)
Артем
ОК, чтобы и поды получали адреса из этой сети, и это всё разруливалось на уровне cni, такого решения я не знаю на данный момент, к сожалению :)
Артем
сообщите, если найдёте
Andrey
https://docs.projectcalico.org/v3.10/networking/determine-best-networking#unencapsulated-not-peered-with-physical-infrastructure
Andrei
Добрый день. Что значит |2- в конфигмапе?
...
data:
foo.cfg |2-
some content
|- это вроде мультистроковое значение. Где всех варианты посмотреть? Возможно это в ямл синтаксисе описано, но гуглится плохо.
Anton
Andrey
Andrey
и сервисы не использовать (точнее, IP)
Andrey
в обе стороны
Andrey
например, в GKE балансеры могут разбрасывать нагрузку напрямую на поды, а не через NodePort сервис
Andrey
а поды напрямую могут идти в какой-нибудь инстанс или cloudsql
Anton
Andrey
нет
Andrey
как раз для него требуется чтоб у подов были IP из той же сети, что и у вмок
Andrey
Andrey
| - сохранять переводы строк
- - удалить все переводы строк в конце
2 - удалить два пробела в начале каждой строки (indent)
Vadim
народ как доступ к приватному репу из кубера настроить? секреты надо для каждого неймспейса, как то неудобно
Vadim
для всего кластера чтобы раз и настроил
Vadim
𝚔𝚟𝚊𝚙𝚜
или MetalLb
Металлб для сервисов, он не прокидывает IP в под
Sergey
macvlan может решить этот вопрос?
𝚔𝚟𝚊𝚙𝚜
Sergey
нет, главное чтобы они были в одной плоской сети
𝚔𝚟𝚊𝚙𝚜
Ещё калико вроде умел что-то подобное
Sergey
Anonymous
Я это понял, потому что у меня была подобная таска
Anonymous
Когда-то
Sergey
Когда-то
Эм, могу ли я поинтересоваться как Вы решили этот вопрос?
𝚔𝚟𝚊𝚙𝚜
Sergey
Ещё калико вроде умел что-то подобное
Калико пробовал он не умеет это, он может сделать доступными сети через анонсирования этих сетей указывая в качестве nexthopip , ипшникс внешнего локального интерфейса
Sergey
Но это получится не плоская сеть, а маршрутизируемая
Anonymous
Эм, могу ли я поинтересоваться как Вы решили этот вопрос?
Она решается очень просто: Говоришь тому, кто дал такое задание, что это не является правильным подходом и не соответствует принципам Kubernetes и что вся сеть к подам должна создаваться через сервисы и ингрессы. Не существует такой задачи которую нельзя было бы решить посредством адекватных инструментов кубера.
Моя таска решилась просто - я показал как эту задачу решает openshift и мы пересели на OKD
Anonymous
И были довольны
Sergey
Эм, а как эту задачу решает Openshift в часности какими средствами?
𝚔𝚟𝚊𝚙𝚜
𝚔𝚟𝚊𝚙𝚜
𝚔𝚟𝚊𝚙𝚜
Кстати, сколько у тебя нод планируется?
Sergey
есть multus https://github.com/openshift/multus-cni
Sergey
Он вроде умеет ))))
𝚔𝚟𝚊𝚙𝚜
Можешь cni просто ручками сконфигурить, или ансиблем, смотри к примеру bridget он так и делает: просто конфигурит cni-bridge для каждой ноды, тоже самое можно сделать и с macvlan
𝚔𝚟𝚊𝚙𝚜
Кстати, там даже для DHCP ipam плагин был
Валентин
Ага, но он сильно простой, для "единого центрального dhcp на всю контору" не годится вроде
𝚔𝚟𝚊𝚙𝚜
Его можно к cni-bridge или cni-macvlan прикрутить, но лучше настроить статические рейнджи на ноду
𝚔𝚟𝚊𝚙𝚜
Alexey
Ещё калико вроде умел что-то подобное
калико вряд ли сможет. насколько я понял пул калики должен входить в cluster-cidr иначе пакеты приходящие на воркеры не будут заворачиваться на поды. возможно я что-то делал не так но мои исследования привели к такому выводу
Sergey
у калико есть два режима , calico-ipam с кастомными пулами и алокациями ip из этого пула на поды
Alexey
подскажите плиз,
у меня два разных пода с nginx и php-fpm, у них общая папка скриптов смонтирована через hostpath. и php-fpm не находит php файл при обращении. что не так? этот кейс вообще может работать?
𝚔𝚟𝚊𝚙𝚜
Кстати должен признать что стандартный подход bridge+veth интерфейсы работает намного стабильнее и его гораздо проще дебажить чем macvlan
Sergey
и есть ещё calico в режиме host-local ipam , тогда используется пул для аллокации PodCidr выделенный на ноде
𝚔𝚟𝚊𝚙𝚜
𝚔𝚟𝚊𝚙𝚜
George
Alexey
George
коллега хочет плоскую сеть, без всяких изысков. Разве у букинга не так же?
Andrey
Andrey
без overlay
George
https://ritfest.ru/2018/abstracts/4005
George
фланел тоже. И никаких проблем
George
@nightguide посмотри доклад. В частности, 52 страницу. Может это то что ты хочешь, а может и нет
Tadeusz