Alex
etcd на мастерах сейчас, в дальнейшем планирую увеличить etcd до 5 нод
Марат
следующее сообщение ответило на вопрос
Марат
ставьте ингресс на ноду без роли мастера
Alex
а в чем причина проблемы и почему такое решение? Если я сейчас пропишу ip не мастер ноды все должно заработать? Пойду проверю
Марат
hostNetwork=true ингресс контроллеру
Lucky SB
мда. как-то скудно и неоднозначно дока написана
Alex
уже стоит hostNetwork=true
Alex
пробовал с обоими параметрами
Lucky SB
уже стоит hostNetwork=true
а зачем тогда сервис создаешь ????????????
Alex
при деплое на не мастер ноду. У нее вылетает сеть, даже кубеапи не подключается
Alex
так хост нетворк ингресс контроллеру, а не поду порт которого экспоузит сервис, или я что то не понимаю?
Alex
деплое сервиса с конфигом который присылал выше
Марат
так хост нетворк ингресс контроллеру, а не поду порт которого экспоузит сервис, или я что то не понимаю?
игресс на неймспейсе хоста, поды и их сервисы не должны знать внешние адреса
Alex
мне нужно получить мой под который через сервис заэкспоузит свой порт на ноде
Alex
ну а в идеале конечно понять проблему, потому что на другом кластере такая конфигурация работала без проблем
Марат
через сервис никто ничего не экспозит сервис это проброс порта!
Alex
ну вот я и пробрасываю порт пода на хост
Alex
пытаюсь вернее)
Alex
еще раз, пример сервиса прямо из доки копипаста и работал на старом кластере
Lucky SB
ну вот я и пробрасываю порт пода на хост
а куб-прокси у тебя в каком режиме работает ? iptables или ipvs ?
Alex
открывал порт 8090 на externalIp и при обращении туда, я попадал в линкованный контейнер с его портом
Alex
секунду
Марат
ну вот я и пробрасываю порт пода на хост
если стоит ингрес контроллер, то ничего не надо пробрасывать, создаем kind: ingres и натравливаем на простой сервис без всяких externalIPs
Alex
ipvs
Lucky SB
ipvs
а там где работает наверное iptables ;)
Alex
возможно)
Alex
стоит попробовать iptables?
Lucky SB
не надо. щас расскажу
Alex
давай
Alex
вообще способы проброса портов есть и другие, напрямую можно под к ноде привязать, ингресс и т.п. но мне интересно почему этот конкретно способ из доки так себя ведет на текущей конфигурации
Lucky SB
В очередной раз поражаюсь тому, что раньше трава была зеленее, а девки толщи
Марат
запутал ингресом своим)
Alex
это я подозреваю, но смущает почему раньше работало и почему так себя ведет. Если бы кластер был без HA все бы на глухо умирало
Lucky SB
Из доки не очевидно, но ты мне поверь. в externalIPs: нельзя прописывать основной адрес узла, только дополнительный! в случае с iptables это работает, потому что в iptables создаются правила только для одно порта. про ipvs я не смотрел никогда, но судя по поведению подозреваю что они весь трафик для этого адреса в ipvs отправляют. Для выставления пода на порт узла все используют сервисы типа NodePort - этот тип сервисов как раз для таких целей и предназначен.
Lucky SB
запутал ингресом своим)
не мудрено. у него ж в манифесте port: 80 само собой про ингресс-контроллер думается
Alex
я в общих чертах понял, спасибо большое, перепишу конфиг и отпишусь по результатам. Видимо в текущем сетапе прописывание айпи любой ноды ломает эту ноду по докам и по вашим словам
Alex
80 порт у меня был портом контейнера так что он вообще не причем
Lucky SB
80 порт у меня был портом контейнера так что он вообще не причем
https://matthewpalmer.net/kubernetes-app-developer/articles/kubernetes-ports-targetport-nodeport-service.html значит ты еще и не в то поле его прописал
Alex
да да, как раз targetPort - порт контейнера
Alex
ну как не в то)
Alex
Alex
я тупой но не тупой тупой)))
Alex
извините)
Lucky SB
ну как не в то)
опс. в глазах глюки видимо. мне показалось что у тебя port: 80 targetPort: 8090 было
Alex
eip это что?
Alex
на nodePort и переписываю, у меня на самом деле есть конфиги такие. А это даже не я писал, но мне было интересно почему работало и перестало, чтобы поделиться знаниями потом в команде
Solyar
Зачем люди придумывают велосипеды?
Cholovik
Alex
ну когда не знаешь как что то сделать, ищешь что то и часто пытаешь использовать первое попавшееся решение. Думаю тут первым попалось не самое лучшее, а по доке довольно просто перепутать назначение
Lucky SB
Зачем люди придумывают велосипеды?
чтобы ездить на них в цирке
Alex
Господа, никто не сталкивался с такой проблемой. Поднял кластер через кубеспрей с ингресс контроллером. apiVersion: v1 kind: Service metadata: name: {{ include "app.fullname" . }} spec: selector: release: "{{ .Release.Name }}" ports: - protocol: TCP port: 8090 targetPort: 80 externalIPs: - my.node.ip При деплое сервиса выше на my.node.ip, на ноде вылетает etcd и сеть встаёт колом, не знаю как дебажить
Alex
вот это?
Solyar
Забавный подход
Alex
ну тут самое интересное что в старой конфигурации кластера это работало как мы ожидали
Alex
но как-бы не должно бы
Solyar
Может вы что-то упустили?
Alex
потому что то что мы прописывали в экстерналИп не являлось externalIp а являлось основным айпишником ноды
Alex
может быть, но тут скорее про конфигурацию кластера, а там дебри
Alex
в общих чертах я писал подробности выше
Alex
сам конфиг деплоя не менялся, он в хельм чарте
Alex
Если что у меня все заработало. Спасибо ребят, вы лучшие)
J
всем привет. подскажите кто сталкивался. после обновления кластера в GKE до 1.14 перестали подниматься деплойменты. удаляю под из деплоймента и ничего не происходит. хотя должен подняться под
J
да
Andrey
А чо там он пишет?
J
вернее я думаю что да
J
где именно смотреть?
Andrey
Хз, gke не юзал, у меня как статик под запущен
J
ну в каком нс?
J
kube-system?