Anonymous
externalTrafficPolicy: "Local" ?
Anonymous
нашел в nginx-ingress
Anonymous
по дефолту закоменчено
Alexander
Anonymous
все всем спасибо externalTrafficPolicy: "Local" решило вопрос
Й
Да на самом деле МеталлБ он вообще не прлксирует никуда и ничего. Там все просто:
Демоны на нодах только анонсят ипы и отдают инфу в контроллер который добавляет в етцд в правила айпитейблс адреса с демонов. Дальше все также как и всегда. Кубепрокси Читает этот конфиг и асайнит на нодах нужные правила в айпитейблс
Anonymous
realip полетели
Anonymous
кто столкнется с таким смотрим values nginx-ingress там праметр externalTrafficPolicy: "" нужно указать Local
Gunslinger
Артем
спасибо за ответ, буду продолжать копать, напишу, если узнаю причину
отвечаю себе же, но возможно тем, кто имеет дело с psp, будет интересно узнать
дело было в том, что в докерфайле был указан USER с именем, а не с UID
и нужная psp не применялась ввиду ошибки:
container has runAsNonRoot and image has non-numeric user (test-user), cannot verify user is non-root
и это ведёт в документацию: https://kubernetes.io/docs/concepts/policy/pod-security-policy/#users-and-groups
"MustRunAsNonRoot - Requires that the pod be submitted with a non-zero runAsUser or have the USER directive defined (using a numeric UID) in the image."
у меня применялась privileged, потому что она была разрешена для аккаунта replicaset-controller, когда я запретил, увидел данную ошибку
Артем
Там написано, что это произошло потому что replicaset controller, работает под другим SA, он использует serviceAccountName, забыл про этот момент. Но это также логично, ведь контроллер также работает с Апи куба, и создаёт поды через него. То есть это не отменяет правило, что нужно деплоить от правильного SA, на которого забиндена psp, + указать serviceAccountName
Дмитрий, выше отсылка к нашему с вами разговору.
Vadim
Подскажите плиз когда пытаюсь в своем helm чарте переопределить при установке домен для ingress командой set, почему-то обнуляются все переменные на этом же уровне:
values.yaml
ingress:
enabled: true
annotations:
kubernetes.io/ingress.class: nginx
hosts:
- host: my.domain.com
paths:
- /my/domain
helm template --debug --set-string ingress.hosts[0].host="your.domain.com" .
spec:
rules:
- host: "your.domain.com"
http:
paths:
paths по каким-то причинам потерялся.
Artem
/report
Sergey
@kvaps
Андрей
привет! а кто-нибудь использует alerta в связке с alertmanager? по telegram плагину для alerta совсем мало документации, можно ли настроить темплейт сообщения, чтобы в телегу приходила ссылка на алерт в alerta?
Sergey
Dmytro
Dmytro
Видимо там криво написана логика
Vadim
Стандартный который создает helm create
Vadim
вроде все верно там:
rules:
{{- range .Values.ingress.hosts }}
- host: {{ .host | quote }}
http:
paths:
{{- range .paths }}
- path: {{ . }}
backend:
serviceName: {{ $fullName }}
servicePort: {{ $svcPort }}
{{- end }}
{{- end }}
Vadim
при этом когда явно выставляю helm template --debug --set-string ingress.hosts[0].paths[0]=“/your/domain/“ .
Vadim
то все ок
Dmytro
Хмм видимо ingress.hosts[0].host сбрасывает весь лист hosts
Vadim
вот у меня такие же подозрения, но это как-то странно, зачем тогда helm create генерит такой шаблон, + посмотрел другие чарты в stable, там тоже везде так сделано
Dmytro
Можно попробовать в темплейте добавить дебаг вывод проверить
Vadim
это не то ? helm template --debug
Dmytro
Vadim
у меня только 1 , но сейчас проверю
Vadim
hosts[1] тоже пропадает
Dmytro
Ага, ну значит нужно чекнуть документацию хелм по —set, скорее всего вложенные списки нужно не через —set-string передавать чтобы их мерджило, или вообще нельзя менять вложенный элемент списка через —set
Denis
Доброго времени суток! Подскажите, пожалуйста. Развернут кластер из трёх мастеров и 6 рабочих нод на квм виртуалках. Кластер разливал через kubespray. Сдохли сертификаты, пробовал повторно запускать плейбук cluster.yaml эффекта не возымело. Мастер ноды ready, а воркер NotReady. Не подскажите гайд по устранению проблемы?
Alexey
Denis
@ashanko, да, видел эту статью, значит в моем случае ручками через openssl?
Egor
Рябзяки как поймать tcpdump в кубе?
Dmitrii
А в чем проблема?
Alexey
Alexey
Dmitrii
Можно еще просто внутрь пода поставить тцпдумп обычно )
RE
камрады, мож кто подскажет пример jenkins pipeline для rolling updates в EKS?
понимаю, что в deployment нужно подставлять имадж тег на новый и деплоить, но пока могу сделать это только с остановкой сервиса - то есть просто delete его и заново apply
но как это в rolling update все перенести - пока не понимаю
может есть примеры, посмотреть на конфиги..
Sergei
причем тут jenkins? это сам deployment в кубере организует, запустите несколько копий и обновляйте
RE
есть какойто не очень хороший гайд
https://bitbucket.org/blog/setting-up-a-ci-cd-pipeline-with-spring-mvc-jenkins-and-kubernetes-on-aws
но в нем похоже используетcя тег latest
а мне хочется чтобы по тегу можно было понять какая версия имаджа счас в поде.
RE
Sergei
если у вас несколько копий, есть readinessProbe, хотя может и без него, главное несолько копий, то да
RE
у меня просто указано
spec:
replicas: 6
Сергей
Сергей
strategy:
type: RollingUpdate
rollingUpdate:
maxUnavailable: 25%
maxSurge: 1
Sergei
оно по дефолту будет RollingUpdate, можете проверить, указав set image, он вырубит одну копию и будет поднимать новый, если все ок, будет обновлять остальные
RE
то есть можно без strategy
ок проверяю
Sergey V
Кто нибудь шиппер от букинга щупал? какие впечатления? стОит юзать?
RE
rambling
господа, немного оффтоп, но посоветуйте облако надежнее хецнера и дешевле амазона (и гугла)
Sergei
Яблоко?
rambling
не понял
Oleh
rambling
rambling
вот смотрю на серверс и на скейлэвей
Вадим
scaleway - лоукост
Вадим
Надежность по моему опыту у Хецнера выше
rambling
но выглядит вкусно
rambling
Sergei
Sergey V
https://www.leaseweb.com/
Sergey V
https://t.me/pro_hosting
rambling
Mimik
я лично юзаю селектел с железными серверами а все остальное поднимаю сам
rambling
Mimik
metalb или свой контур ингресов сторите какой?
я решил, что мне не нужен оверхед с орекстрацией и контейнером, сделал 3 сервера, на них jenkins один дев и два релиз, поднята репа не деве, при комите изменений той или иной службы, хук компилит и поднимает его на деве, тестирую, если ок, делаю комит на ветку продакшен. Синхронизация данных идет через Rabbit где все изменения складируются в очередь и затягиваются всем серверами, в случае если один или два отваливается один становится примари остальные отключают внос изменений до устранения обрыва
Mimik
это если коротенечко описывать
Lucky SB
@ashanko, да, видел эту статью, значит в моем случае ручками через openssl?
разбираться надо. смотреть на все сертификаты. и сначала кубадмом их пробовать перевыпустить.
Не совсем понятно почему воркер ноды not Ready.
когда сертификаты протухают - то не работает все. начиная с etcd, заканчивая API сервером и kubectl
т.е. посмотреть kubectl get nodes и увидеть статус NotReady ты не можешь
Отделение Bereke Bank
Lucky SB
Отделение Bereke Bank
а они то тут при чем ?
у меня было такое что изза того что kube-proxy продолжало болтаться с невалидным сертом - нода висела NotReady)
Lucky SB
сертификаты в кубспреевской установке, где они были как статик поды запущены