George
Б - безопасность без Б
Vadim
Валентин
Anonymous
Кластер все бегает по локалке используется IPVS и тут вдруг понадобилось добавить в кластер тдве три ноды, которые живут за пределами локальной сети датацентра. Вопрос: можно ли через ipvs прокинуть к этим нодам доступ к локальной сети основного кластера ?
Anonymous
Сейчас я сгородил GRE + IPSEC
Anonymous
но чувствую что есть какието механизмы попроще из коробки
𝚔𝚟𝚊𝚙𝚜
𝚔𝚟𝚊𝚙𝚜
А вообще я бы wormhole попробовал
Anonymous
ну без GRE да, ноды цепляются по внешним IP, далее IPVS прокдует на эти ноды кластерный блок IP судя по интерфейсам это IPIP тунель а вот вопрос как его заставить прокинуть другие сети?
Lucky SB
Lucky SB
Alexander
Добрый день, коллеги, может быть кто сталкивался, измение адресации docker network bridge на нодах, сильно затрагивает работу кластера k8s ?
Sergei
вам придется докер перезапустить, а это рестрарт всех контейнеров на хосте, «немного» затрагивает
Alexander
Lucky SB
Alexander
ок, спасибо
Anonymous
Lucky SB
ну значит ip ip туннелб все есть уже
Anonymous
ну значит ip ip туннелб все есть уже
Да увидел что к примеру nodeexporter локальные IP calico прокинуло на все ноды
# ipvsadm -ln |grep 172.31.31
-> 172.31.31.1:9100 Masq 1 0 0
-> 172.31.31.2:9100 Masq 1 0 0
-> 172.31.31.5:9100 Masq 1 0 0
а какой параметр в деплое отвечает за то чтобы именно локальные порты были так прокинуты через IPVS? 172.31.31 это у меня локалка
Vadim
Vadim
чем это лучше чем 1 раз создать хранилище, добавить в него серт, и подключить дополнительным хранилищем корневых через опцию JVM
George
то же самое
Anonymous
Если нужен туннель я бы взял tinc
ну мне по сути нужно чтобы часть ип какихто приложений в локальной сети были доступны на удаленных нодах за пределами сети и вижу что нечто подобное решено в сalico
Vadim
то же самое
а в твоем примере в хранилище с дефолтными ca-store добавляются свои сертификаты, получается MY-ca который подключается к другому контейнеру да?
George
да
Lucky SB
Lucky SB
Только чпрез сервисы. Нпрм нодепорт
Сергей
Подскажите разрабраться в проблеме?
У меня если слать запросы очень быстро, то есть переключать урлы быстро, то через некоторое время запрос начинает длиться от 10 до 13 секунд, есть ли какие либо ограничения в конфиге на этот счет? после длительного запроса опять становится быстро работать
коннект проверил уже, сеть стабильна, nginx работает в kube
Отделение Bereke Bank
DNS?)
Andrei
в ingress (nginx k8s) каждую минуту в логах
6 event.go:281] Event(v1.ObjectReference{Kind:"Ingress", Namespace:"staging", Name:"iworks-ingress", UID:"2fa228f6-fedf-42d4-b2f4-18107926dcc1", APIVersion:"networking.k8s.io/v1beta1", ResourceVersion:"35831910", FieldPath:""}): type: 'Normal' reason: 'UPDATE' Ingress staging/iworks-ingress
поясните что это означает?
Andrey
Andrey
Andrei
Да. .status обновляет.
я прост уже слегка груснул копать рендомно ошибка 502 стреляет https://prnt.sc/quhsu0 при этом в логах api тишина
blkmrkt
Прошел ровно год с момента апгрейда Rancher до v2.2.4 с кубом v1.11.6-rancher1-1, как kube-apiserver начал крашиться при попытке сохранить/обновить внутренние серты:
F0129 11:52:24.896910 1 storage_decorator.go:57] Unable to create storage backend: config (&{etcd3 /registry [https://95.XXX.XXX.XX:2379] /etc/kubernetes/ssl/kube-node-key.pem /etc/kubernetes/ssl/kube-node.pem /etc/kubernetes/ssl/kube-ca.pem true false 1000 0xc4202eb080 <nil> 5m0s 1m0s}), err (context deadline exceeded)
Не подскажете в какую сторону гуглить? Результаты забиты каким-то RKE который у меня не установлен, но сомневаюсь что просто регенерация сертов поможет.
Хостится все на смеси из своего железа в ДЦ и облака Hetzner.
blkmrkt
IP 95.XXX.XXX.XX это кстати адрес машины с etcd, которая в свою очередь показывает вот такое:
WARNING: 2020/01/29 11:02:19 Failed to dial 0.0.0.0:2379: connection error: desc = "transport: authentication handshake failed: remote error: tls: bad certificate"; please retry.
И дальше режектит коннекты от других нод:
2020-01-29 11:10:24.685511 I | etcdmain: rejected connection from "95.XXX.XXX.XX:38324" (error "EOF", ServerName "")
2020-01-29 11:10:25.220747 I | etcdmain: rejected connection from "95.XXX.XXX.ZZ:39363" (error "EOF", ServerName "")
2020-01-29 11:11:49.905196 I | etcdmain: rejected connection from "95.XXX.XXX.YY:42050" (error "EOF", ServerName "")
2020-01-29 11:11:50.153341 I | etcdmain: rejected connection from "95.XXX.XXX.XX:41356" (error "EOF", ServerName "")
2020-01-29 11:14:09.193507 I | etcdmain: rejected connection from "95.XXX.XXX.XX:35321" (error "EOF", ServerName "")
Dmytro
Подскажите, могу ли я использовать ConfigMap как нибудь так?
Вместо:
---
kind: Deployment
apiVersion: apps/v1
metadata:
name: nginx
Получить что-то такое?
---
kind: Deployment
apiVersion: apps/v1
metadata:
name:
valueFrom:
configMapKeyRef:
...
И если нет, то как возможно хранить такую информацию отдельно? Например, название и версия имаджа, какие-то порты?
Lucky SB
Lucky SB
Я щас не помню с какой версии ранчер научился серты ротировать. Но до этой версии у него протухали не только сертымкла тера
blkmrkt
Lucky SB
Но и его внутренние сертификаты, которые внутри понтейнера с ранчером
Lucky SB
Lucky SB
Есличто, то можешь выкинуть ранчер и руками все серты обновить с опенссл
Lucky SB
Моя статья на хабре ищется по мловам кластер тыква
Lucky SB
Должен быть ci cd ))и iaac
George
blkmrkt
blkmrkt
Ок все заработало. Поставлю напоминалку в календаре на следующей год, потом разберусь.
Cholovik
Igorь
Всем привет! А почему cert-manager (0.10.1) может неправильно серты обновлять? Раньше был LetsEncrypt в издателях серта, а сейчас - cert-manager
Igorь
Как будто он начал самоподписанные генерить
Vladimir K
Igorь
раньше она работала норм... может, просто летсэнкрипт заблочил
Vladimir K
Artem
Кто-нибудь использует у себя vertical pod autoscaler? Интересно узнать о юзкейсах в сообществе 🙂
Andrey
Andrey
Andrey
тогда очень странно, у меня 0.9 не блочится
Andrey
ну и они рассылают нотификации загодя, что вот у вас используется старая версия, скоро заблочим
Artem
Artem
для stateless вроде как hpa отлично работает, а для stateful - стремно
Andrey
Gunslinger
Andrey
если пересоздание пода является проблемой, то что-то не так и это либо плохо спроектировано, либо не надо это в куб тащить
Gunslinger
в принципе логика в "а давайте не будем ставить лимиты от балды" есть
Gunslinger
но опять же там был и слайдик
Gunslinger
Gunslinger
ну оно и логично
Artem
записи доклада случайно нет в общем доступе?
Gunslinger
ща гляну
Gunslinger
записи доклада случайно нет в общем доступе?
я не нашел, может тебе удастся что-то найти по теме
Lecture on "Rightsizing your Kubernetes Deployments using VPA", by Dan Benjamin, Senior Solutions Architect at Google Cloud.
Artem
Спасибо!
Artem
похоже
https://www.youtube.com/watch?v=Y4vnYaqhS74
Gunslinger