docker ps -a | grep apiserver docker logs [id]

Мммм

Подскажите плиз по Jobs. я вроде бы выставил restartPolicy: Never но джоба всё равно наровит рестартится.

и поставил backoffLimit: 1

Общее api.. сырое общее апи над полусырыми кластерными фс? Подозрительно)

Дивный новый мир

Подскажите плиз по Jobs. я вроде бы выставил restartPolicy: Never но джоба всё равно наровит рестартится.

а версия кубера какая? если между 1.10.0 и 1.10.4 (включительно), то там был баг с backoffLimit, он не работал, пофиксили в 1.10.5

чйорт

вот этот был https://github.com/kubernetes/kubernetes/issues/62382

очень сильно мне попортил жизнь в свой время ?

у меня 1.10.4

как воркэраунд можно всем джобам прописать activeDeadlineSeconds

я думаю настало время в первый раз обновить кубер и поучиться этому.

О, такаяж проблема

Подскажите, а кто-нибудь делал мульти мастер с помощью kubeadm? Есть годная статья?

Подскажите, а кто-нибудь делал мульти мастер с помощью kubeadm? Есть годная статья?

делали с помощью kubespray

Есть ссылочка?

Не на kubespray, а на туториал, если по нему делали

не, туториалов на сколько мне помнится не нашли, делали сами

в бою не заиспользовали, но поднялось как нужно ?

там основной поинт был правильно расставить лейблы на ноды, если память не подводит

Подскажите, а кто-нибудь делал мульти мастер с помощью kubeadm? Есть годная статья?

Статья есть) но назвать эти статьи годными..)

Я нашел в оф доке, как это делается, но там еще вкурить надо

еще такая статья была https://medium.com/@bambash/ha-kubernetes-cluster-via-kubeadm-b2133360b198

Подскажите, а кто-нибудь делал мульти мастер с помощью kubeadm? Есть годная статья?

Делал, статья находится прямо в оф.доке k8s, там ж все просто. Я только по 1.10 делал, в 1.11 ее перепилили сильно вроде.

Your clusters must run Kubernetes version 1.11 or later. You should also be aware that setting up HA clusters with kubeadm is still experimental.

Запускайте мастер в HA-виртуалке/lxc-контейнере и будет вам счастье

Ок, будем посмотреть, спасибо

в офицальной доке написано "In a cloud environment, neither approach documented here works with Service objects of type LoadBalancer, or with dynamic PersistentVolumes."

Your clusters must run Kubernetes version 1.11 or later. You should also be aware that setting up HA clusters with kubeadm is still experimental.

Там же везде заточкаНа Google?

Там же везде заточкаНа Google?

ну да, на GKE

ну да, на GKE

Угу

docker ps -a | grep apiserver docker logs [id]

исчезает контейнер с api во время проблемы

исчезает контейнер с api во время проблемы

Похоже на eviction. Уберите его в параметрах kubelet'а.

Т.е. оверрайдните дефолтные значения.

И логи заодно посмотрите kubelet'а. Docker сам не будет удалять контейнер.

ещё момент, я сделал IP на keepalived между этими тремя нодами, и kubectl натравил именно на него. это норм?

ещё момент, я сделал IP на keepalived между этими тремя нодами, и kubectl натравил именно на него. это норм?

Если apiserver везде есть, то да.

Т.е. оверрайдните дефолтные значения.

есть пример под рукой? не могу нагуглить

Нет, я сейчас не за клавиатурой.

Там же везде заточкаНа Google?

А вот мне на baremetal надо

А вот мне на baremetal надо

kubespray?

А вот мне на baremetal надо

Кину чуть позже. Как до ноута дойду

Спасибо

Kubespray уже смотрю

Kubespray уже смотрю

Он на 1.10-1.11 вроде не взлетал на железяках судя по мату в сети

На 1.9 ещё ок вроде

плак

У меня 1.10.4 кубспреем на бейрметале

плак

вот тут завелся kubespray https://medium.com/@pmvk/deploying-production-grade-kubernetes-cluster-on-bare-metal-b11c6f3beb87

Спасибо, буду пробовать

у меня кубспреем 1.10.2 на BM и на VM несколько кластеров

а вот этот свежий и он собрал на kubeadm https://joshrendek.com/2018/04/kubernetes-on-bare-metal/

у меня собрался rancher'ом 2.0

видимо на вкус и цвет все фломастеры разные)

Спасибо, буду пробовать

требования к хостам только не забудьте соблюсти иначе будут странные глюки с кластером

забаньте уже плз

а можно в боте автобан сделать на эту штуку?

забаньте уже плз

это не один и тот же, их сотни

а зачем вам бареметал?

зачем мне он я знаю)

плак

кстати, если секса пока мало - можете поробовать ubuntj kubernetes - в 18.04 встроен вроде

я сам хочу как-нибудь но не успел еще)

а зачем вам бареметал?

я бейрметалом называю VM'очки уже )

ой всё. народ тут kubectl с ssh сравнивает )

ой всё. народ тут kubectl с ssh сравнивает )

где?!

ой всё. народ тут kubectl с ssh сравнивает )

кто выигрывает?

здравый смысл

точняк !

здравый смысл

Не всегда

здравый смысл

т.е. ssh?

т.е. ssh?

tty на локальный порт

tty на локальный порт

RS232?

А можно в nginx ingress controller как то сделать nginx.ingress.kubernetes.io/rewrite-target но не целиком для vhost а для отдельного backend ?

2 ingress

Непонял

Я нашел в оф доке, как это делается, но там еще вкурить надо

Да даж на хабре от фланта была статья, там еще и с containerd, но суть схемы с 3мя мастерами от этого не зависит. Они keepalived + nginx использовали для HA'шности, помнится

Непонял

Один ингресс контроллер. Два ингресс объекта деплоишь

А можно в nginx ingress controller как то сделать nginx.ingress.kubernetes.io/rewrite-target но не целиком для vhost а для отдельного backend ?

У вас будет 2 ямла. В одном будет ВХОСТ + path специфичный. для которого надо сделать rewrite И будет ямлик с этим же ВХОСтом и всеми остальными path'ами без аннотации реврайта

Вот Андрей намного лучше чем я объяснил

Да даж на хабре от фланта была статья, там еще и с containerd, но суть схемы с 3мя мастерами от этого не зависит. Они keepalived + nginx использовали для HA'шности, помнится

Это был перевод

Всем привет. А как на GKE заставить nginx ingress использовать выделенный ранее global-static-ip-name? У GKE ingress это делалось выставлением metadata.annotations.kubernetes.io/ingress.global-static-ip-name: 'ip-name'

А ещё стоит вот такая аннотация, но всё равно с http на https редиректит, как отключить-то? nginx.ingress.kubernetes.io/ssl-redirect: "false"

Всем привет. А как на GKE заставить nginx ingress использовать выделенный ранее global-static-ip-name? У GKE ingress это делалось выставлением metadata.annotations.kubernetes.io/ingress.global-static-ip-name: 'ip-name'

https://github.com/kubernetes/ingress-nginx/issues/1281

А ещё стоит вот такая аннотация, но всё равно с http на https редиректит, как отключить-то? nginx.ingress.kubernetes.io/ssl-redirect: "false"

а вы уверены, что это nginx перенаправляет? проверьте курлом. Скорее всего это hsts

У вас будет 2 ямла. В одном будет ВХОСТ + path специфичный. для которого надо сделать rewrite И будет ямлик с этим же ВХОСтом и всеми остальными path'ами без аннотации реврайта

и я так понимаю name у ingress ресурсов должны ещё отличаться да ? )

и я так понимаю name у ingress ресурсов должны ещё отличаться да ? )

да

Вроде всё заработало. Спасибо огромное.

не за что

Всем привет. Ребят, а почему дашборд может повисать? Просто в какой то момент перестает грузить информацию при смене неймспейса например, и после перезагрузки страницы не грузится вообще

scale=0 -> scale=1 помогает на 1 запрос