Вроде как вышло все правильно. Такое чувство что сам master не запустился как надо.

а если с бастиона телнетом на 443 и приват айпи мастера - что выходит?

мм в смысле сам ELB не может по 443 достучаться до мастер ноды?

Я ну как я понимаю ELB ставить в статус по Health Check’у же. В health check стоит targer 443

я пробовал, можно получать по L2 (DHCP), либо роутить через BGP. у меня раздеплоен вариант с L2

С l2 айпишники на одной ноде только, Если она сляжет, то траф в никуда пойдет. Вы это как-то решали?

а если с бастиона телнетом на 443 и приват айпи мастера - что выходит?

Телнета там нет, но curl просто виснет на тайм-аут. Хотя с внешней сети curl пишет Server aborted the SSL handshake

С l2 айпишники на одной ноде только, Если она сляжет, то траф в никуда пойдет. Вы это как-то решали?

Оно должно переехат на другую ноду же в том же L2 сегменте

ну по сути как keepalived

и возможно он и используется

и возможно он и используется

нет

$ kubectl -n metallb-system get pods NAME READY STATUS RESTARTS AGE controller-6579c56c5f-qs2x8 1/1 Running 1 9d speaker-479zt 1/1 Running 3 13d speaker-d2xbn 1/1 Running 3 13d speaker-mhkxw 1/1 Running 5 13d

Телнета там нет, но curl просто виснет на тайм-аут. Хотя с внешней сети curl пишет Server aborted the SSL handshake

curl по айп мастера с бастиона висит по таймауту? значит надо смотреть логи мастера, он не поднялся

С l2 айпишники на одной ноде только, Если она сляжет, то траф в никуда пойдет. Вы это как-то решали?

в этом теряется суть самого loadbalancer'a

Телнета там нет, но curl просто виснет на тайм-аут. Хотя с внешней сети curl пишет Server aborted the SSL handshake

curl telnet://<remote>

curl по айп мастера с бастиона висит по таймауту? значит надо смотреть логи мастера, он не поднялся

глянул screenshot и лог загрузски через ec2 - все ок типа. На скрине login форма. Мистика блин

так а в логах кублета что?

curl по айп мастера с бастиона висит по таймауту? значит надо смотреть логи мастера, он не поднялся

Сейчас еще раз log глянул. Мастер туда ssh ключи выдал.

Сорян. Логи с ключами с бастина случайно посмотрел.

так а в логах кублета что?

Их же только на мастере видно нет?

в этом теряется суть самого loadbalancer'a

Суть не теряется, нужно два ip но на разных тачках. К примеру если мне нужно обновить ингрес, то я смогу снять траф по очередно с серверов и обновить без простоя

Их же только на мастере видно нет?

ну да, а что ссш на мастер тоже не работает?

Там есть вариант с bgp который это решает, но надо в дц договариваться(

Суть не теряется, нужно два ip но на разных тачках. К примеру если мне нужно обновить ингрес, то я смогу снять траф по очередно с серверов и обновить без простоя

вы допускаете что metalb может переносить ip адрес в L2 сегменте с машины на машину?

ну да, а что ссш на мастер тоже не работает?

он же в private сети. Я вроде прокинул через sec.groups чтобы на ssh доступ был с 0.0.0.0. но пока не добрался.

надо еще внешний адрес выдать

так надо зайти на ссш на бастион а оттуда на мастер

затем бастион же и нужен

вы допускаете что metalb может переносить ip адрес в L2 сегменте с машины на машину?

Не может, Просто думал может кто-то какое-то решение придумал, решил спросить

не нужно мастеру выдавать публичный айпи и его группы (копсом сгенерированные) трогать

затем бастион же и нужен

я вообще тоже так думал.

но он не заходит на мастер из-за ключей вроде. забыл уже. ща чекун еще раз

Не может, Просто думал может кто-то какое-то решение придумал, решил спросить

а почему вы так решили? может я что в документации не усмотрел?

а почему вы так решили? может я что в документации не усмотрел?

Я не так выразился. Он не может выдать два ip на разные машины. И в случае падения одной машины он не может перенести её адрес на другую рабочую

хмм я думал в этом и смысл metallb - он двигает айпишник с ноды на ноду по необходимости

почему не сможет?

не нужно мастеру выдавать публичный айпи и его группы (копсом сгенерированные) трогать

Почему-то на бастионе не было ключа для ssh чтобы попасть на масте. Закинул туда сам ключ. Попал на мастер по ssh

хмм я думал в этом и смысл metallb - он двигает айпишник с ноды на ноду по необходимости

Спасиб. Теперь яснее стало, что кублет не запустился

Почему-то на бастионе не было ключа для ssh чтобы попасть на масте. Закинул туда сам ключ. Попал на мастер по ssh

конечно там ключа не должно быть, надо форвардить агент ssh -A ...

Я не так выразился. Он не может выдать два ip на разные машины. И в случае падения одной машины он не может перенести её адрес на другую рабочую

т.е. вы имеете в виду, что на машине не может быть два адреса из одного сегмента с одной и тоже маской подсети, вы про это?

конечно там ключа не должно быть, надо форвардить агент ssh -A ...

ааа, точно. Чет я ступил уже да. Ну в общем вот: E0514 17:03:26.980496 5539 container_manager_linux.go:583] [ContainerManager]: Fail to get rootfs information unable to find data for container / )))

Теперь хотя бы чуть-чуть ясно в чем дело…Хотя блин в мульти-мастере оно работало “из коробки"

что-то не так настроено - надо дальше ковырять логи кублета. Я бы попробовал kops delete и заново создать кластер по примерам из доки включая только те флаги которые реально нужны

прежде чем ковырять

что-то не так настроено - надо дальше ковырять логи кублета. Я бы попробовал kops delete и заново создать кластер по примерам из доки включая только те флаги которые реально нужны

Да я вот именно так и делал уже раз 5. Кроме того, что в доке мульти-мастер часто, а один мастер делал. Ладно сейчас пересоздам с нуля на один мастер без ключей вообще. Проверить как оно заведется. Там буду добавлять по одному с kops update

Спасибо за помощь. А то бывает уже после 5 часов ковырялок что-то упускаешь. Кстати, тут уже писал, но чат реально самый полезный, что я видел за все года в телеграмме.

стараемся 😃

Здравствуйте Как сделать доступ к internal load balancer с другой subnetwork? Есть у кого-то опыт с этим? на gcp kubernetes

вечер добрый всем

вечер добрый всем

Привет

День добрый! Скажите кто-то использовал minikube в продакшине?

а ты хорош

😂

День добрый! Скажите кто-то использовал minikube в продакшине?

Minikube is a tool that makes it easy to run Kubernetes locally. Minikube runs a single-node Kubernetes cluster inside a VM on your laptop for users looking to try out Kubernetes or develop with it day-to-day.

День добрый! Скажите кто-то использовал minikube в продакшине?

смело👍

А есть возможность поставить Kubernetes на одну машину, но не через minikube?

Anatolii каков ваш workload?

А есть возможность поставить Kubernetes на одну машину, но не через minikube?

Где планируете размещаться - бареметал или облачный провайдер?

А есть возможность поставить Kubernetes на одну машину, но не через minikube?

да, есть несколько способов, можно и миникубом, но советую указать драйвер none, что бы в хостовой системе запустились докер контейнеры с k8s стаффом

это уменьшит оверхед

Anatolii каков ваш workload?

Мне нужно чтобы крутилась база на MySQL и маленькое приложение на Node.JS которое имеет API для работы с базой.

Мне нужно чтобы крутилась база на MySQL и маленькое приложение на Node.JS которое имеет API для работы с базой.

Можешь каким нибуть kubeadm или kubespray побыстрому развернуть одну машинку с k8s. И разреши на ней запуск подов

Мне нужно чтобы крутилась база на MySQL и маленькое приложение на Node.JS которое имеет API для работы с базой.

single node k8s вам поможет только в том случае, если вы хотите в последствии переехать на k8s инфру и готовите helm чарт или иной вид деплоя своего приложения если у вас нет таких целей прямо сейчас, то советую использовать что-то в духе docker-compose и прочего.

single node k8s вам поможет только в том случае, если вы хотите в последствии переехать на k8s инфру и готовите helm чарт или иной вид деплоя своего приложения если у вас нет таких целей прямо сейчас, то советую использовать что-то в духе docker-compose и прочего.

Как раз таки нужно настроить автоматический деплой из GitLab.

Как раз таки нужно настроить автоматический деплой из GitLab.

именно в k8s? автоматический деплой и k8s никак не связаны, деливерить вы можете все тем же docker-compose

именно в k8s? автоматический деплой и k8s никак не связаны, деливерить вы можете все тем же docker-compose

А docker-compose поддерживает запуск нескольких докер имеджей, чтобы один имидж работал, а второй в это время обновлялся - как в k8s?

А docker-compose поддерживает запуск нескольких докер имеджей, чтобы один имидж работал, а второй в это время обновлялся - как в k8s?

да, вы можете указать несколько сервисов, запустить их, далее выполнить docker-compose restart frontend - перезапустится только фронтенд

да, вы можете указать несколько сервисов, запустить их, далее выполнить docker-compose restart frontend - перезапустится только фронтенд

Спасибо, сейчас буду разбираться.

Спасибо, сейчас буду разбираться.

Вам выше порекомендовали чат по докеру.

День добрый! Скажите кто-то использовал minikube в продакшине?

День добрый! Скажите кто-то использовал minikube в продакшине?

да, норм тема. всем рекомендую.

Глючит в общем как-то kops, но не могу понять на каком шаге. Если совсем без ключей развернуть, то все работает. Пока не смог выявить зависимость какие ключи конфликтуют.

можно ли как-то в параметрах kubelet'а например указать аннотации для ноды?

кастомные добавить хочется

можно ли как-то в параметрах kubelet'а например указать аннотации для ноды?

https://kubernetes.io/docs/reference/command-line-tools-reference/kubelet/ только это называется --node-labels Labels to add when registering the node in the cluster. Labels must be key=value pairs separated by ','.

но ведь это labels

а мне бы хотелось annotation

то есть например аналогично failure-domain.beta.kubernetes.io/region сделать типа failure-domain.abc.com/datacenter

то есть например аналогично failure-domain.beta.kubernetes.io/region сделать типа failure-domain.abc.com/datacenter

вот тутhttps://github.com/kubernetes/kubernetes/issues/54464 есть примеры, что failure-domain.beta.kubernetes.io/region проставляется через kubectl label node ...

о, вон оно как

This is happening for any label that has a "/".