Salem
не только в авс
Salem
а что-то у копса с опенстеком не очень дела
Anton
кстати, после этого kubeadm заявил, что не может законнектиться по публичному ip ноды на порт 2380. Звучит как etcd порт. Etcd слушают на приватных ip. Оказалось, что он берет этот ip из конфигмапа kubeadm-config из значения apiEndpoints.<master-node>.advertiseAddress
казалось бы, какого хрена ты берешь ip API, если ты идешь в etcd
Anton
Ребят, что более подойдет для поднятия кластеров в aws, openstack и azure - kubespray или kubeadm?
подойдут оба, но брать надо kubeadm
Salem
я уже сравнительные характеристики почитал, но может кто на хорошую статейку кинет ссыль?
Tadeusz
cloud formation )
Grigorii
terraform ?
terraform для разворачивания, но для бутсрапа куба все равно нужен ансибл с kubadm'ом
или терраформ умеет в бутстрап?
Incognito
умеет
Incognito
все он умеет
Salem
там куцый бутстрап
Incognito
да ладно ?
Incognito
покажите мне, чего нельзя сделать ?
Incognito
null_resources никто не запрещает использовать, если что вдруг
Grigorii
а в нулл ресурсес просто баш скрипты?
Incognito
хоть баш, хоть питон
Grigorii
я просто тоже терраформом поднимаю, интересно как у вас сделано
Incognito
сам сейчас на терраформе описываю полностью кластер с ноля:
GKE, Flux, Helm, deployment keys (два) генерирую и тут же заливаю их в github и secrets kubernets и сразу же разворачивание helm release нужных приложений
Salem
пожалуй возьму все же спрей, там ансибл внутри, понятно должно быть
Salem
ну и терраформом инфру сетапну
Salem
единственное что смущает еще - нетворк плагины
Salem
кто что использует?
Anton
кто что использует?
в любой непонятной ситуации в этом чате потом пришлют картинку: "надо было брать calico"
Salem
ну а вообще стата есть по этому вопросу? или чисто личные предпочтения
Anton
не припомню, чтобы голосовали
Andrey
ну а вообще стата есть по этому вопросу? или чисто личные предпочтения
https://kubedex.com/kubernetes-network-plugins/
Andrey
Сравни 3 вещи:
1. Нужные тебе фичи;
2. Performance;
3. Мнение коммьюнити о твоём выборе. Желательно, не этого. :3
Denis
Кстать может кто нибуть знает, какой механизм использует Calico для маршрутизации между контейнерами?
Andrey
Кстать может кто нибуть знает, какой механизм использует Calico для маршрутизации между контейнерами?
Роутами обмениваются через BGP.
Andrey
Сам роутинг через iptables/kube-proxy.
Andrey
Ну и там нет инкапсуляций, поверх L3 просто работает.
Salem
спасибо, почитаю
Salem
что-то смотрю большинство calico пользуют
Salem
не зря видать картинку здесь постят)
Andrey
Это да. Но Cilium победит в итоге. Рано или поздно. :)
Tadeusz
Это да. Но Cilium победит в итоге. Рано или поздно. :)
ну сделайте доклад, покажите что он збз.
Tadeusz
а то все калеку юзают и не знают что можно другое :)
Denis
Роутами обмениваются через BGP.
Т.е так называемые iBGP пиры обмениваются друг с другом маршрутами, нод, на которых они запущены. Это я понимаю. К примеру kube-router делает тоже самое, и добавляет маршруты в локальную таблицу маршрутизации на каждой ноде. Там получается информацию о маршрутах передается kube-proxy?
Andrey
ну сделайте доклад, покажите что он збз.
Судя по общению с людьми из Avito на последнем Highload++, они сделают раньше нас этот доклад. :)
Andrey
Ну и у них интереснее будет, потому что у нас не такие большие кластеры.
Tadeusz
ну подождем
Andrey
Т.е так называемые iBGP пиры обмениваются друг с другом маршрутами, нод, на которых они запущены. Это я понимаю. К примеру kube-router делает тоже самое, и добавляет маршруты в локальную таблицу маршрутизации на каждой ноде. Там получается информацию о маршрутах передается kube-proxy?
kube-proxy делает DNAT и SNAT. И балансировку. Он не роутит ничего.
Tadeusz
вот, да, там iptables тупо
Denis
kube-proxy насколько знаю реализует service при помощи snat и dnat
Tadeusz
у cillium'а же L7 имеется.
Andrey
kube-proxy насколько знаю реализует service при помощи snat и dnat
Да. Сам Pod CIDR отлично и без него роутится.
𝚔𝚟𝚊𝚙𝚜
Denis
Да. Сам Pod CIDR отлично и без него роутится.
Вот я и хочу понять как калико реализует маршрутизацию между подами. Или тупо через бридж?
Tadeusz
если про сервисы и про отсутствие http в них, то советую вспомнить об API, например :)
Сергей
всем привет. подскажите пожалуйста по деплойменту момент. если я изменил image в контейнере, то зачем он пытается скачать тот, который сейчас там есть, а не тот который будет деплоиться?
Сергей
типа для того, чтобы убедиться, что образ для отката существует?
Denis
всем привет. подскажите пожалуйста по деплойменту момент. если я изменил image в контейнере, то зачем он пытается скачать тот, который сейчас там есть, а не тот который будет деплоиться?
Да вообще-то не должен. Какая у тебя strategy в Deployment ?
Denis
Denis
Точнее тег
Denis
И imagepullPolicy
Сергей
у меня pullPolicy стоит always
Сергей
но я думал по идее он должен подтягивать тот образ, который деплоит
Сергей
стретегия RollingUpdate
Denis
но я думал по идее он должен подтягивать тот образ, который деплоит
Все верно. Если говорите все как есть, то kubelet должен каждый раз ломится в реджестри и пулить имейдж и не важно даже то что там тег у него одинаковый.
Сергей
Сергей
спасибо
Denis
стретегия RollingUpdate
У меня были имейджи все были с тего develop. Я поэтому использовал always. Кубелет каждый раз перекачивал имейдж, правда strategy была Recreate
Vyacheslav
приветствую!
стоит nginx ingress на белом IP, прикручен cert-manager для LE сертификатов для доступа через HTTPS
приложения за ним в заголовках вместо IP клиента видят только IP nginx ingress
хотелось чтобы в этих заголовках передавался IP клиента приложениям...
X-Forwarded-For:
X-Real-Ip:
Сергей
У меня были имейджи все были с тего develop. Я поэтому использовал always. Кубелет каждый раз перекачивал имейдж, правда strategy была Recreate
у меня там в initContainers есть такие же образы как и в поде и он их не обновил соответственно. теперь я немного подвис как поменять им тег
Rainbow
у меня там в initContainers есть такие же образы как и в поде и он их не обновил соответственно. теперь я немного подвис как поменять им тег
перестать использовать статичные теги.
Сергей
был допустим release1, стал release2
Dmitrii
приветствую!
стоит nginx ingress на белом IP, прикручен cert-manager для LE сертификатов для доступа через HTTPS
приложения за ним в заголовках вместо IP клиента видят только IP nginx ingress
хотелось чтобы в этих заголовках передавался IP клиента приложениям...
X-Forwarded-For:
X-Real-Ip:
nginx-ingress по дефолту передает хедеры, X-Real-IP и полный набор X-Forwarded-*. Проверь tcpdump'ом.
Сергей
kubectl set image deployment/backend migrations=backend-production-cli:master init-codebase=backend-production:master php-fpm=backend-production:master --record
и он соответственно не может найти такие контейнеры, так как они в initContainers. как их правильно обновлять, подскажите пожалуйста, а то гугл ничего внятного не выдает