не было бы k8s на baremetal, задача стояла такая же. Там куча разных классических решений.

можно через cloudflare даже

видимо нужно переформулировать мысль

почему я вот поднял deployment ingress-nginx и если сейчас подыму второй то как будут работать правилла которые создаются в ресурсе ingress

почему я вот поднял deployment ingress-nginx и если сейчас подыму второй то как будут работать правилла которые создаются в ресурсе ingress

daemonset нужен, да будут работать

daemonset нужен, да будут работать

а причем тут daemonset ?

daemonset это паттерн 1 под на 1 ноду

нене я имел ввиду что я хочу поднять второй чтобы мягко перевести на другой ip адрес

Правила буду рабоать на обоих ингресс-контроллерах

на 1 ноде 2 ip?

Это тут при чем?

Если нет, то это задача 2 ingress-controller в deaemonset на двух нодах. Оно само плавно переедет.

Такое впечатление, что вы создали не сущетсвующуюп проблему и пытаетесь её решить странными методами

Я так понимаю демон сетом вы пытаетесь гарантированть запуск подов на разных нодах?

а вот такой вопрос когда используешь внутренний nginx-ingress как если поднять еще один правила ingress будут на оба распространяться ?

у них есть свои class

Это тут при чем?

при том, что зачем-то человек ххочет deployment

Вай нот?

В ч>м проблема?

ты когда в аннотациях для Ingress пишешь kubernetes.io/ingress.class: nginx - они привязываются к nginx с классом nginx

можно переопределить класс и указывать в нужных тебе внутренних ингрессах другую аннотацию

ты когда в аннотациях для Ingress пишешь kubernetes.io/ingress.class: nginx - они привязываются к nginx с классом nginx

да спасибо я уже чуть понял

да спасибо я уже чуть понял

тут хороший пример https://github.com/kubernetes-incubator/external-dns/blob/master/docs/tutorials/public-private-route53.md

нене я имел ввиду что я хочу поднять второй чтобы мягко перевести на другой ip адрес

трафик на другую ноду будет приходить? вообще ingress nginx controller собирает конфиг для nginx из описаний ingres resources. при этом он может ограничится каким то ns. сколько реплик ты там запустишь или сколько раз задеплоишь и каких kind - твое дело. самый простой вариант - daemonset + hostnetwork. так можно получить везде nginx ingress, который откроет 80 443 tcp порты

В ч>м проблема?

в том, что если сверху балансер, то стоит гарантировать, что на нодах под балансером будут поды. И под такие задачи есть daemonset

Ребят, а kubernetes ingress nginx умеет http2 без ssl?

nginx сам по себе может, но наверное придется хернуть свой шаблон

Всем привет! Помогите разобраьтся, есть 4 сервера (1 мастер 3 воркера), есть 4 внешних ip. Почему при таком конфиге весь трафик на 80 и 443 идет на nginx со ВСЕХ 4-ех ip-шников?

externaIPs только один, а порты 80 и 443 почему-то работают как nodePort (приниют запросы со всех четырех ip и шлют в сервис nginx-a)

как можно отдебажить kops, если он после смены типа инстанса, старую ноду прибил, а новую не создал? И теперь ig висит как READY, но ready nodes = 0, при том что минимум 1

это амазон?

Подскажите, в какое место Kubernetes вы добавляете static, которая обычно рядом с nginx лежит? на ingress? собираете отдельный контейнер nginx со статикой? или же статика в контейнере с приложением?

Подскажите, в какое место Kubernetes вы добавляете static, которая обычно рядом с nginx лежит? на ingress? собираете отдельный контейнер nginx со статикой? или же статика в контейнере с приложением?

у нас какая-то статика на s3 лежит, какая-то в контейнере с frontend приложением

отдельно контенером nginx или через minio. пока не определился на 100%

это амазон?

нет, это провайдер без поддержки внешнего LB

нет, это провайдер без поддержки внешнего LB

тогда зачем делать type: LoadBalancer?

у нас какая-то статика на s3 лежит, какая-то в контейнере с frontend приложением

походу все так =)

Подскажите, в какое место Kubernetes вы добавляете static, которая обычно рядом с nginx лежит? на ingress? собираете отдельный контейнер nginx со статикой? или же статика в контейнере с приложением?

В s3 и оттуда клиенты забирают ее

походу все так =)

ingress или свой контейнет nginx забирает статику с S3?

ingress или свой контейнет nginx забирает статику с S3?

ingress -> nginx со статикой

ingress -> minio

minio это свой s3

тогда зачем делать type: LoadBalancer?

Сразу так было сделано и в принципе работало.. до такого момента как на остальные ip не понадобилось тоже заиспользовать 80порт под другие сервисы

Сразу так было сделано и в принципе работало.. до такого момента как на остальные ip не понадобилось тоже заиспользовать 80порт под другие сервисы

копипаста из доки, у меня тоже так было. Там просто будет сервис в вечном pending. Работает как ClusterIP

ingress -> nginx со статикой

это 2 разных контейнера? ingress это nginx. его нельзя использовать для раздачи статики?

кстати у меня норм, pinding ip на новом сервисе которому нужен 80

это 2 разных контейнера? ingress это nginx. его нельзя использовать для раздачи статики?

в теории можно использовать, но будет сильно неудобней. Типа для каждого фронта часто нужен особенный config. nginx в отдельном контейнере со статикой отлично решает задачу. как htaccess

в теории можно использовать, но будет сильно неудобней. Типа для каждого фронта часто нужен особенный config. nginx в отдельном контейнере со статикой отлично решает задачу. как htaccess

спасибо

о люди добрые и умные подскажите пожалуйста в чем может быть разница в этих анотациях к ingress ingress.kubernetes.io/cors-allow-credentials: "true" ingress.kubernetes.io/cors-allow-origin: '*' ingress.kubernetes.io/enable-cors: "true" kubernetes.io/cors-allow-credentials: "true" kubernetes.io/cors-allow-origin: '*' kubernetes.io/enable-cors: "true”

У одного контроллера есть опция --annotations-prefix ingress.kubernetes.io, а другого нет.

У одного контроллера есть опция --annotations-prefix ingress.kubernetes.io, а другого нет.

а где и как вообще это описывается опзиональность и работа с анотациями

Здесь: https://github.com/kubernetes/ingress-nginx/tree/master/docs

а где и как вообще это описывается опзиональность и работа с анотациями

в helm чарте под это есть отдельная value

в helm чарте под это есть отдельная value

да я больше вопрос о контроллерах так как еще напрямую не имел с ними работу я так понял это какая то отдельная сущность у кубера

А Кубер от DO уже обсудили? Выглядит фантастически дёшево

да я больше вопрос о контроллерах так как еще напрямую не имел с ними работу я так понял это какая то отдельная сущность у кубера

контроллеры? отнюдь, это просто контейнеры

контроллеры? отнюдь, это просто контейнеры

да но которые управляются аннотациями ?

да но которые управляются аннотациями ?

аннотациями управляется скорее loadbalancer и то, как твой контроллер будет с Ingress работать

А Кубер от DO уже обсудили? Выглядит фантастически дёшево

Что по ценам? Просто не смотрел даже

А Кубер от DO уже обсудили? Выглядит фантастически дёшево

ну наверное как и везде цена просто за виртуалки там они дешевле чем gcloud aws azure в раза 2-3

И ничего за контроллер платить не надо

ну наверное как и везде цена просто за виртуалки там они дешевле чем gcloud aws azure в раза 2-3

У aws сразу предлагают кластер за $200+ ha, не нашел как сделать тестовый подешевле

И ничего за контроллер платить не надо

гугле вроде тоже за контроллер не платишь только виртуалки

А как дам DO себя чувствует? Я с него увел даже свои проекты, потому что бан по ip не удобен.

Пишем обвязки и перепокупаем по 40 машин)

Пишем обвязки и перепокупаем по 40 машин)

пока не попадётся ip вне списка?

вот за мониторинг вопрос, прометей и к8, хочу мониторинг нод, для этого юзают node-exporter, однако, в поле instance я вижу только ip:port, что логично для job role: pods, значит ли это, что надо скрейпить их из job role: nodes ?

пока не попадётся ip вне списка?

агаг

агаг

вам бы награду за костыли))

В хорошем смысле)

Я не додумался бы

У ДО есть свои прелести для нас, потому мы не готовы просто взять и выкинуть его за борт

А ещё до дешевый, и это огромное преимущество для мелочи

не особо дешевле гугла, а кроме того DO Spaces - это out-of-tree модуль, да и preemptible нет

DigitalOcean Kubernetes does not yet support auto-scaling. брямс...

:C

преемтибл хост гугловый 1 cpu/ 3.75 RAM стоит в финке 8 баксов в месяц. Для куба один фиг преемтибл они или нет

вы evict делаете для pod'ов на preemtible нодах перед выключением ноды?

ничего такого не настраивал

понятно. просто для kubernetes смерть ноды неожиданность. и никакой соломки по умолчанию gcp не подстилает. никаких drain и crodon не происходит.

нет не подстилает - отправляет на ноду сигнал. Тут сразу гуглится статья, где люди меняют дефолтный нод пул на такой в котором по сигналу нода лезет в куб и дрейнит себя - можно сделать, но я ничего такого не держу, что не переживает вырубания ноды