Vladimir ⚪️🔵⚪️
Я что-то не до конца понимаю, как у него конфигурируется, например, кеширование
Op
Server snippet Using the annotation nginx.ingress.kubernetes.io/server-snippet it is possible to add custom configuration in the server configuration block.
Anton
думаю заносить логику в nginx-ingress с кэшированием не самый лучший вариант
Vladimir ⚪️🔵⚪️
То есть, мне нужно поставить ingress один за другим что ли?
Vladimir ⚪️🔵⚪️
Один как кеширующий прокси, а второй как основной распределяющий траффик?
Vladimir ⚪️🔵⚪️
И я что-то не догоняю как мне из ingress перенаправить не в service, а в другой ingress
Solyar
Solyar
Это нормально работает
Vladimir ⚪️🔵⚪️
Странно что все боятся так делать
А есть пример рабочей конфигурации?
Vladimir ⚪️🔵⚪️
где ingress стоит за ingress
Solyar
У нас ingress — > reverse proxy —> services
Solyar
nginx -> nginx -> service
Vladimir ⚪️🔵⚪️
Ну, мне вот примерно такое сейчас и нужно сделать
Vladimir ⚪️🔵⚪️
Я думаю, что использовать в качестве реверсивного прокси
Vladimir ⚪️🔵⚪️
У него задача: 1) получить URL 2) переписать его в другой формат (распарсить регуляркой и собрать) 3) переслать запрос 4) закешировать ответ (Ключ: URL + некоторые из заголовков)
Vladimir ⚪️🔵⚪️
Можно это сделать средствами nginx, но я предполагал, что для этого понадобится поднимать дополнительный контейнер с nginx
Vladimir ⚪️🔵⚪️
И подумал, может есть решение помоднее
𝚔𝚟𝚊𝚙𝚜
Короче по итогам обновления на 1.16, пришлось проапдейтить следующие версии ресурсов: - apiVersion: apps/v1 kind: DaemonSet - apiVersion: apps/v1 kind: Deployment - apiVersion: apps/v1 kind: StatefulSet - apiVersion: policy/v1beta1 kind: PodSecurityPolicy - apiVersion: apps/v1 kind: StatefulSet - apiVersion: networking.k8s.io/v1beta1 kind: Ingress Также у меня сломался CNI, но зато CSI в этот раз работает нормально. Больше багов пока не заметил.
𝚔𝚟𝚊𝚙𝚜
https://github.com/kubernetes/kubernetes/issues/83114
𝚔𝚟𝚊𝚙𝚜
networkPlugin cni failed to set up pod "blablabla" network: error getting ClusterInformation: connection is unauthorized: Unauthorized, failed to clean up sandbox container "blablabla" network for pod "blablabla": networkPlugin cni failed to teardown pod "blablabla" network: error getting ClusterInformation: connection is unauthorized: Unauthorizedпока не разобрался из-за чего
dzmitry
Привет, после добавления неймспейса(раньше был дефолтный) к своему приложению(задеплоен в GKE), не могу поднять (kubectl apply ...) 2 реплики этого приложения, одна поднимается вторая отваливается по невозможности конектиться к редису, подскажите куда копать?
Lucky SB
Вау. даунгрейд кублета помог...
Lucky SB
https://github.com/kubernetes/kubernetes/issues/83114
у меня flannel с host-gw - обновление прошло без проблем
𝚔𝚟𝚊𝚙𝚜
И в 2018 тоже уже apps/v1 было
А не помнишь в каком релизе было добавленно?
Jain
сторадж это какойто бич кубера. Тестирую portwox. После 4 дней больше не провижиняться volumes :(
my2c portworx починили. А у них нечего так суппорт. Нафиг не послали.
Timur
пытаюсь засетапить свежую версию с помощью kubeadm и внешним etcd. Падает на этапе GET https://xxxx:6443/api/v1/nodes/hostname. Hardway видимо наше все
Lucky SB
А не помнишь в каком релизе было добавленно?
в 1.12 уже точно было. мне помнится что-то про цифры 1.9
𝚔𝚟𝚊𝚙𝚜
в 1.12 уже точно было. мне помнится что-то про цифры 1.9
да, проштудировал документацию, в 1.9 ещё было, а более ранней доки не нашёл
𝚔𝚟𝚊𝚙𝚜
с 1.9
спасибо
Marat
Друзья, подскажите, как можно получить токен prometheus, чтобы через curl делать запросы к api
Sebor▂▅▇█▓▒░
Коллеги, есть вопрос (в кубенях недавно): Верно ли я понимаю, что когда мы экспоузим сервис через nodePort, то запросы идут в первую очередь на поды соответствующей ноды?
Etki
Коллеги, есть вопрос (в кубенях недавно): Верно ли я понимаю, что когда мы экспоузим сервис через nodePort, то запросы идут в первую очередь на поды соответствующей ноды?
емнип там точно такие же правила разброса через iptables/ipvs, т.е. с этой стороны ничем не отличается от любого другого сервиса
Andrey
Это зависит от externalTrafficPolicy и умения внешнего балансера работать с хелсчеками, которые будут при установке значения в Local
Andrey
Т.е. раудробином уходит?
Зависит от того, кто рулит трафиком
Sebor▂▅▇█▓▒░
Зависит от того, кто рулит трафиком
У меня самая начальная инсталляция (через kubeadm с weave) Есть две воркер-ноды и под с двумя репликами (по одной на ноду) Как в этом случае идут запросы?
Sebor▂▅▇█▓▒░
А как и откуда ты их отправляешь?
Сделал экспоуз через nodeport и тыкаю курлом каждую ноду
Solyar
Сделал экспоуз через nodeport и тыкаю курлом каждую ноду
Сервис вне зависимости от ноды будет рандомно трафик кидать на живые поды
Andrey
Сделал экспоуз через nodeport и тыкаю курлом каждую ноду
Ну, на ту ноду трафик и идёт. Каждая из них по раундробину (дефолт) шлет трафик на один из подов. Где находится - неважно.
Sebor▂▅▇█▓▒░
Ага, значит нет приоритета сначала использовать поды ноды (для уменьшения трафика между воркерами)
Sebor▂▅▇█▓▒░
Andrey
Понял, буду читать про traffic policy
Потребует настройки балансера при условии отсутствия реплики пода на каждой ноде, на которую идёт трафик
Jain
Добрый день, а тут есть сервис провайдеры с шаред-кубом на проде для кастомеров? Как вы им доступы выдаете и контролите? Просто есть кастомеры которые хотят куб. Но нехотят кластер из нескольких нод ... им это дорого
G72K
Если кто-то говорит что можно, он либо ковбой либо шарлатан
Jain
я тоже против. Но нужна понятная (для продажников) аргументация. Иначе они это продадут, а техники потом страдать будут.
G72K
В теории можно, из коробки нельзя
Никак нельзя. Засрут etcd и всем труба настанет
Andrey
я тоже против. Но нужна понятная (для продажников) аргументация. Иначе они это продадут, а техники потом страдать будут.
Вам потребуется написать херову тучу расширений, объебы будут критичны с точки зрения секьюрити
𝚔𝚟𝚊𝚙𝚜
Andrey
я тоже против. Но нужна понятная (для продажников) аргументация. Иначе они это продадут, а техники потом страдать будут.
Так что обоснование реально звучит как "у нас тут не гугл и не амазон". Которые, кстати, такого не делают.
Jain
Я сегодня с десяток разных провайдеров проверил. И у всех "просто" вмки с кубером внутри. И с видемыми или нет мастерами
Andrey
Продавайте кастомерам аналог миникуба - все в одной ноде. И etcd, и мастер, и кубелет.
Andrey
Идею это уничтожает на корню, но формально...
Jain
+ ружьё и выстрел в колено :)
Andrey
+ ружьё и выстрел в колено :)
Ну а как ещё, если кубеня хотят, а несколько машин не хотят
Andrey
Зато не придется за кворумом у etcd следить
Andrey
Если падает - то падает все, Etcd, apiserver, SLI, SLO Дизастер обнимет всех крепко И днс с cm, и calico с сеткой
G72K
Барды в кубе
Dmitry
Ребята, всем добрый вечер. Поделитесь, пожалуйста, кто как blue/green deploy организовал?
Dmitry
Никак нельзя. Засрут etcd и всем труба настанет
квоту на ресрусы им поставьте. За увеличение квоты доп деньги =)
Jain
квоту на ресрусы им поставьте. За увеличение квоты доп деньги =)
Ну, квоты, network isolation, логины через "свои" ldap/ad/sso etc. шардовые lb это быстро делаеться. Я просто думаю они другдруга засрут как сказали выше в etcd или namespaces именна не поделят
Max
кто-нибудь скажите плиз, неужели для того чтобы сделать свой приватный helm chart, нужно разворачивать самому chart repository?) неужели на основе обычного git'a нельзя было сделать это?)
Dmitry
Ну, квоты, network isolation, логины через "свои" ldap/ad/sso etc. шардовые lb это быстро делаеться. Я просто думаю они другдруга засрут как сказали выше в etcd или namespaces именна не поделят
так если квота будет на ресурсы, они больше этой квоты не смогут создать ресурсов. Чем тогда засрут etcd? Ну а по честному, я бы не стал так делать))). Всмысле разным клиентам выдавать один кубер, да еще и за деньги. Точно проблемы будут. Тут еще интересно как они ингресы делить будут =). Один клиент может занять домен другого.
Alex
товарищи., подскажите: Открыл сервис через nodeport наружу, но нужно прикрыть для всего интернета кроме пары айпи. Как грамотно сделать? NetworkPolicy сходу не помог
Виктор
привет всем, сделал pvc по этой доке https://cloud.google.com/kubernetes-engine/docs/how-to/persistent-volumes/readonlymany-disks часть нагрузок не запускается googleapi: Error 400: RESOURCE_IN_USE_BY_ANOTHER_RESOURCE - The disk resource 'project/zones/europe-west4-a/disks/gke-cluster-5-pvc-6774576e-df43-42010aa40032' is already being used by 'projects//zones/europe-west4-a/instances/gke-cluster-default-pool-9x9f'
Виктор
Но в доке говорят Now, you can have multiple Pods on different nodes that can all mount this PVC in read-only mode.
Kane
Всем привет, столкнулся с проблемой разрешения DNS имен сервисов, подскажите советом куда копать. Картина выглядит так, есть фронтенд (vue+nginx) клиент идет во фронтенд, инициирует действие и фронт пытается обратиться к бэкенду через Service, но фронт не может разрешить имя и возвращает ошибку ERR_NAME_RESOLUTION_FAILED, типа нет резолва. Начал смотреть что с сервисом, запустил левый контейнер, проверил с него резолв сервиса и отклик самого бэкенда через этот самый сервис - работает как задумано. Пробовал говорить фронту использовать полное имя сервиса, типа backend.staging.svc.cluster.local - не помогло. При этом фронт также работает с другими ресурсами у которых есть паблик DNS имена - с ними проблем нет, резолвится и редиректит нормально. Подумал что наверно nginx в контейнере игнорит кубовский dns, прописал явно "resolver kube-dns.kube-system;", но не помогло. Также перед фронтом стоят haproxy + nginx-ingress. Может есть еще какие идеи?
Kane
товарищи., подскажите: Открыл сервис через nodeport наружу, но нужно прикрыть для всего интернета кроме пары айпи. Как грамотно сделать? NetworkPolicy сходу не помог
network policy вроде как не помогут - они только для регулировки трафика между подами. руками иптаблесом можно попробовать через nat правила - но имхо костыль