George
Фак Как быть?
Разнести по поддоменам?
Anonymous
Ищу более тонкий способ
George
Уже глянул, ты прав
Истио с envoy может спасут, но хз
George
Google -> grpc and https on the same domain nginx
George
Из описалово nginx
George
Publish multiple gRPC services through a single endpoint, using NGINX to inspect and route calls to each internal service. You can even use the same endpoint for other HTTPS and HTTP/2 services, such as websites and REST‑based APIs
Alexander
amazon-k8s-cni:v1.5.1-rc1
Rc1 - плохо )
Alexander
У меня amazon-k8s-cni:v1.5.3
Alexander
Обнови
George
Звучит будто должен уметь
Да, это из их описания. Но как он будет парсить тип протокола для меня пока загадка
George
И это точно должно быть в одном объекте ингрес описано
George
Ну, мне так кажется
Anonymous
У него в аннотации он указан
George
У него в аннотации он указан
Реши сначала задачу - как это сделать в обычном nginx. Дальше ты можешь в ингресс хоть кусок конфига вставить статически
Denis
Обнови
можно в личку пообщатся?
Anonymous
Реши сначала задачу - как это сделать в обычном nginx. Дальше ты можешь в ингресс хоть кусок конфига вставить статически
Сделал. grpc_pass на нужный location и все. ingress-nginx так не конфигурит, понятно Видимо свой конфиг придется монтировать
Anonymous
Или kubernetes-ingress от самих nginx, там из коробки вроде конфигурит
.
👍
Нужна ли мне опция type: LoadBalancer? Если у меня свое железо (извините за надоедливые вопросы)
George
У тебя их нет, но можешь заюзать проект metallb - для костыльной отказоустойчивости на онпремисах
.
Я так понимаю, что это интеграция с облачными лб
просто называется как то вкусно) глаза мозолит. Не мог не спросить чтобы не юзать его
Kane
Всем привет Хочу попробовать развернуть kubernetes на виртуальных машинах внутри hetzner virtual cloud, чисто поиграться и посмотреть как оно. Насколько это реально? Как я понял из истории чата, сам кластер поднять не проблема (как минимум в single-master режиме), но дальше начинаются нюансы с заворачиванием входящего извне трафика внутрь k8s кластера. Опять же из истории чата я понял что более-менее простой вариант это на части нод кластера у которых есть "внешние" адреса, запускать nginx-ingress поды. Перед этими nginx-ingress'ами можно на отдельном инстансе поставить nginx или haproxy на него направить трафик из вне и уже он будет балансировать трафик между доступными nginx-ingress'ами. Поправьте если я неправильно понял или есть более простые варианты.
Kane
Прошу прощения за нубский вопрос, возможно здесь не принято их задавать. В таком случае сразу его удалю. Кто-нибудь использует кубернетес на железе? Такой случай: арендованное железо, хостинг Hetzner, доступа к свитчам и роутерам соотвесвтенно нет, и возможности такой не дают. Кластер поднять то поднял, некоторые мелкие приложения из compose файлов трансформировал в абстракции кубернетес и задеплоил. А вот как на них трафик пустить, это не очень понятно. Знаю про metalb, но там либо вариант с BGP на роутерах к которым доступа нет, либо L2 сеть которой строго говоря тоже нет (есть VLAN) между хостами, и как я понял metallb должен иметь какой-то пул адресов, которые назначает на определенные ноды. В принципе закупить можно адресов, но для их переключения требуется обращаться в API hetzner, и я не могу понять, могу ли я кастомизировать metallb чтобы он так делал. Подумываю nginx на отдельном хосте поднять, и тулзу к нему написать, которая смотрит в API kubernetes и узнает для какого приложения на какие ноды направлять трафик, но мне кажется должно быть что-то по проще. Я думал с ingerss nginx могу сделать что-то подобное. Например обозначить какую-то группу нод - (ноды для ingerss), которые будут смотреть наружу портами 80, 443 и направлять трафик на нужные поды, но так и не понял, можно ли это сделать вообще. Направьте пожалуйста в правильную ли я сторону вообще копаю.
Дмитрий, какая у вас в итоге схема получилась?
Dmitry
Дмитрий, какая у вас в итоге схема получилась?
ингрессы торчат наружу с помощью hostPort, стоят на отдельных серверах с помощь nodeAffinity, также на этих серверах установлены tollerations чтобы левые поды не залетали.
Kane
а я так понял у вас железные сервера все таки, да?
Марат
Если не хочется прямо руками ставить кубик, а поковыряться уде в готовом, то нормально ставится при помощи hetzner-kube, даже с ha мастерами
Dmitry
а я так понял у вас железные сервера все таки, да?
да, но есть немного виртуалок в облаке, для того чтобы там автоскейлится, также там стоят мастера, так как на жирных нодах не видел смысла их ставить.
Kane
и как у вас полет за это время? это у вас там прод?
Марат
хм, пошел смотреть что это
Потом туда же накатить https://github.com/hetznercloud/csi-driver для провижинга pv
Dmitry
и как у вас полет за это время? это у вас там прод?
пока на стадии миграции, серьёзного прода на этом пока что нет
Марат
У меня там дев, пока работает)
Kane
Если не хочется прямо руками ставить кубик, а поковыряться уде в готовом, то нормально ставится при помощи hetzner-kube, даже с ha мастерами
спасибо!, выглядит интересно, но хочется руками хотя бы поставить, а то если где-то надломится надо же будет влезать и чинить)))
Kane
Еще вопрос, дока Kubernetes Hard Way от K.Hightower я так понимаю была написана давно, насколько она актуальна относительно текущей версии k8s?
Kane
там конечно не хецнер, но выглядит интересным квестом
Dmitry
Еще вопрос, дока Kubernetes Hard Way от K.Hightower я так понимаю была написана давно, насколько она актуальна относительно текущей версии k8s?
мне кажется имеет смысл запарится, чтобы внутрях разобраться. Но я например и без этого разобрался. Если бы я сейчас изучал kubernetes с нуля, я бы посоветовал себе изучить сначала как им пользоваться, то есть именно запускать на нем свои приложения, изучил бы абстракции, и только потом бы изучал как его деплоить и как оно внутри работает
Kane
а может есть какая-то свежая community edition версия?
Dmitry
Во, я к тому и писал Примерно так же было
да, когда знаешь как им пользоваться, гораздо проще с ним разбираться глубже.
Kane
ок, вопросов вроде больше нет)) спасибо всем за помощь
Kane
но если есть что добавить, обязательно пишите
Dmitry
Гг, у меня обычно также всегда происходит, поставил, запустил, поехал, пошел читать документацию
ну вот я на этом "поставить" очень долго тупил. Поставил его в виртуалке, а потом надо какой-то сетевой плагин, какой-то csi, какой-то ingress. И в итоге уходил разбираться как это ставить и как оно работает. А надо было просто взять готовый кластер например в gke и на нем тренить
Kane
там же лавэ надо разве нет? я нищий парень((
Dmitry
а только потом разбираться как внутри всякие cni работает
Dmitry
Dmitry
ну есть подешевле вроде, у DC может.
Kane
там же бесплатно на год дают
какая неожиданная роскошь, не думал что так вообще бывает😂
Dmitry
ну там в пределах разумного, дают как бы 300$, и трать их как хочешь
Dmitry
ещё книжечка есть : kubernetes в действии. Хорошая.
Kane
ага, нашел в приаттаченых файлах
Dmitry
ну и конечно можно его просто задеплоить не думая, каким нибудь kubespray, на виртуалках, я правда не знаю, можно ли там csi поставить какой-нибудь
Kane
кстати да, рассматривал kubespray вроде даже попадались гайды с установкой на виртуалках
Kane
с flannel вроде как ставится и работает
.
мне кажется kubeadm не сложный, зачем нужен kubespray?
Kane
про rook слышал, но насколько я знаю ceph если оно развалится (а оно точно развалится на виртуалках) то я его не соберу 😂
Kane
👍🏿согласен ))
Lucky SB
мне кажется kubeadm не сложный, зачем нужен kubespray?
настроить sysctl, поставить докер, добавить доп. обвес, тюнинг и свистелки. в случае кубадма - все это придется делать руками или писать свой кубспрей.
Kane
Если не хочется прямо руками ставить кубик, а поковыряться уде в готовом, то нормально ставится при помощи hetzner-kube, даже с ha мастерами
а можно такой финт исполнить? например я создаю нужное количество виртуалок терраформом, и далее запускаю hetzner-kube и передаю список машин ему для послеующего развертывания куба
Kane
судя по встроенной в бинарник хэлпе - нет, нельзя
Kane
о можно указать --master-server-type, --worker-server-type - в принципе то что я искал
Марат
Да, можно разных типов мастера и ноды, но ннльзя мастер с функциями ноды