гайз, кто нибудь сталкивался с тем, что при переходе на gke возрос респонс тайм от аппликейшенов?

Между чем и чем?

https://github.com/kubernetes/kubernetes/pull/71355

спасибо, оно

А живёт кто в servers.com ?

пробовали взять серваки в мск - 2 месяца тянули так и не дали

у них типа переделка инфраструктуры

у нас там достаточно много baremetal. Хочется докупать виртуалки автоскейлером

Получить сагрить?

Скорее нет. Но с вопросом разобрался

А живёт кто в servers.com ?

А что нужно?

@fliperzero вы как-то скейлите виртуалки автоскейлером или забили на это?

Даже не начинали, но мы юзаем servers.com уже давно и хорошо знаем сапорт

@foxdalas какая локация у вас

@fliperzero ams,lux,mow

мы тоже хорошо знаем саппорт, но сейчас встал вопрос в том, что необходимо допиливать autoscaler под некоторые тонкости опенстека sc

Ответил в личку

А не смущает что у них 1 az?

у меня 3 кластера в разных регионах + 1 в aws

падение любого кластера не страшно, даже падение двух кластеров не страшно

Народ, а кто как мониторит ЕКS (интересует прометей)?

Народ, а кто как мониторит ЕКS (интересует прометей)?

Оператор.

Нужно ли поднимать контейнер CephFS Provisioner на каждой ноде кластера, если в качестве хранилища используется CephFS ?

Просто я вручную пытаюсь поднять provisioner. kube@v60116:~/ceph$ sudo docker run -ti -v /root/.kube:/kube -v /var/run/kubernetes:/var/run/kubernetes --privileged --net=host quay.io/external_storage/cephfs-provisioner /usr/local/bin/cephfs-provisier -master=https://**.***.***.***:6443 -kubeconfig=/kube/config -id=cephfs-provisioner-2 I0103 09:10:29.365736 1 cephfs-provisioner.go:411] Creating CephFS provisioner ceph.com/cephfs with identity: cephfs-provisioner-2, secret namespace: I0103 09:10:29.366833 1 leaderelection.go:185] attempting to acquire leader lease default/ceph.com-cephfs...

И в таком состоянии контейнер висит уже минут 10

На другой ноде всё поднялось сразу же

если там leaderelection то точно нет, один выбирается лидером, остальные ждут когда лидер умрет

короче если у меня kube-prometheus и кубер версии аж 1.8, у меня много сломается?

падение любого кластера не страшно, даже падение двух кластеров не страшно

Как данные реплицируете?

короче если у меня kube-prometheus и кубер версии аж 1.8, у меня много сломается?

Зачем так жить?

А ты думаешь я без причины сваливаю?

если там leaderelection то точно нет, один выбирается лидером, остальные ждут когда лидер умрет

Там 1 лидер, 2 ноды всего. На лидере контейнер работает

ребят, кто чем менеджит сертификаты на gke? попроовал нативными инструментами гугла, так там лоадбалансер не умеет редиректить....

сертменеджер как-то для двух аппликейшенов не хочется поднимать

короче если у меня kube-prometheus и кубер версии аж 1.8, у меня много сломается?

Dafuq be kube-prometheus? prometheus-operator, не?

Это оно же

Нет времени объяснять

Оператор - контроллер, кубепрометей - способ всё это принести в твой кубер

Ты много чести воздаёшь способу упихнуть это в один Namespace.

https://github.com/coreos/prometheus-operator/blob/master/Documentation/compatibility.md

Это к чему щас было?

Кстати, где можно почитать о том, как именно kubernetes решает, на какой ноде кластера создать новый контейнер?

короче если у меня kube-prometheus и кубер версии аж 1.8, у меня много сломается?

Я в курсе какие версии кубера поддерживает оператор, мой вопрос был про другое

Кстати, где можно почитать о том, как именно kubernetes решает, на какой ноде кластера создать новый контейнер?

https://medium.com/@dominik.tornow/the-kubernetes-scheduler-cd429abac02f

@zuzzas можно воспринимать кубе-прометей как дистрибуцию прометей-оператора, в коробке сразу куча всякой кастомизации, например вот https://github.com/coreos/prometheus-operator/tree/master/contrib/kube-prometheus#cluster-creation-tools

не топлю за него, у меня сейчас прометей просто руками поставлен, без оператора, прост хочу его попробовать

Я уже понял свою ошибку. Мы своё на базе этого сделали просто и больше не привязаны к ним.

Гайз, а кто-то разворачивал кубер копсом в гугле, с не стандартными сетевыми провайдерами?

я пробовал копс с амазоном

ну с амазоном оно более-менее, а вот на гугле не удается запустить, допустим, с калико

Копс же сдох?

А что-нибудь известно по интеграции BPF в kube-proxy и заменит ли он IPVS в итоге?

Копс же сдох?

какие ваши доказательства?

какие ваши доказательства?

Он уже поддерживает кубер новее 1.10?

Если да, то это прекрасно

Последний раз проверял пару месяцев назад, поддерживал 1.10 и старее

https://github.com/kubernetes/kops#compatibility-matrix

Он уже поддерживает кубер новее 1.10?

вчера запилили

Ооо, ништяк тогда!

Спасибо за известие :)

Рад что ошибался

1.11 предыдущая версия умела

Alpha 😐

1.11 вроде и свежее

1.11 релиз

и в авсе работает очень даже ок (а вот с GCP есть ряд проблем)

1.11 предыдущая версия умела

то бета была

а, уже написали, извиняюсь, плохие интернеты

vagrant@vagrant:~/k8s/speed/kops-aws-calico$ kops version Version 1.11.0 (git-2c2042465)

А она когда вышла?

неделю-две назад

Я прост где-то в октябре проверял

Ну тогда я тоже пропустил

А у кого-то получалось его заставить сохранять состояние на файловую систему, а не в баккет?

Тфстейт?

Это же терраформ сохраняет, посмотри какие у него ручки есть

А есть какой-нибудь подробный туториал по организации мониторинга Kubernetes с внешним Prometheus?

Чето не нашел 😒

Так же

Так же

А как быть с автодискаверингом и прочими радостями?

А как быть с автодискаверингом и прочими радостями?

Авторизуйтесь и наслаждайтесь.

Авторизуйтесь и наслаждайтесь.

спасибо, кэп. А есть такое, где уже какие-то чуваки понапрягались, а я просто скопирую их результат?