G72K
Anonymous
а thenewstack это разве не одна большая джинса из евангелистов которые впаривают друг дружке велосипеды придуманные в их подвалах маняфантазерами?
Anonymous
ой погодите я только что кажется все ойти описал, один Линус тру, но это неточно
Artem
а оператор же может как то передать метрики прометеусу, который живет вне кластера?
Михаил
Artem
мне надо поды мониторить, но cadvisor же не умеет инфу собирать с под?
Artem
cpu, mem, size?
Andrey
Artem
опа, спасибо
Andrey
опа, спасибо
Если схему не понимаешь, то она такая: cAdvisor embedded в Kubelet, Prometheus просто ходит в kubelet и выгребает всё оттуда.
Artem
спасибо, пойду разбираться
Light Mushroom
у кого-нибудь было, что pvc на aws не удалялись?
Light Mushroom
как лечить такое?
Light Mushroom
а подробней?
G72K
Обычно это значит, что какой то под использует его или куб думает что использует
Light Mushroom
хм
Andor
Дайте картинку про "деплойся в кубеня" пожалуйста
Light Mushroom
спасиб, подумаю
Stefan
подскажите плиз
если у меня траефик игресс контроллер находится в неймспейсе дефолт, а ингресс с доменом прометея находится в другом, то ему(ингрессу прометея) нужны какие-то лейблы? чтоб траефик смог выдать серт домену из другого неймспейса? или это не важно?
Zhyhanov
тут у ребят видел что путь для рединеспроб и лайвнес указывают как "/-/healthy"
Zhyhanov
что означает "/-/" кто может подсказать ?
Vadim
Antlar
Сборник ссылок на разбор падений кубера
http://amp.gs/V31Y
И похожая тема, но уже про serverless
http://amp.gs/V31x
#failure #stories #kubernetes #serverless
Vlad
Stefan
Antony 🇫🇷
подскажите пожалуйста чем/как симулировать нагрузку на кластер ?
Grigorii
нагрузку сетевую?
🚀iamp3🚀
Antony 🇫🇷
merci
Vadim
еще можно из https://github.com/openshift/svt вытащить нужные тесты
Artem
Artem
Может надо кому
Vlad
👍
John
Приветствую!
Подскажите, кто нибудь сталкивался с 5сек таймаутом при резолве днс из пода? Беда иногда появляется в обычном кластере (1.10.11) и очень сильно мешает в кластере с istio, там они появляются значительно чаще. Поймали на GKE и на своем железе
Andrey
John
а как побеждали?
Andrey
а как побеждали?
https://blog.quentin-machu.fr/2018/06/24/5-15s-dns-lookups-on-kubernetes/
John
почитаю
спасибо!
Andrey
Andrey
В случае, когда еще и istio - тут уже не знаю
Andrey
Если есть возможность, можно сначала попробовать ipvs заюзать, если еще не
Andrey
Хотя истио вроде на уровне сетевого неймспейса пода правилами iptables рулит...
Dmitry
а никто не видел грамотного обсера траефика в инете?
Dmitry
по пунктам
Dmitry
или сравнения с енвоем
Andrey
Unable to register node "k8s-nbg-1" with API server: nodes "k8s-nbg-1" is forbidden: node "k8s-hel-1" cannot modify node "k8s-nbg-1"
Может кто подскажет куда копнуть? Перелопачиваю кластер из инсталляции через kubespray в kubeadm ручками. Понятно, что работает NodeRestriction плагин, но почему kubelet подсовывает некорректное имя (первого мастера, которого переделал) - загадка. в kubelet.conf всё в порядке: user: system:node:k8s-nbg-1 и сертификат корректный. Пробовал даже с --hostname-override=k8s-nbg-1 - ноль результата
Vlad
Andrey
да, там всё ок, корректно
Vlad
а в etcd тоже корректно ?
Andrey
ага
Andrey
всё, нашел подлеца:
/var/lib/kubelet/pki # openssl x509 -in kubelet-client-current.pem -text -noout
тут некорректный сертификат
Maxim
Всем привет!
использую multus плагин и в определенных случаях вижу следующую ошибку при удалении пода
Error deleting network: Multus: Err in getting k8s network from pod: getPodNetworkAnnotation:
как я понимаю CNI плагин пытается удалить ресурсы, но натыкается на то, что под уже удален и недоступен.
собственно IP который использовался этим подом зависает навечно в "/var/lib/cni/networks/".
есть ли в кубере какой-то gc для сетевых ресурсов? для случаев когда cni не смог вычистить ресурсы.
Dmitry
Всем добрый день!
Кто-нибудь может подсказать как multiline stack trace от Java, который docker порезал на строки и упаковал в json, собрать обратно и отправить дальше в es/splunk?
Artem
Artem
как-то так https://sematext.com/blog/handling-stack-traces-with-logstash/
Dmitry
Спс. Попробую глянуть
Maxim
Aleksey
Господа, плз направьте меня, как можно разрешить резолв сервисов между namespace.
Хочу выделить чарт в отдельный неймспес, но ему надо ходить в другой сервис, который будет в дефолте
Andrey
Дык это
Andrey
сервис.неймспейс
Andrey
В 99% случаях работает по дефолту
Aleksey
Andrey
G72K
Aleksey
G72K
А кто столон пилит? Консалтинг какой)нибудь?
Aleksey
Pavel
Кто нибудь использовал OKD (OpenShift Origin) в продакшне?
Aleksey
сервис.неймспейс
или руки из жопы но из кастомного нэймспэйса не резолвит серви из дефолтного
George