Виктор
Warning VolumeMismatch 9s (x3 over 30s) persistentvolume-controller Cannot bind to requested volume "app-standart-pv": storageClassName does not match о чем тут речь?
Виктор
из pv StorageClass: standard
Виктор
из pvc StorageClass: standart
Tadeusz
Летучий Голландец. В облаках.
лишь бы не голландский штурвал, а в прочем, пофиг)
Andrey
лишь бы не голландский штурвал, а в прочем, пофиг)
На логотип Kubernetes теперь только под таким углом могу смотреть. :3
Tadeusz
Ахахах! точно блин
Konstantine
Господа, подскажите плиз куда копать. Разворачиваю кластер c kubectl v1.16.0 по kelseyhightower (но на виртуалках vmware) всё работает, за исключением CoreDNS. Поды, сервис и конфиг мапа в неймспейсе kube-system крутятся, ошибок не наблюдаю. 10.32.0.10 - Cluster-IP CoreDNS svc Проверяю так: $ kubectl exec -ti busybox -- cat /etc/resolv.conf search default.svc.cluster.local svc.cluster.local cluster.local nameserver 10.32.0.10 options ndots:5 $ kubectl exec -ti busybox -- nslookup kubernetes Server: 10.32.0.10 Address 1: 10.32.0.10 nslookup: can't resolve 'kubernetes' command terminated with exit code 1 Ожидаю увидеть ошибку, а не вижу: $ for p in $(kubectl get pods --namespace=kube-system -l k8s-app=kube-dns -o name); do kubectl logs --namespace=kube-system $p; done .:53 2019-12-05T15:10:19.805Z [INFO] plugin/reload: Running configuration MD5 = f64cb9b977c7dfca58c4fab108535a76 2019-12-05T15:10:19.805Z [INFO] CoreDNS-1.6.2 2019-12-05T15:10:19.805Z [INFO] linux/amd64, go1.12.8, 795a3eb CoreDNS-1.6.2 linux/amd64, go1.12.8, 795a3eb .:53 2019-12-05T15:10:19.861Z [INFO] plugin/reload: Running configuration MD5 = f64cb9b977c7dfca58c4fab108535a76 2019-12-05T15:10:19.861Z [INFO] CoreDNS-1.6.2 2019-12-05T15:10:19.861Z [INFO] linux/amd64, go1.12.8, 795a3eb CoreDNS-1.6.2 linux/amd64, go1.12.8, 795a3eb ConfigMap так выглядит: apiVersion: v1 kind: ConfigMap metadata: name: coredns namespace: kube-system data: Corefile: | .:53 { errors health ready kubernetes cluster.local in-addr.arpa ip6.arpa { pods insecure fallthrough in-addr.arpa ip6.arpa ttl 30 } prometheus :9153 forward . /etc/resolv.conf cache 30 loop reload loadbalance } /etc/resolv.conf воркер ноды выглядит так: nameserver 8.8.8.8 что я делаю не так? сорян за длинную портянку)
Блин, если не прослоупочил - похожая проблема была, добавил в конфиг upstream /etc/resolv.conf
Konstantine
Господа, подскажите плиз куда копать. Разворачиваю кластер c kubectl v1.16.0 по kelseyhightower (но на виртуалках vmware) всё работает, за исключением CoreDNS. Поды, сервис и конфиг мапа в неймспейсе kube-system крутятся, ошибок не наблюдаю. 10.32.0.10 - Cluster-IP CoreDNS svc Проверяю так: $ kubectl exec -ti busybox -- cat /etc/resolv.conf search default.svc.cluster.local svc.cluster.local cluster.local nameserver 10.32.0.10 options ndots:5 $ kubectl exec -ti busybox -- nslookup kubernetes Server: 10.32.0.10 Address 1: 10.32.0.10 nslookup: can't resolve 'kubernetes' command terminated with exit code 1 Ожидаю увидеть ошибку, а не вижу: $ for p in $(kubectl get pods --namespace=kube-system -l k8s-app=kube-dns -o name); do kubectl logs --namespace=kube-system $p; done .:53 2019-12-05T15:10:19.805Z [INFO] plugin/reload: Running configuration MD5 = f64cb9b977c7dfca58c4fab108535a76 2019-12-05T15:10:19.805Z [INFO] CoreDNS-1.6.2 2019-12-05T15:10:19.805Z [INFO] linux/amd64, go1.12.8, 795a3eb CoreDNS-1.6.2 linux/amd64, go1.12.8, 795a3eb .:53 2019-12-05T15:10:19.861Z [INFO] plugin/reload: Running configuration MD5 = f64cb9b977c7dfca58c4fab108535a76 2019-12-05T15:10:19.861Z [INFO] CoreDNS-1.6.2 2019-12-05T15:10:19.861Z [INFO] linux/amd64, go1.12.8, 795a3eb CoreDNS-1.6.2 linux/amd64, go1.12.8, 795a3eb ConfigMap так выглядит: apiVersion: v1 kind: ConfigMap metadata: name: coredns namespace: kube-system data: Corefile: | .:53 { errors health ready kubernetes cluster.local in-addr.arpa ip6.arpa { pods insecure fallthrough in-addr.arpa ip6.arpa ttl 30 } prometheus :9153 forward . /etc/resolv.conf cache 30 loop reload loadbalance } /etc/resolv.conf воркер ноды выглядит так: nameserver 8.8.8.8 что я делаю не так? сорян за длинную портянку)
Примерно так конфиг начал выглядеть. data: Corefile: | .:53 { errors health ready kubernetes cluster.local in-addr.arpa ip6.arpa { pods insecure upstream /etc/resolv.conf fallthrough in-addr.arpa ip6.arpa ttl 30 } prometheus :9153 forward . /etc/resolv.conf cache 30 loop reload loadbalance }
Konstantine
Без понятия, почему coredns начинает игнорить search в resolv.conf, но в v1.16 уже два раза наталкивался.
Konstantine
Офигенно печально, что у кубика нету LTS релизов.
Sn00part
чо поставил то и LTS )
Revolman
не мой случай похоже, пробовал уже апстрим добавлять )
Revolman
Да не в адреналине дело, скорее метод проб и ошибок уже начался)
Lucky SB
с мастера не проходит на кластер-ип [revolman@controller-0 ~]$ dig @10.32.0.10 kubernetes.default.svc.cluster.local. ; <<>> DiG 9.11.4-P2-RedHat-9.11.4-9.P2.el7 <<>> @10.32.0.10 kubernetes.default.svc.cluster.local. ; (1 server found) ;; global options: +cmd ;; connection timed out; no servers could be reached а на под проходит [revolman@controller-0 ~]$ dig 10.200.0.150 ; <<>> DiG 9.11.4-P2-RedHat-9.11.4-9.P2.el7 <<>> 10.200.0.150 ;; global options: +cmd ;; Got answer: ;; ->>HEADER<<- opcode: QUERY, status: NXDOMAIN, id: 26504 ;; flags: qr rd ra; QUERY: 1, ANSWER: 0, AUTHORITY: 0, ADDITIONAL: 1 ;; OPT PSEUDOSECTION: ; EDNS: version: 0, flags:; udp: 4000 ;; QUESTION SECTION: ;10.200.0.150. IN A ;; Query time: 68 msec ;; SERVER: 192.168.0.10#53(192.168.0.10) ;; WHEN: Чт дек 05 18:59:47 MSK 2019 ;; MSG SIZE rcvd: 41 а с воркера ок [revolman@worker-0 ~]$ dig @10.32.0.10 kubernetes.default.svc.cluster.local. ; <<>> DiG 9.11.4-P2-RedHat-9.11.4-9.P2.el7 <<>> @10.32.0.10 kubernetes.default.svc.cluster.local. ; (1 server found) ;; global options: +cmd ;; Got answer: ;; WARNING: .local is reserved for Multicast DNS ;; You are currently testing what happens when an mDNS query is leaked to DNS ;; ->>HEADER<<- opcode: QUERY, status: NOERROR, id: 56866 ;; flags: qr aa rd; QUERY: 1, ANSWER: 1, AUTHORITY: 0, ADDITIONAL: 1 ;; WARNING: recursion requested but not available ;; OPT PSEUDOSECTION: ; EDNS: version: 0, flags:; udp: 4096 ;; QUESTION SECTION: ;kubernetes.default.svc.cluster.local. IN A ;; ANSWER SECTION: kubernetes.default.svc.cluster.local. 30 IN A 10.32.0.1 ;; Query time: 1 msec ;; SERVER: 10.32.0.10#53(10.32.0.10) ;; WHEN: Чт дек 05 18:57:13 MSK 2019 ;; MSG SIZE rcvd: 117
Токо щас заметил, что ты неправильно запрс на под сделал. И не факт что работает. Так что проблема может быть не в куб покси, а cni плагине
Revolman
Так надо было? тогда не работает $ dig @10.200.0.150 kubernetes.default.svc.cluster.local. ; <<>> DiG 9.11.4-P2-RedHat-9.11.4-9.P2.el7 <<>> @10.200.0.150 kubernetes.default.svc.cluster.local. ; (1 server found) ;; global options: +cmd ;; connection timed out; no servers could be reached
Konstantine
Так надо было? тогда не работает $ dig @10.200.0.150 kubernetes.default.svc.cluster.local. ; <<>> DiG 9.11.4-P2-RedHat-9.11.4-9.P2.el7 <<>> @10.200.0.150 kubernetes.default.svc.cluster.local. ; (1 server found) ;; global options: +cmd ;; connection timed out; no servers could be reached
Есть такое впечатление, что у тебя сеть сломалась. В логах фланнела ничего странного? Включи лог кореднс, ему запросы вообще приходят?
Oleh
Думаю можно сначала пингануть любой под, если пинг есть то копать в сторону прокси куба
Oleh
если нет - сеть
Konstantine
Думаю можно сначала пингануть любой под, если пинг есть то копать в сторону прокси куба
Они в 95% случаев на пинг не отвечают. Так что не показатель, увы
Konstantine
Хотя, от настроек плагина зависит
Oleh
поды не отвечают на пинг, первый раз такое слышу
Revolman
с воркера есть пинг, с мастера нет
Konstantine
поды не отвечают на пинг, первый раз такое слышу
Блин, сам затестил. Реально, ввожу народ в заблуждение - отвечают, на трёх разгых плагинах.
Konstantine
И с чего я это взял? :)
Oleh
сервисы на iptables не отвечают
Konstantine
сервисы на iptables не отвечают
О, точно, понял, с чем перепутал.
Oleh
а что в логах плагина сетевого?
Oleh
на мастере
Revolman
да, похоже с сетью проблема, завтра со свежей головой просмотрю конфигурацию
Sergey
Кстати кто юзает cloudian s3 аплайнсы?
Konstantine
Кстати, в рамках флейма и флуда - а кто-нибудь видел рабочий FC provisioner? То, что FC кубом напряму поддерживается, я знаю и использую, а вот пров для FC - это было бы круто
Sergey
Как у них под копотом? Не минио ли случаем? Как масштабируются?) Можно конечно и цеф раскрутить))) но имхо геммороя больше можно огребсти а потом плакаться в сообществе их как развалил кластер и потерял данные
Revolman
а что в логах плагина сетевого?
не устанавливал плагин, по ману создаётся бридж и лупбек интерфейсы, если я конечно не совсем наркоман и всё правильно понял https://github.com/kelseyhightower/kubernetes-the-hard-way/blob/master/docs/09-bootstrapping-kubernetes-workers.md
Revolman
нет
Oleh
тогда как оно без сети будет работать?
Revolman
бридж сделал и маршруты прописал, почему без сети? грубо говоря я могу задеплоить какой-нибудь nginx и получить на него доступ по nodeport
Revolman
опять же я не утверждаю, что я всё сделал правильно, вполне могу ошибаться )
Revolman
Спрошу при встрече) В общем я понял свой косяк, нужно с устройством сети разбираться, спасибо за подсказки
Валентин
Господа, подскажите плиз куда копать. Разворачиваю кластер c kubectl v1.16.0 по kelseyhightower (но на виртуалках vmware) всё работает, за исключением CoreDNS. Поды, сервис и конфиг мапа в неймспейсе kube-system крутятся, ошибок не наблюдаю. 10.32.0.10 - Cluster-IP CoreDNS svc Проверяю так: $ kubectl exec -ti busybox -- cat /etc/resolv.conf search default.svc.cluster.local svc.cluster.local cluster.local nameserver 10.32.0.10 options ndots:5 $ kubectl exec -ti busybox -- nslookup kubernetes Server: 10.32.0.10 Address 1: 10.32.0.10 nslookup: can't resolve 'kubernetes' command terminated with exit code 1 Ожидаю увидеть ошибку, а не вижу: $ for p in $(kubectl get pods --namespace=kube-system -l k8s-app=kube-dns -o name); do kubectl logs --namespace=kube-system $p; done .:53 2019-12-05T15:10:19.805Z [INFO] plugin/reload: Running configuration MD5 = f64cb9b977c7dfca58c4fab108535a76 2019-12-05T15:10:19.805Z [INFO] CoreDNS-1.6.2 2019-12-05T15:10:19.805Z [INFO] linux/amd64, go1.12.8, 795a3eb CoreDNS-1.6.2 linux/amd64, go1.12.8, 795a3eb .:53 2019-12-05T15:10:19.861Z [INFO] plugin/reload: Running configuration MD5 = f64cb9b977c7dfca58c4fab108535a76 2019-12-05T15:10:19.861Z [INFO] CoreDNS-1.6.2 2019-12-05T15:10:19.861Z [INFO] linux/amd64, go1.12.8, 795a3eb CoreDNS-1.6.2 linux/amd64, go1.12.8, 795a3eb ConfigMap так выглядит: apiVersion: v1 kind: ConfigMap metadata: name: coredns namespace: kube-system data: Corefile: | .:53 { errors health ready kubernetes cluster.local in-addr.arpa ip6.arpa { pods insecure fallthrough in-addr.arpa ip6.arpa ttl 30 } prometheus :9153 forward . /etc/resolv.conf cache 30 loop reload loadbalance } /etc/resolv.conf воркер ноды выглядит так: nameserver 8.8.8.8 что я делаю не так? сорян за длинную портянку)
У вмваре ж по дефолту не работают mac'и, о которых не знает гипервизор. Так что если у тебя такой сетевой плагин, который каждому контейнеру генерит свой мак - не заведется.
Konstantine
Я б чем-нибудь уровнем повыше решал, навроде https://argoproj.github.io/argo/
Посмотрю-попробую. Пока мечусь уровнем ниже - то ли чарт написать, то ли просто в один джоб всё упихать. Надо потестить.
Grigorii
Давно заметил, что kubelet генерит каждые 4 сек такую бесполезную инфу: Using node IP: xx.xx.xx.xx Кто-нибудь пытался убрать это?
Konstantine
https://github.com/tektoncd/pipeline
А вот это вот дествительно интересно. Вкурю поподробнее
Anton
А вот это вот дествительно интересно. Вкурю поподробнее
https://argoproj.github.io/argo-cd/ Ну и это тогда тоже 🙂
G72K
https://github.com/tektoncd/pipeline
КМК просто жопа дебажить это
George
и про flux расскажите еще
Bohdan
Докладываю буквами: Пересобрал кластер не на k3s а на RKE и rio взлетанул https://web-svc-v0-default.qznmac.on-rio.io:30753/
Sn00part
продлжайте наблюдение!)
Dmitry
Скоро куб на фитнес браслете запускать будешь
Bohdan
Не не, мне деплоить rio app щас научиться, потом покурит РКЕ что бы добавлятьноды но не убивать точто там есть и все)
Vitalii
КМК просто жопа дебажить это
Почему? Вроде один небольшой оператор
𝚔𝚟𝚊𝚙𝚜
Офигенно печально, что у кубика нету LTS релизов.
А зачем вам LTS? На мой взгляд куб и так довольно стабильное API предоставляет
𝚔𝚟𝚊𝚙𝚜
Evolution is better than stagnation
Anton
Узбагойся! Вроде он летом всего 150 у.е. стоил, не? (Ща 300)
на этой неделе скидки, курс плюс экзамен — 189
Anton
https://training.linuxfoundation.org/cybermonday
⎈
на этой неделе скидки, курс плюс экзамен — 189
Да, бывают пер одически. Спасибо
Anton
я кста сдал позавчера ска, подтверждаю — экзамен несложный
G72K
Почему? Вроде один небольшой оператор
Эти пайплайны размазанные по десятку CRD, переиспользованием тасков, условия, ресурсы и проч. Обычный .gitlab-ci.yml то проблемно отладить,когда он на тысячу разрастается , а тут вообще мрак
Alexander
А что вы думаете про jetbrains space?
Anonymous
Доброй ночи, кто может поделиться какой либо интересной статьей на тему сетевого взаимодействия между микросервисами
Anonymous
В смысле ? Сеть она и есть сеть
Ну в стиле microservices communication patterns )))) Пытаюсь некоторые вещи освоить, gRPC, Istio, но понимаю, что для начала лучше заложить фундамент
NM
Ричард Стивенсон + sre books и docker in action. В этих books весь фундамент
Sergey
Коллеги, подскажите плиз.
Sergey
Кто-нибудь юзал в K8S , Traefic CE но в кластерном режиме)) тоесть несколько инстансов )))
Sergey
Просто интересно будет ли он так работать т.к. посути это прокся ) которая отслеживает изменения в CRD )))
Sergey
Просто интересно есть ли смысл брать EE , из-за ванильного дашбордика отслеживания состояния кластера ))))) и дополнительного Control Plane