Mikhail
если правильно снапшот сделан то почему нет, но судя по вопросу вряд ли
Пока вопрос носит теоретический характер. Хочется понять, насколько такой вариант вообще жизнеспособен.
Mikhail
Как я понимаю, есть 2 режима: 1) упал один из миньёнов 2) упал один из мастеров
Mikhail
В первом случае, наверное, из снапшота поднять можно. Во втором - скорее всего вывод узла из кластера с повторным вводом. А вообще хз. Хочется понять, как куб бэкапить и ресторить
Mikhail
iaas, ci/cd
Не понял. Каждый раз при смерти одного из узлов пресобирать кластер куба имхо не лучший вариант. Чем мне тут помогут две аббревиатуры тоже не понятно.
Lucky SB
если мастер с контролплейном - добавить новый будет чуток сложнее
Lucky SB
у меня еще ни разу не умирал. но чисто теоретически... с помощью etcdctl убить в etcd упавший узел, и потом добавить новый.
Tuntsov
Да. но зачем ?
Проще мастера добавлять?
Lucky SB
Проще мастера добавлять?
если умеешь - то это проще. чем молится на то, что в бекапе у тебя консистентый /var/lib/etcd
Даня
ребят, как боретесь с точками в аннотациях при выводе логов из кубера дальше на логстеш или флюентд?
Даня
кастомными велосипедами?
Даня
filebeat->logstash?
Даня
или напрямую в эластик?
Andrey
filebeat->logstash?
Да, но чисто ради скриптоты
Даня
а то я нашел какое то говно на луа, вроде как работает, но пихать такое к себе не хочется. функционала уже год как нет для замены ссаного символа
Даня
понял, спасибо
Oleg
потом на мастере в /etc/kubernetes/manifest - на каком IP работает API сервер (6443) ?
ip корректный. мастер заинитился на 10.0.0.2 - приватном адресе
Oleg
а нода пытается джоинится с внешнего адреса
Oleg
и почему то node-ip в конфиге демона не хочет отрабатываать
Lucky SB
а нода пытается джоинится с внешнего адреса
роутинг на ноде посмотри. может она на 10.0.0.2 только через внешку могет
Lucky SB
и почему то node-ip в конфиге демона не хочет отрабатываать
т.е. netstat -ntpl показывает, что кублет только на внешнем адресе слушает ? там кстати EXTRA_ARGS могут и переопределятся, пока доедут до запуска. посмотри в /proc какое значение у процесса кублета
Даня
Да, но чисто ради скриптоты
https://github.com/fabric8io/fluent-plugin-kubernetes_metadata_filter
Andrey
https://github.com/fabric8io/fluent-plugin-kubernetes_metadata_filter
Ради замены ингест-пайплайнов эластика я юзаю логстэш
Отделение Bereke Bank
Кто нибудь сталкивался с таким? kubelet пишет следующее, хотя ему явно указано в unit-файле использовать --container-runtime=remote и --container-runtime-endpoint=unix:///var/run/containerd/containerd.sock Adding pod path: /etc/kubernetes/manifests Watching apiserver Connecting to docker on unix:///var/run/docker.sock Start docker client with request timeout=15m0s failed to retrieve docker version: Cannot connect to the Docker daemon at unix:///var/run/docker.sock. Is the docker daemon running? Using empty version for docker client, this may sometimes cause compatibility issue. failed to run Kubelet: failed to create kubelet: failed to get docker version: Cannot connect to the Docker daemon at unix:///var/run/docker.sock. Is the docker daemon running?
Отделение Bereke Bank
Пора спать. Я daemon-reload не сделал 🤦‍♂️
NM
А почему containerD а не crio ?
Oleg
ребят, а как подебажить днс в кубе? у меня нету резолва, по каким то причинам не достукивается root@hello-minikube-5559b69c87-wfzpj:/# telnet 10.96.0.10 53 Trying 10.96.0.10... ^C поды рабочие pod/coredns-5c98db65d4-n29st 1/1 Running 0 19m 192.168.3.130 kube-master-ubuntu-4gb-nbg1 <none> <none> pod/coredns-5c98db65d4-v5rb8 1/1 Running 0 19m 192.168.3.129 kube-master-ubuntu-4gb-nbg1 <none> <none> и сервис NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE SELECTOR service/kube-dns ClusterIP 10.96.0.10 <none> 53/UDP,53/TCP,9153/TCP 19m k8s-app=kube-dns
Oleg
с ноды какой ? это же внутренний адрес куба
Oleg
ну с ноды нету, а разве должно? root@kube-master-ubuntu-4gb-nbg1:~# ping 10.96.0.10 PING 10.96.0.10 (10.96.0.10) 56(84) bytes of data. ^C --- 10.96.0.10 ping statistics --- 1 packets transmitted, 0 received, 100% packet loss, time 0ms root@kube-master-ubuntu-4gb-nbg1:~# telnet 10.96.0.10 53 Trying 10.96.0.10...
Oleg
я просто апплаю готовый calico.yaml ничего больше не создаю
Oleg
ща я снес мастер, попробую iptables почистить
Oleg
сек
G72K
По имени сервиса у вас кубднс, а поды coredns, может где-то нестыкуется
Oleg
это я смотрел, там label=kube-dns
Oleg
вот вижу на ноде интерфейс tunl0: flags=193<UP,RUNNING,NOARP> mtu 1440 inet 192.168.3.128 netmask 255.255.255.255 tunnel txqueuelen 1000 (IPIP Tunnel) RX packets 0 bytes 0 (0.0 B) RX errors 0 dropped 0 overruns 0 frame 0 TX packets 0 bytes 0 (0.0 B) TX errors 0 dropped 0 overruns 0 carrier 0 collisions 0
Oleg
это какой то интерфейс калико?
Oleg
видимо с калико что то все таки
Oleg
Readiness probe failed: calico/node is not ready: BIRD is not ready:
𝚔𝚟𝚊𝚙𝚜
ну с ноды нету, а разве должно? root@kube-master-ubuntu-4gb-nbg1:~# ping 10.96.0.10 PING 10.96.0.10 (10.96.0.10) 56(84) bytes of data. ^C --- 10.96.0.10 ping statistics --- 1 packets transmitted, 0 received, 100% packet loss, time 0ms root@kube-master-ubuntu-4gb-nbg1:~# telnet 10.96.0.10 53 Trying 10.96.0.10...
Проверять сервис на доступность пингом в Kubernetes это всё равно что кидать капитошки из окна и делать выводы о погоде в Антарктике по реакции прохожих.
Oleg
:)
Oleg
а как ?
𝚔𝚟𝚊𝚙𝚜
а как ?
нужно стучаться по порту который использует сервис, в вашем кейсе лучше всего подойдёт dig или nslookup
George
я уж не говорю, что когда ставишь какой-нибудь богомерзский металлб, то виртуальный айпи не факт, что должен пинговаться вообще
Зуфар
Ку! Кто может помочь с настройкой CD в gke из gitlab?
George
ну. конкретные вопросы
Зуфар
конкретных вопросов нет, пытаюсь разобраться, что к чему. В данный момент пытаюсь настроирть сборку докер образа. и получаю ошибку $ docker info Client: Debug Mode: false Server: ERROR: Cannot connect to the Docker daemon at tcp://localhost:2375. Is the docker daemon running? errors pretty printing info
Зуфар
В gitlab-ci.yml ... image_build: stage: docker image: name: docker:latest entrypoint: ["/bin/sh", "-c"] variables: DOCKER_HOST: tcp://localhost:2375 services: - docker:dind script: - docker info - docker login -u "${CI_REGISTRY_USER}" -p "${CI_REGISTRY_PASSWORD}" "${CI_REGISTRY}" - docker build -t "${CI_REGISTRY_IMAGE}:latest" . - docker tag "${CI_REGISTRY_IMAGE}:latest" "${CI_REGISTRY_IMAGE}:${CI_COMMIT_REF_NAME}" - test ! -z "${CI_COMMIT_TAG}" && docker push "${CI_REGISTRY_IMAGE}:latest" - docker push "${CI_REGISTRY_IMAGE}:${CI_COMMIT_REF_NAME}" ...
George
мне лень искать
George
юзай образ с конкретной указанной версией
George
либо 18.03 - если хочешь старое поведение (порт 2375)
George
либо 19.03, если готов перевешивать на 2376
George
и да - у тебя он в кубернетес или в докере?
Зуфар
Я на gitlab.com подключил кибер из gke собственный раннер в кибере
George
https://t.me/kubernetes_ru/200649 - вот это все равно не отменяется
Владимир
xfs_repair — кто знает за сколько 11 Тб обработает на вскидку?
Eduard
У мну 500 гб ссд работал часов 6
Alexander
50 оттенков установки Helm чартов
George
из того, что я здесь вижу - будто самые нормальные - через CRD
George
куб описывает свое состояние через объекты куба
Aleksandr
Всем привет. Я новичок в k8s. Поставил openvpn через helm, но на клиенте нет ни интернета, ни даже кластерной сети куба. На хостах кластера ip forward есть. Сеть Calico рабочая. Клиент коннектиться, но кроме пода openvpn с адресом кластера 10.*** больше ничего нет. Подскажите куда копать ? т.е. трафик за под не выходит....я так понимаю.....
Aleksandr
разернут на метале....
Aleksandr
через kuber-spray
Aleksandr
openvpn - для того чтобы можно было на своей машине коннектиться к сервисам подам кубера. Про proxy forward через kubectl я знаю......но хотелось бы именно vpn