Lucky SB
крч, это тоже оговорка да. надо было написать слово токен)
угу. а то сгенерить клиентский сертифкат с нужными CN,OU, да подписать его корневым сертификатом кластера - это не то, что нагугливается на раз-два )
A1EF
149327йсьл!
Aleksandr
оч глупый вопрос, кто стартует контейнер апишки на мастере?) где читать логи этой радости?)
Solyar
а, стоп
Aleksandr
нифига
Aleksandr
кублет стартует после
Solyar
systemctl ?
Aleksandr
и ему уже нужна апишка
Aleksandr
systemctl ?
скорее всего, я просто забыл как юнит называется =)
Aleksandr
failed to run Kubelet: cannot create certificate signing request: Post https://10.10.0.11:6443/apis/certificates.k8s.io/v1beta1/certificatesigningrequests: dial tcp 10.10.0.11:6443: connect: connection refused
Aleksandr
да ктоб статью до конца читал)
Solyar
Эх
Solyar
да ктоб статью до конца читал)
https://github.com/kubernetes/kubeadm/issues/581
Solyar
Есть решение для кластера 1.8 и выше
Solyar
Может поможет)
Aleksandr
а для кублета перегенерил?
перегенерил, кублет стартанул
Aleksandr
https://github.com/kubernetes/kubeadm/issues/581
а, это я видел. оч хороший контент
Aleksandr
вроде все стартануло, только...
Aleksandr
kubectl get no Unable to connect to the server: x509: certificate is valid for 10.96.0.1, 192.168.122.6, not 10.10.0.11
Solyar
kubectl get no Unable to connect to the server: x509: certificate is valid for 10.96.0.1, 192.168.122.6, not 10.10.0.11
видимо серты нужно было реньюить с флагами адресов ?
Solyar
Блин, хочу сломать теперь что-то чтобы перегенерить
Aleksandr
я мог уже поломать предыдущей попыткой починить сертификаты
Solyar
Всё равно же новые выпускаешь
Aleksandr
так я ж тогда и конфиг какой-то правил. было это пол года назад, хрен вспомнишь
Solyar
"Bash history as IaaC"
Aleksandr
•°•
Котоны, а чем k8s лучше стека от хашикорп? Из-за хайпа этот вопрос не так очевиден.
Fedor
Всем привет! Обновил сертификаты через kubeadm aplha, теперь вопрос - как сертификат кублета продлить?(
Fedor
статья выше была
Статья или ишью?
Solyar
Статья или ишью?
Сначала статья, не поможет в ишью
Fedor
Bonik
кублет стартует после
Кубелет апишку поднимает. По манифестам.
Fedor
Сначала статья, не поможет в ишью
Т.е только через джоин? Кластер не протух, все серты через кубадм альфа обновились, кроме /var/lib/kubelet/pki/kubelet.crt
Bonik
А вот еще вопрос. Только у меня кубеадм при любом чихе прописывает в манифест апишки адрес первого мастера в качестве bind-address?
Bonik
В смысле, на всех мастерах? Или я где-то в конфиге умудрился талантливо облажаться?
Aleksandr
Кстати, проверь bind-address в манифесте.
не могу. я пароль забыл от сервака. блядь. занавес.
Aleksandr
Чемпионский заход.
да вот сижу диву даюсь. главное я этот пароль только для этой лабы и использовал. первые 2 ребута вводил норм, на третий ребут забыл.
Aleksandr
Aleksandr
ну или опять отложить на пол года починку кластера =)
Александр
На мастер-ноде нужно оставлять место для образов или они будут занимать место только на воркерах?
Aleksandr
если мастер разрешено как ноду использовать - то нужно место. если нет - то нет
Aleksandr
по-умолчанию запрещено.
Aleksandr
т.е. ты сам должен понимать что делаешь и своими руками включить на мастере функцию ноды
MRY
Есть линки на бестпрактисы по настройке и утилизации PersistentVolumes, желательно для AWS EKS ??? Заранее Благодарен.
Fedor
ещё пробовал ключ дополнительно дописывать в аргументы юнита (который про ротейт) - тоже рестарт не помогает В конфиге rotateCertificates: true
Fedor
а если нет?(( 1.15.9
вообще прикол в том, что апгрейдил кластер руками все ноды по очереди с 1.14.х до 1.15.9 - сертификаты обновились только на 1 мастере из 3х, странная история, остальные руками пришлось. но вот с кублетом запара чего-то совсем
Andrey
https://kubernetes.io/docs/tasks/administer-cluster/kubeadm/kubeadm-certs/#check-certificate-expiration On nodes created with kubeadm init, prior to kubeadm version 1.17, there is a bug where you manually have to modify the contents of kubelet.conf. After kubeadm init finishes, you should update kubelet.conf to point to the rotated kubelet client certificates, by replacing client-certificate-data and client-key-data with: client-certificate: /var/lib/kubelet/pki/kubelet-client-current.pem client-key: /var/lib/kubelet/pki/kubelet-client-current.pem https://kubernetes.io/docs/tasks/administer-cluster/kubeadm/kubeadm-certs/#automatic-certificate-renewal Warning: Prior to kubeadm version 1.17 there is a bug where the default value for --certificate-renewal is false for the kubeadm upgrade node command. In that case, you should explicitly set --certificate-renewal=true.
M
Всем привет! У меня есть вопрос по ОС для кубернетеса. Во многих мануалах nvidia установка происходит на убунту 16.04. Это обязательно надо соблюдать?
Anonymous
Привет, подскажите как происходит обарщение к dns'у внутри кластера пожалуйста, все ли запросы проходят через dns или надо напрямую к нему обращаться?
M
Имеется сервер Nvidia Dgx. Надо установить Kubernetes и Docker Nvidia. Все делаю по мануалам не идет. У меня Убунту 18.Почитал на сайте пишут рекомендация для кубера убунту 16.04.
Валентин
Привет, подскажите как происходит обарщение к dns'у внутри кластера пожалуйста, все ли запросы проходят через dns или надо напрямую к нему обращаться?
есть /var/lib/kubelet/config.yaml, в нем есть опция ClusterDNS. То, что в ней указано, будет передано в любой под, у которого прописано значение опции dns в ClusterFirst. Соответственно под будет спрашивать этот днс сервер. По дефолту там адрес сервиса с coredns и прописан.
Валентин
Привет, подскажите как происходит обарщение к dns'у внутри кластера пожалуйста, все ли запросы проходят через dns или надо напрямую к нему обращаться?
ты можешь сконфигурировать под, чтобы он обращался к какому-то другому DNS. Например тому, что у ноды куба в resolv.conf описан
Egor
Всем Здрасть. у кого-нибуть kube-system kube-apiserver, гадил такими ошибками? watch chan error: etcdserver: mvcc: required revision has been compacted\n","stream":"stderr","time" Как их победить?
Анатолий
коллеги, подскажите есть ли возможность и если есть, то как посмотреть логи сервиса. интересуют "access.log" и "error.log"?
Марат
сервис эфемерен
Марат
логи у контейнеров
Анатолий
сервис эфемерен
т.е. у него нет пода как у ингреса?
Марат
нет
Марат
если proxy-kube на iptables, то сервис это просто пара правил в iptables
Марат
поэтому он и не пингуется)
Анатолий
спасибо
ᴅᴏᴏᴘᴇʀᴀᴛᴏʀ
Всем привет! Парни, у кого-нибудь есть опыт запуска Gitlab-раннера в Kubernetes?
ᴅᴏᴏᴘᴇʀᴀᴛᴏʀ
привет, есть, с RBAC мучаешься?)
К счастью (или сожалению), нет
ᴅᴏᴏᴘᴇʀᴀᴛᴏʀ
С монтированием volume в создаваемый контейнер)
ᴅᴏᴏᴘᴇʀᴀᴛᴏʀ
оно просто не работает Сделано все по документации: https://docs.gitlab.com/runner/executors/kubernetes.html#using-volumes Тем не менее, почему-то это решение не работает Для чего мне это нужно: gradle при сборке проекта подтягивает зависимости, и бывает так, что сервера на которых хостятся зависимости, не работают, и мы не можем собирать проекты по независящим от нас причинам Поэтому хотелось бы при первом запуске нового раннера сохранять кэш в контейнере в директорию, а директория эта примонтирована с хост-машины Соответственно после запуска новой сборки, gradle не будет скачивать зависимости, а брать из кэша
ᴅᴏᴏᴘᴇʀᴀᴛᴏʀ
и вот незадача - раннер работает в кубере, сборка идет, грэдл качает зависимости и локально у себя в контейнере кладет в известное место Но на хост-машине этих файлов нет, почему-то
Андрей
мне кажется, ты не туда копаешь. вольюмы не нужны, используй cache (https://docs.gitlab.com/ee/ci/caching/)
Андрей
мы кэш gradle сборок кладем в S3 бакет, он может шариться как между джобами, так и между разными раннерами