Alexander
ключи раскидать самое долгое
Alexander
PX91 помоему
Grigorii
PX91 помоему
В пределах одного ДЦ ceph?
Alexander
да
Stefan
господа, подскажите, пожалуйста, а как можно удалить определенные метрики из kubelet?
Andor
давай подробнее кейс
Михаил
@SinTeZoiD ^
Да я что-то уже устал
Stefan
давай подробнее кейс
наблюдаю странное, вольюмы удалены полностью с k8s кластера, в promql только акутальные метрики, подобный баг был в старом кластере(1.9 версии), обходился временно рестартом kubelet сервисов и багнутые метрики исчезали, а теперь в 1.12.7 версии кластера даже это не помогает грешил на хранилище метрик, но после того как сделал курлом запрос в api /api/v1/admin/tsdb/delete_series?match[]=kubelet_volume_stats_available_bytes, метрики с хранилища удалились, в графане тоже перестало отображаться, но через буквально 10 сек все старые метрики вернулись..
Stefan
Ты на 100% уверен что этих волюмов нет?
на все 200% прошелся kubectl get pv/pvc, всё акутальное только
Stefan
нигде ошибок или залипших на стадии удаления вольюмов нет
Stefan
понятно...
Stefan
с графаной нужно возиться, не корректно составлена выборка и переменные
Andor
Хаха!
Andor
Но в версиях до 1.9 был баг что из метрик не вычищались волюмы, это я сам натыкался
Vladimir
Всем привет. Кто-нибудь может помочь с ingress? Прокси по ip на другой сервер. Но до сервера не доходит и возвращается 503
Artem
Всем привет. А мультикаст в каком-нибудь cni можно статично пророутить? Например all-routers на все поды 🙂
✖️
Господа. Объясните почему не работает. Есть кластер кубера . Есть кластер спарка Если отпралять ПИ в спарк-сабмит с мастером спарка и модом клиент, то возвращает ПИ Если отправлять с мастером кубер и модом кластер, то поднимает под на ноде, выполняется. умирает приходит сообщение(1) если зайти через юай в логи, то пишет "The selected container has not logged any messages yet." Есть спарк джоба, которая выполняется на мастере спарка и моде клиент. (ее задача отправить сообщение на почту). Она отправляется С мастером Кубера ничего не происходит Нид э хэлп
Семён
Ребят, что лучше брать - больше воркеров на слабых машинках или меньше машин с большим количеством ресурсов? При условии что конечный объем оперативы и количество cpu одинаковое? Теорикрафт.
cent
Коллеги, кто-то клепает секреты через vault ? Как всю эту кухню можно дебажить? У меня секрет не создается. Куда смотреть?
Семён
Зависит от того что запускать
Апликухи стейтлес, очень легковесные, можно кучу реплик запускать
cent
Нету волта - нет проблем
Ну, а если серьезно)
Puma
Апликухи стейтлес, очень легковесные, можно кучу реплик запускать
Ну тогда надо рассматривать риски что будет если умрет один воркер три воркера и так далее
Семён
Оке, спасибо. Тоже склоняюсь к большому количеству воркеров с нормальным автоскейлом.
Andor
Ну, а если серьезно)
Думаешь я шучу?
Andrey Kharintsev
Настраиваю кластер Kubernets установил weave-net
Andrey Kharintsev
На рабочих нодах постоянно падает ощибка
Andor
Жаль
Andrey Kharintsev
Readiness probe failed:
Andrey Kharintsev
Подскажите, сталкивался кто-нибудь с ошибками weave-net
Andrey Kharintsev
?
Dmytro
(побуду Андоркой) это соцопрос?
Andor
(побуду Андоркой) это соцопрос?
да не, он лог показывал, но в логе ссылка http://127.0.0.1/... и бот эти сообщения удаляет
Dmytro
может про ссылки стоит дописать в описание чата? а то не первый раз люди об это спотыкаются
Dmytro
с другой стороны, кто те описания читает
cent
Подскажите, сталкивался кто-нибудь с ошибками weave-net
https://kubernetes.io/docs/tasks/debug-application-cluster/determine-reason-pod-failure/
cent
А vault-operator сам умеет прописывать секреты? Или лучше все же через consul-template забирать секреты из vault ?
JyBvciAxID0gMSAtLQo=
Негоже vault в k8s хранить
Tarlan
Привет ребята. Кто то исполь зуетя Rancher в production? Какие другие инструменты вы можете пореkомендовать для мониторинга и менеджмента . Спасибо
Andor
а в ранчере не тот же самый кубер внутри что ли?
Tarlan
Да можна как rancher Os или как контейнр
Incognito
https://banzaicloud.com/blog/inject-secrets-into-pods-vault/
Incognito
а еще вот https://github.com/bitnami-labs/sealed-secrets по секретам
Ilya
Привет. как я могу с помощью go-templates ready или не ready мой под? не совсем понимаю как это работает
Andor
что?
Ilya
что?
это ко мне?
Иван Бойко
Парни, ищу народ на хорошие деньги под серьезные буржуйские проекты. Нужно реальное знание Kubernetes (EKS и AKS и тд). Есть работа и деньги. Но нет времени все делать самому.
Evgenii
ребят, а кто-нибудь гитлаб хельмом в минишифте разворачивал или в кубе?
Evgenii
чет я столько копий уже там сломал
Иван Бойко
Да. Но GitLab AutoDevOps вообще автоматом все делает.
Evgenii
не, мне нужно в последствии в okd origin это дела развернуть будет( миграции фейлятся и из-за этого все рубишные компоненты приказывают долго жить на этапе init
Evgenii
фейлится с failed to create subPath. Причем subPath на emptyDir (in memory) volume
Evgenii
мб есть идеи как потраблшутить? А то я иссяк
Andor
это ко мне?
возможно
Artyom
А если кластер, поднятый kubeadm, спустя год превратился в тыкву, то его реально вернуть обратно к жизни обновлением сертификатов? Если тем же kubeadm делать renew
Artyom
Или только по новой kubeadm init делать?
Artyom
Что-то гуглю, рецепта в оф доке не вижу
Ilya
возможно
я имелл ввиду, как мне с помощью go-templates или jsonpath вытащить данные о том рабочий под или нет
Ilya
А сделать-то ты что пытаешься?
Хочу в пайплайне дженкинс удостовериться что под рабочий и деплой норм прошёл
Ильдар
решение факапа с протухшими сертификатами на куб кластере Крайне полезное обсуждение. https://github.com/kubernetes/kubeadm/issues/581 #kubernetes
Artyom
Спасибо большое
Иван Бойко
kubectl wait pods --for=condition=Ready --all --timeout=60s -l $POD_LABELS
𝚔𝚟𝚊𝚙𝚜
Кто-нибудь знает: есть ли способ прибить kube-dns гвоздями к мастерам через kubeadm конфиг?
Alex
хм, а есть идеи, почему KUBECONFIG=~/.kube/customConfig kubectl get pods -n some_namespace внезапно начало возвращать эту ошибку: error: You must be logged in to the server (Unauthorized)
Alex
буквально пару дней назад всё ок было
Vadim
https://blog.russellbryant.net/2019/04/30/metal%C2%B3-metal-kubed-bare-metal-provisioning-for-kubernetes/
Andor
ещё один
Alex
ещё один
м, сертификаты протухли типа?