Alexandr
13.1 - балансировщик
Niks
почему так мало плагинов в ранчере?
Vadim
[container runtime status check may not have completed yet., PLEG is not healthy: pleg was last seen active 5m36.3181714s ago; threshold is 3m0s.
Vadim
как эту проблему лечить? нода отваливается, все поды terminating но и остановиться не могут, есть на гитхабе обсуждения
George
почему так мало плагинов в ранчере?
Потому что их переделывают на csi? Это только гипотеза, если что
Vadim
но ваще куда надо было смотреть? я почитал, тут длиннющие переписке на гите есть
Dmitry
я уже ребутнул ноду
хз я бы дрейнул ноду, и смотрел бы логи все
Vadim
у меня 2 ноды сдохло, вторая с unable to ensure pod container exists: failed to create container for Failed to activate service 'org.freedesktop.systemd1': timed out (service_start_timeout=25000ms) поды в состоянии CreatingContainer висели
Anonymous
Скажите, как правильно добавить выполнение дополнительного скрипта в s2i? не хочу оверрайдить assemble, а больше ничего в голову не приходит (это правильный чат?)
Niks
Потому что их переделывают на csi? Это только гипотеза, если что
https://rancher.com/docs/rancher/v2.x/en/installation/options/feature-flags/
Niks
ура - появилось
George
а зачем ему айпи сообщать ? кхм или обязательно, чтобы с мастеров был доступ на кьюблет ?
George
т.е. я себе вижу так - кьблету на самом деле надо было бы просто сообщать уникальный айди свой, по которому его можно было идентифицировать
George
т.е. мы не сможем приджойнить к кластеру условно две ноды с одним айпи ?
G72K
не совсем понял
Кублет определяет на каком ИП к нему можно достучаться и определяет этот ИП неправильно
George
ну, а как тогда будет работать выбор на какую ноду по NodeIP шедюлить под ?
Отделение Bereke Bank
а зачем ему айпи сообщать ? кхм или обязательно, чтобы с мастеров был доступ на кьюблет ?
если с мастера не будет доступа на кубелет - как минимум ты не сможешь делать kubectl logs
G72K
В момент инициализации кластера?
В момент джоина . Ну и поле обновляемое по-моему , можете сами его попробовать изменить
George
ну, положим кьюблет за натом (ну, наркоманы - собрали так)
Отделение Bereke Bank
are you sure ?
да. потому что если кубелет запущен с невалидным сертом - при попытке запросить логи пода, запущенного на этой ноде - ты получишь ошибку серта
George
это другая история
G72K
are you sure ?
Инфа сотка. Exec и port forward тоже сломаются
Отделение Bereke Bank
are you sure ?
да банально - если у тебя kubelet preffered address type первым стоит Hostname, а с резолвом что-то не так - logs, exec обламываются
Отделение Bereke Bank
в принципе logs, exec и прочее подобное - не шибко нужная вещь. Но если ломается чтото, что куб делает у себя внутри (magic) - получится хуета
Alexandr
kubectl edit node kz-kwn03
Alexandr
Alexandr
вот что меня рубит получается?
Dmitry
этот адрес при инициализации ноды назначается. Либо cloud controller manager'ом если kubelet запускается с cloud-provider=external. Иначе вроде kubelet сам это делает
Dmitry
думаю он ищет через какой интерфейс идёт маршрут по умолчанию, и берет адрес этого интерфейса
Anonymous
Скажите, как правильно добавить выполнение дополнительного скрипта в s2i? не хочу оверрайдить assemble, а больше ничего в голову не приходит (это правильный чат?)
лучше все-таки оверрайдить assemble скрипт с вызовом оригинального в конце: .s2i/bin/assemble #!/bin/bash /do/some/stuff /usr/libexec/s2i/assemble
Solyar
При инициализации ноды явно указать IP нужно
Alexandr
Понял понял иду править все
Alexandr
спасибо большое
Alexandr
https://medium.com/@kanrangsan/how-to-specify-internal-ip-for-kubernetes-worker-node-24790b2884fd
Alexandr
вот тут тоже рассматривается мой кейс
Alexander
Был куб 1.15, хелм 2.14, манифесты с kind: Deployment и apiVersion:apps/v1beta2 Куб обновили до 1.16. Объекты с apiVersion:apps/v1beta2 куб сам обновил до apps/v1 (т.к. apps/v1beta2 устрел и отсутствует в 1.16) helm upgrade теперь ругается что "UPGRADE FAILED: failed decoding reader into objects: unable to recognize "": no matches for kind "Deployment" in version "apps/v1beta2"" При этом на входе в хельм уже обновлённые манифесты с apiVersion:apps/v1. Новые релизы с такими манифестами выкатываются без ошибки. Похоже что конфигмапы хельма сохранили манифесты со старым apiVersion. И это теперь мешает обновить релиз. Тут о том же: https://github.com/helm/helm/issues/7219 В одном из ответов есть ссылка на гист со скриптом который обновит конфигмапы хельма. Но отзывов особо нету. Кто-то сталкивался? Как-то можно выкрутиться?
Dmytro
что я делаю не так?
используешь ранчер?
Dmytro
Шедулися не по NodeIP
хммм а как будут работать DNAT/SNAT если один и тот же айпи в двух нод?
Alexander
а helm delete --purge и заново заинсталлить не вариант?
Вариант, но крайний. Хотелось бы без простоя сервиса выкрутиться.
Nikita
k8s service может указывать на другие service?
Dmytro
Вариант, но крайний. Хотелось бы без простоя сервиса выкрутиться.
вроде бы есть махинации чтобы заставить тиллер удалить старые ревизии https://github.com/helm/helm/issues/3414#issuecomment-361497289
Dmytro
т.е. по идее если выставить TILLER_HISTORY_MAX=0 то проблема исчезнет
Dmytro
k8s service может указывать на другие service?
через ExternalName можно даже не на другой сервис а произвольный dns name
Tuntsov
Ребятки, привет. Хочу rbac нарисовать для get pods а все неймспейсы. Создал юзера (kubeadm alpha kubeconfig user). Могу ли привязать кластерную роль к Kind: User, а не Kind: Goup?
Gabriel
Ребятки, привет. Хочу rbac нарисовать для get pods а все неймспейсы. Создал юзера (kubeadm alpha kubeconfig user). Могу ли привязать кластерную роль к Kind: User, а не Kind: Goup?
kind: ClusterRoleBinding apiVersion: rbac.authorization.k8s.io/v1 metadata: name: name-binding subjects: - kind: User name: name apiGroup: "" roleRef: kind: ClusterRole name: name apiGroup: ""
Nikita
через ExternalName можно даже не на другой сервис а произвольный dns name
там только один hostname можно указать, а мне надо несколько
Solyar
там только один hostname можно указать, а мне надо несколько
Из одного сервиса сослаться на несколько других?
Dmytro
тогда ингресс
Nikita
да
Nikita
ингресс конечно добавляет оверхед
Alexander
т.е. по идее если выставить TILLER_HISTORY_MAX=0 то проблема исчезнет
Спасибо! Попробовал с этой стороны зайти, но похоже что мимо, т.к. уже стояло TILLER_HISTORY_MAX=0
Dmytro
по идее если создать сервисы на которые ссылаться как ClusterIP то потом можно будет создать headless сервис и в endpoints ему вписать все эти ClusterIP
Solyar
Но выйдет дубоватая конструкция
Solyar
Может спасёт
G72K
хммм а как будут работать DNAT/SNAT если один и тот же айпи в двух нод?
Это не проблема куба. Ноды нормально зарегистрируются и будут принимать поды
Anonymous
Гайз, а что делать, чтоб вытащить метрики из подов? В какую сторону посмотреть? А то у меня автоскейл не идет, потому что hpa ниоткуда не может получить даже банально cpuutilization
Anonymous
я знаю, что heapster вроде устаревший варик
Alexander
https://github.com/DirectXMan12/k8s-prometheus-adapter отличная вещь
> DirectXMan12 Когда человек мечтал делать игры, творить искусство, но необходимость жрат заставила программировать на YAML.
Andrei
когда делаю kubectl get po -o wide есть колонка READINESS GA значения все <none> разве не должно быть результат проверки readinessProbe ? Он у меня проверяется.
Dmytro
Это не проблема куба. Ноды нормально зарегистрируются и будут принимать поды
только траффик не будет ходить к подам? ну так себе не проблема куба
Dmytro
/report @kvaps @SinTeZoiD