Hankey
тогда бери оба
Спасибо! Один уже взял, осталось второй
Andrey
Спасибо! Один уже взял, осталось второй
он у тебя и так в kubelet встроен, надо только метрики скрейпить
Hankey
он у тебя и так в kubelet встроен, надо только метрики скрейпить
а как скрейпнуть метрики? т.е. REST API можно выдергивать?
Hankey
у меня prometheus на отдельной машине. Т.е. достаточно будет выкинуть через ingress?
Andrey
у меня prometheus на отдельной машине. Т.е. достаточно будет выкинуть через ingress?
я бы рекомендовал херануть в кластер прометей, натравить его на кублеты и в твой отдельный тянуть метрики через федерацию
Andrey
мути дискавери своих нод через любой механизм прометея и дергай с них метрики
Hankey
для kube-state-metrics достаточно было добавить ingress, и теперь прометей собирает. Но от них картина не полная
Andrey
у тебя надо собирать метрики с каждой ноды
Andrey
какой ингресс
Hankey
у тебя надо собирать метрики с каждой ноды
вариант норм будет, если cadvisor запилить DaemonSet'ом?
Andrey
еще раз
Andrey
на кой хрен тебе cadvisor ставить, если он у тебя в кублет встроен?
Hankey
на кой хрен тебе cadvisor ставить, если он у тебя в кублет встроен?
если встроен, то нет смысла. Но нужен кто-то, кто будет забирать метрики с нод
Andrey
варианты я тебе выше написал
Sn00part
https://kubernetes.io/docs/tasks/debug-application-cluster/resource-usage-monitoring/
Anonymous
ребята а подскожите я создал для неймспеса dev роль и рольбиндинг --- kind: Role apiVersion: rbac.authorization.k8s.io/v1 metadata: namespace: dev name: pod-reader-port-forward rules: - apiGroups: [""] resources: ["pods", "pods/log", "pods/portforward"] verbs: ["get", "watch", "list", "create"] --- apiVersion: rbac.authorization.k8s.io/v1 kind: RoleBinding metadata: name: pod-reader-port-forward namespace: dev subjects: - kind: User name: paxa apiGroup: rbac.authorization.k8s.io roleRef: kind: Role name: pod-reader-port-forward apiGroup: "" мне обязательно к подам вязать сервис акаунт или можно както разрешить юзеру ходит в весь неймспейс
Anonymous
где должен сгенерироваться токен юзера?
Sn00part
баххаа
Sn00part
DaemonSet now lives in apps/v1
Sn00part
обновился ептваюмать
artem
kubeadm init --pod-network-cidr=10.244.0.0/16 --apiserver-advertise-address=192.168.101.21 выдает ошибку. хотя уже отключил прокси и все что только можно Unfortunately, an error has occurred: timed out waiting for the condition This error is likely caused by: - The kubelet is not running - The kubelet is unhealthy due to a misconfiguration of the node in some way (required cgroups disabled)
artem
kubelet.service - kubelet: The Kubernetes Node Agent Loaded: loaded (/lib/systemd/system/kubelet.service; enabled; vendor preset: enabled)
Iaroslav
А кто подскажет резолвинг svc.cluster.local должен быть медленным? Я натравил графану на пром по svc.cluster.local и она выдает буквально через раз no such host или No address associated with hostname, через ingress все нормально.
Sergei
в любом случае вы создали юзера, у него есть токен, с этим токеном и создавайте, что вы там навыдали в rbac ему
Anonymous
так а куда генерируется токен где его глянуть?
Lucky SB
kubeadm init --pod-network-cidr=10.244.0.0/16 --apiserver-advertise-address=192.168.101.21 выдает ошибку. хотя уже отключил прокси и все что только можно Unfortunately, an error has occurred: timed out waiting for the condition This error is likely caused by: - The kubelet is not running - The kubelet is unhealthy due to a misconfiguration of the node in some way (required cgroups disabled)
ну оно ж на чистом англицком пишет, что у тебя кублет не запущен. и намекает что надо смотреть в сторону cgroups драйвера. и сравнивать какой в докер используется, а какой в конфиге кублета прописан. с недавних пор кублет по дефолту systemd юзает, а docker остался на cgroupfs
Lucky SB
так а куда генерируется токен где его глянуть?
в секрете, который в сервис-аккаунте упомянут
Anonymous
ну отлично сервис акаунт у меня пока default там один секрет как дельше разделять юзеров яже не отдам им всем один и тот же токен
Sergei
у каждого неймспейса есть default, от него создаются поды если не указано иное
Lucky SB
ну отлично сервис акаунт у меня пока default там один секрет как дельше разделять юзеров яже не отдам им всем один и тот же токен
ну надо доки почитать.... или тупо создать по отдельному сервисаккаунту для каждого юзера
Anonymous
ну как бы да не понтяно есть два юзера subjects: - kind: User name: paxa apiGroup: rbac.authorization.k8s.io roleRef: kind: Role name: pod-reader-port-forward apiGroup: "" и subjects: - kind: User name: test apiGroup: rbac.authorization.k8s.io roleRef: kind: Role name: pod-write apiGroup: ""
Anonymous
один может читать второй писать
Lucky SB
kubelet.service - kubelet: The Kubernetes Node Agent Loaded: loaded (/lib/systemd/system/kubelet.service; enabled; vendor preset: enabled)
это ты думаешь, что запостив вот это ты написал что у тебя кубелет работает ??? и где тут слова active (running) ?
Anonymous
и получается у них один токен ???
Sergei
почему один то
Sergei
два юзера, два токена
Lucky SB
и получается у них один токен ???
у этих нет токенов. от слова ваабще
artem
это ты думаешь, что запостив вот это ты написал что у тебя кубелет работает ??? и где тут слова active (running) ?
kubelet.service - kubelet: The Kubernetes Node Agent Loaded: loaded (/lib/systemd/system/kubelet.service; enabled; vendor preset: enabled) Drop-In: /etc/systemd/system/kubelet.service.d └─10-kubeadm.conf Active: active (running) since Птн 2019-11-08 13:08:10 EET; 35min ago последняя строка
artem
т.е. он у меня мб enabled но не active
Sn00part
ох епт, разломали все, апгрейдите до 1.6 аккуратно )) https://github.com/helm/charts/issues/17779
Lucky SB
ох епт, разломали все, апгрейдите до 1.6 аккуратно )) https://github.com/helm/charts/issues/17779
пррроснулся..... рип ван винклю.... у нас 1.17 на подходе, а ты призываешь до 1._6_ апгрейдится а если сурьезно, то уже месяц, как все популярные чарты в кубе обновили манифесты, и тебе надо сделать helm repo update, а не некропостить
Sn00part
ну прометеус так и не сделал
Lucky SB
врешь
Sn00part
описался! 1.16
Sn00part
ну посмотри сам я же тебе ишуй скинул
Sn00part
8.15.1 последний чарт, там нихера не пофикшено
Andrey
хелмопроблемы-хелмопроблемушки
Sn00part
prometheus/templates/alertmanager-deployment.yaml 1518/5516 27% {{- if and .Values.alertmanager.enabled (not .Values.alertmanager.statefulSet.enabled) -}} apiVersion: extensions/v1beta1 kind: Deployment metadata: labels: {{- include "prometheus.alertmanager.labels" . | nindent 4 }} name: {{ template "prometheus.alertmanager.fullname" . }}
Lucky SB
8.15.1 последний чарт, там нихера не пофикшено
тебе ж написали. helm repo update сделай
Lucky SB
version: 9.3.1
Sn00part
8-\
Sn00part
все разобрались! спс
Oleg
всем привет. подскажите плиз, есть днс зона в роут53. могу ли юзать externaldns, если сам кластер у меня на железках в хецнере ?
Дмитрий Харитонов
кто-то юзает какой-то storage который бы использовал не блочные устройства, а папку на существующей фс кроме glusterfs?
Дмитрий Харитонов
ну или блочное устройство из файла?
V 🏴‍☠️
Блочное устройство из файла можно в ceph реализовать, но это ооооочень сомнительная идея
Ivan
cephfs тестировали, разворачивая через rook. на первый взгляд работает, на второй — решили, что лучше переделать свой софт, чем использовать шаренную фс
Дмитрий Харитонов
я скорее хочу попробовать openebs или longhorn но свободных блочных устройств нету
V 🏴‍☠️
я скорее хочу попробовать openebs или longhorn но свободных блочных устройств нету
Я сейчас не очень уверен, но можно ZFS попробовать. Сделать пул, куда-то его смонтировать и использовать пул в качестве блока
Дмитрий Харитонов
У нас для этого cephfs, примонтированный на хостах
про ceph пишут что ему нужно много памяти и проца, и по хорошему кромен него ничего больше на хостах не держать. А мне нужен экном вариант но с реплекацией.
Ivan
aws role ? а кому ее присваивать то ?
а тут очень большой простор для фантазии
Ivan
можно выдавать secret key и access key через hashicorp vault
Ivan
можно захардкодить в деплой ExternalDNS
Ivan
в целом же, прежде чем что-то делать на route53, да и вообще aws, надо раскурить их IAM, иначе всё будет очень больно
Vladimir K
Но это, скорее, при переезде со сворма сохранили. Если бы с нуля поднимали, наверное, так не делалил бы
Vladimir K
Т.е. ceph у вас не в кубере крутится?
Неа, отдельно. Почитав про rook, решили, что так надёжнее будет