ой

Зато я теперь знаю через какие дырки можно nginx дебагать. Но это прям есть. На прямом месте.

И часть исходников контроллера перерыл.

Зато я теперь знаю через какие дырки можно nginx дебагать. Но это прям есть. На прямом месте.

что за дырки

щас должен прийти чувак и топить за contour

Подскажитеееее

щас должен прийти чувак и топить за contour

что за contour

один из вариантов ингресса

щас должен прийти чувак и топить за contour

стот попробовать его?

хз

создал мастер-ноду, обычную ноду, поставил flannel, запускаю Pod, вижу статус ContainerCreating

а ты пробовал этот envoyproxy ?

у меня нет чёткого мнения на этот счёт

подскажите, пожалуйста, новичку в k8s, почему dashboard установился, но не доступен извне на порту 8001?

Скоре всего ingress кривно настроен

в describe: Normal SandboxChanged 12m (x12 over 13m) kubelet, wnr-rk Pod sandbox changed, it will be killed and re-created. Warning FailedCreatePodSandBox 3m1s (x138 over 12m) kubelet, wnr-rk (combined from similar events): Failed create pod sandbox: rpc error: code = Unknown desc = failed to set up sandbox container "9ad01273a27bb0624599513ffc9864b969b5f2b659bae5894a0ce13ea72d88c4" network for pod "sa-frontend": NetworkPlugin cni failed to set up pod "sa-frontend_default" network: open /run/flannel/subnet.env: no such file or directory

Ребутни этот под

Ребутни этот под

сорри, а как это сделать?

kubectl delete pod

kubectl delete pod service baz foo

kubectl delete pod service baz foo

рестартанул, ошибка та же

А если серьёзно, у вас де четко ошибка написана, файла не находит.

А если серьёзно, у вас де четко ошибка написана, файла не находит.

но что с этим делать?

в k8s можно как-то просто откатить сеть и поставить ту же calico?

kubectl apply -f же писал?

kubectl delete -f откатит

Что-то я вообще запутался ( установлен прометей-графана через хелм. Все работает, показывает. Есть у меня под, которой может отдавать метрику. Как мне прометею сказать что бы он забирал ее из него? Чего-то не очень понял как это делается. Подскажите, кто сталкивался

я сталкивался

начинал с чтения документации

изучения примеров конфигурации прометея

Что-то я вообще запутался ( установлен прометей-графана через хелм. Все работает, показывает. Есть у меня под, которой может отдавать метрику. Как мне прометею сказать что бы он забирал ее из него? Чего-то не очень понял как это делается. Подскажите, кто сталкивался

https://pastebin.com/mM3hFcVs

Ровно также как и kube-exporter'ы из всостава прометеуса в кубике

запаквывю приложение в чарт. добавил pvc, монтирую его поду, пытаюсь накатить чарт, получаю: Deployment.apps “app-chart" is invalid: spec.template.spec.containers[0].volumeMounts[0].name: Not found: “app-pvc" При этом pvc создается. Предполагаю, что дело в последовательности создания объектов. Как правильно управлять этой последовательностью?

изучения примеров конфигурации прометея

Конечно же это пройдено, ещё и без кубера. Как мне вообще редактировать prometheus.yaml для добавления нового таргета, если он в секрете, это один момент, второй я для деплоймента задал prometheus.io/scrape: "true". Что должно произойти? Как он должен попасть в таргет?

Почитай примеры испольщования кубернетис сервис дискачери

Почитай примеры испольщования кубернетис сервис дискачери

Я знаю это, но проблема в том, что как сделать изменения в конфиге прометея?

в смысле?

а конфиг у тебя откуда берётся?

а конфиг у тебя откуда берётся?

А у тебя?)

у меня из конфигмапы

А у меня почему-то в секретах

Ставил через хелм

Фото от Анатолий

Зачем ставить через хельм, если есть оператор?

правила аллертов для прометея кто-нибудь раскатывал через хельм?

Оператором?

угу.

в общем CI сыпется на $ helmfile -f helmfile-${ENV}.yaml repos error during helmfile-monitoring-leader.yaml parsing: template: stringTemplate:48: undefined variable "$labels" ERROR: Job failed: exit code 1

Зачем ставить через хельм, если есть оператор?

Его и ставил

Ну там же в readme оператора написано как добавлять мониторинг для сервисов

в общем CI сыпется на $ helmfile -f helmfile-${ENV}.yaml repos error during helmfile-monitoring-leader.yaml parsing: template: stringTemplate:48: undefined variable "$labels" ERROR: Job failed: exit code 1

Написано же где ошибка

# Install helm https://docs.helm.sh/using_helm/ then run: helm repo add coreos https://s3-eu-west-1.amazonaws.com/coreos-charts/stable/ helm install coreos/prometheus-operator --name prometheus-operator --namespace monitoring helm install coreos/kube-prometheus --name kube-prometheus --namespace monitoring

Написано же где ошибка

annotations: summary: "{{$labels.container}} is terminated"

это описаловка алерта

А, ты там шаблонизируешь гошные шаблоны (алертменеджера) гошными шаблонами (хельм)

Огонь идея

We need to go deeper

есть возможность это дерьмо как нибудь экранировать?

Вариантов два сходу

Первое: экранировать

Второе сложнее, но в будущем наверняка лучше: выкинуть хельм

Я не помню как в гошных шаблонах экранировать символы {{

Погугли сам

Ну там же в readme оператора написано как добавлять мониторинг для сервисов

Я что-то неправильно поставил?

Поставил-то наверное правильно

Но это не значит, что тебе не надо заводить сервисмонитор

Ты только сам прометей поставил

Ты только сам прометей поставил

Нет, там ещё графана и экспортеры в комплекте. То есть под каждый сервис с метриками нужен сервисмонитор? Но как они попадут в таргет?

]Помогите пожалуйста с сервисМонитором. $ kubectl get servicemonitor dictionaries -o yaml apiVersion: monitoring.coreos.com/v1 kind: ServiceMonitor metadata: annotations: kubectl.kubernetes.io/last-applied-configuration: | {"apiVersion":"monitoring.coreos.com/v1","kind":"ServiceMonitor","metadata":{"annotations":{},"labels":{"app":"dictionaries","prometheus":"kube-prometheus"},"name":"dictionaries","namespace":"sequoia-development"},"spec":{"endpoints":[{"port":"metrics"}],"selector":{"matchLabels":{"app":"dictionaries"}}}} creationTimestamp: 2018-11-15T10:10:16Z generation: 1 labels: app: dictionaries prometheus: kube-prometheus name: dictionaries namespace: sequoia-development resourceVersion: "3395046" selfLink: /apis/monitoring.coreos.com/v1/namespaces/sequoia-development/servicemonitors/dictionaries uid: a670f4b7-e8be-11e8-8684-0050562b002b spec: endpoints: - port: metrics selector: matchLabels: app: dictionaries $ kubectl -n monitoring get statefulset NAME DESIRED CURRENT AGE alertmanager-alertmanager 1 1 16d alertmanager-kube-prometheus 1 1 16d prometheus-kube-prometheus 1 1 16d prometheus-prometheus 1 1 16d

упорно у прома в таргетах мой сервис не появляется

Нет, там ещё графана и экспортеры в комплекте. То есть под каждый сервис с метриками нужен сервисмонитор? Но как они попадут в таргет?

Почитай документацию к оператору плз

упорно у прома в таргетах мой сервис не появляется

А покажи манифест твоего сервиса

А покажи манифест твоего сервиса

--- kind: Deployment apiVersion: apps/v1 metadata: name: dictionaries labels: app: dictionaries spec: replicas: 1 selector: matchLabels: app: dictionaries template: metadata: labels: app: dictionaries spec: imagePullSecrets: - name: regcred containers: - name: dictionaries image: registry.local/dictionaries:1.0.2 ports: - name: http containerPort: 80 - name: metrics containerPort: 8082 volumeMounts: - name: config-volume mountPath: /etc/application volumes: - name: config-volume configMap: name: dictionaries-config

С первого взгляда всё верно

Посмотри в гуй прометея конфиг который ему сгенерился

народ а вы когда keepalived настраиваете вы из тойже подсети задаете вирутальный адрес что и физический ?

народ а вы когда keepalived настраиваете вы из тойже подсети задаете вирутальный адрес что и физический ?

keepalived использует VRRP, по другому и быть не может

Посмотри в гуй прометея конфиг который ему сгенерился

вот тут мой вопрос - надо ребутнуть пром? или он сам делает реконфигур?

Оператор его конфигурит