Sergey
Тебе нужен nodelocaldns. Посмотри как это в kubespray делается
Мне кажется nodelocaldns это маленько не то чтобы хотелось
Отделение Bereke Bank
Sergey
Блин хотелось бы помучить корднч
Sergey
Корднс
Валентин
То есть и вы не смотрите на гугл?) а конкретно какая 4 ? Просто в centos 7 третья версия ядра по дефолту
В центос своя версия ядра. Т.к у рэдхата такая политика, что версию не меняют. Но при этом бэкпортируют много чего, так что не такая уж она и 3я версия, как кажется на первый взгляд. А по вопросу "какую версию юзаете" - вот щас 1.17.2 тестирую, чтоб переключится, как все проверю и ямлы поправлю. Ядро - последнее ванильное
Victor
То есть и вы не смотрите на гугл?) а конкретно какая 4 ? Просто в centos 7 третья версия ядра по дефолту
Извиняюсь, не заметил коммент . 4.4.205-1.el7.elrepo.x86_64 Это LTS сейчас у CentOS
Отделение Bereke Bank
Блин хотелось бы помучить корднч
Там вроде не в корднс проблема, а что-то с ядром связано. Точно не могу сказать
Victor
https://medium.com/@opensourcevoices/high-performance-networking-with-kubernetes-77c2682d75e3 о, DPDK как k8s CNI plugin, интересно насколько реально с этим на железе получить Network Performance близкий или выше чем hostNetwork: true ?
скорее всего, там перформанс будет выше чем у host network, так как это DPDK и обработка пакетов в userland более правильными алгоритмами, чем ест ьв ядре Linux
Etki
более правильными алгоритмами [x]
Etki
вообще для обработки пакета в юзерлэнде его туда сначала надо скопировать из ядра. не то чтобы я копал dpdk, но мне это предположение кажется странным.
Etki
ладно, я тупой, он просто отжимает у ядра девайсы и управляет ими напрямую
Victor
Ядро маппинг делает девайсов, ага
Vladislav
Kubernetes Dashboard не запускается. http://localhost:8001/api/v1/namespaces/kube-system/services/https:kubernetes-dashboard:/proxy/#!/login { "kind": "Status", "apiVersion": "v1", "metadata": {}, "status": "Failure", "message": "services \"kubernetes-dashboard\" not found", "reason": "NotFound", "details": { "name": "kubernetes-dashboard", "kind": "services" }, "code": 404 } Делал так kubectl apply -f https://raw.githubusercontent.com/kubernetes/dashboard/v2.0.0-rc2/aio/deploy/recommended.yaml kubectl apply -f https://raw.githubusercontent.com/kubernetes/dashboard/v2.0.0-rc2/aio/deploy/recommended.yaml kubectl apply -f https://raw.githubusercontent.com/kubernetes/heapster/master/deploy/kube-config/influxdb/heapster.yaml kubectl apply -f https://raw.githubusercontent.com/kubernetes/heapster/master/deploy/kube-config/influxdb/influxdb.yaml kubectl apply -f https://raw.githubusercontent.com/kubernetes/heapster/master/deploy/kube-config/rbac/heapster-rbac.yaml kubectl proxy --address 0.0.0.0 --accept-hosts '.*' Куда смотреть, что делать?
Vladislav
виден ли сервис через стандартный kubectl?
⚙ admin@Stans-MBP  ~  fg [1] + 52013 running kubectl proxy --address 0.0.0.0 --accept-hosts '.*' ✘ admin@Stans-MBP  ~  kubectl get services NAME TYPE CLUSTER-IP EXTERNAL-IP PORT(S) AGE kubernetes ClusterIP 10.100.0.1 <none> 443/TCP 5h13m admin@Stans-MBP  ~  kubectl get nodes NAME STATUS ROLES AGE VERSION ip-172-31-73-239.us-west-2.compute.internal Ready <none> 4h14m v1.14.7-eks-1861c5
Etki
kind: Deployment apiVersion: apps/v1 metadata: labels: k8s-app: kubernetes-dashboard name: kubernetes-dashboard namespace: kubernetes-dashboard ты делаешь запрос к http://localhost:8001/api/v1/namespaces/kube-system как минимум неймспейсы разные
Etki
ну наерн стоит смотреть, что в kubectl apply-то попадает
Vladislav
curl -o aws-auth-cm.yaml https://amazon-eks.s3-us-west-2.amazonaws.com/cloudformation/2019-11-15/aws-auth-cm.yaml kubectl apply -f aws-auth-cm.yaml kubectl get nodes --watch vi eks-admin-service-account.yaml apiVersion: v1 kind: ServiceAccount metadata: name: eks-admin namespace: kube-system vi eks-admin-cluster-role-binding.yaml apiVersion: rbac.authorization.k8s.io/v1beta1 kind: ClusterRoleBinding metadata: name: eks-admin roleRef: apiGroup: rbac.authorization.k8s.io kind: ClusterRole name: cluster-admin subjects: - kind: ServiceAccount name: eks-admin namespace: kube-system
Vladislav
Вот так разворачивал
Etki
это аккаунты. а вот в том сообщении выше ты писал, что разворачиваешь через kubectl apply -f https://raw.githubusercontent.com/kubernetes/dashboard/v2.0.0-rc2/aio/deploy/recommended.yaml если открыть этот файл, то там вот тот самый деплой, сервис и всё остальное (еще раз порекламирую идею смотреть содержимое файлов, которые скармливаются kubectl apply, желательно до выполнения команды)
Oleg
Добрый день. Подскажите пожалуйста в чем может быть проблема. Развернул на тестовой инсталляции кластера k8s, днс службу coredns. Беда в том что при тестовом nslookup резолв происходит, но почему то он это делает очень долго. Немогу понять в чем причина. На локальной ноде где запущен контейнер в в /etc/resolv.conf прописаны днсы локальные все ок.
На ноде случайно нет своей кэширующей DNS-службы? У нас проблемы подобные наблюдались при включённом кэширующем локальном bind. То есть, в resolv.conf ноды был указан 127.0.0.1. Пришлось отказаться и указать прямые адреса локальных DNS серверов.
Dmitry
Точнее не так. В хельме есть средства к этому, но он вообще порядок применения не гарантирует
@nas_tradamus @LuckySB helm гарантирует следующий порядок приминения: https://github.com/helm/helm/blob/484d43913f97292648c867b56768775a55e4bba6/pkg/releaseutil/kind_sorter.go var InstallOrder KindSortOrder = []string{ "Namespace", "NetworkPolicy", "ResourceQuota", "LimitRange", "PodSecurityPolicy", "PodDisruptionBudget", "Secret", "ConfigMap", "StorageClass", "PersistentVolume", "PersistentVolumeClaim", "ServiceAccount", "CustomResourceDefinition", "ClusterRole", "ClusterRoleList", "ClusterRoleBinding", "ClusterRoleBindingList", "Role", "RoleList", "RoleBinding", "RoleBindingList", "Service", "DaemonSet", "Pod", "ReplicationController", "ReplicaSet", "Deployment", "HorizontalPodAutoscaler", "StatefulSet", "Job", "CronJob", "Ingress", "APIService", } Но да, порядок приминения конечно не гарантирует что куб будет в таком порядке их генерить и вообще ждать создания одной сущности перед созданием другой (тут только хуки могут помочь)
Victor
В принципе, не вижу сложности в написании функции, которая будет выдавать на выходе правильный порядок
Victor
Хельм-таки умеет ждать специальным флагом —wait
Sergey
Это в 3 версии появилось?
George
Хельм-таки умеет ждать специальным флагом —wait
Это вопрос насколько правильно ждать. В частности, если используешь всякие crd
Sergey
Кстати раз пошла тема про хельм как на 3ем сидится?
Sergey
Просто думаем на него заехать
Dmitry
Кстати https://helm.sh/ попал в РКН (один из адресов: 167.99.129.42) =(
Sergey
Роскомнадзор?
Sergey
Эти нехорошие дяденьки много заблочили ресурсов хороших(((
Victor
Кстати раз пошла тема про хельм как на 3ем сидится?
Есть два стула: один legacy, а другой еще недоделан
Victor
Кстати https://helm.sh/ попал в РКН (один из адресов: 167.99.129.42) =(
Бля, я в него месяца 3 через прокси хожу. Оказывается так и не убрали
Sergey
В третьем хельме сделали поддержку нжймспэйс)))
🇷🇺 Vladimir
Ее не было7
Sergey
Ты не мог развернуть два одинаковых развертывания с одним именем
Sergey
Во втором хельме)
🇷🇺 Vladimir
а как же tiller namespace
Sergey
Приходилось модифицировать имя развертывания чтоб он был уникальным
Sergey
Ну для каждого неймспейса свой тиллера да
🇷🇺 Vladimir
Ну и да, можно было
Dmitry
Ну для каждого неймспейса свой тиллера да
Ну а как иначе. Если нужна нормальная изоляция неймспейсов, то без этого никак
🇷🇺 Vladimir
Это да, под прод отдельный тиллер вполне разумная мера
Dmitry
Это да, под прод отдельный тиллер вполне разумная мера
Угу, обычно ставится tiller с TLS и правами достаточными для деплоя, для нужного namespace. Иначе дыра в безопасности получится
Solyar
А без тиллера теперь жить проще
Dmitry
А без тиллера теперь жить проще
Да, и ради этого стоит переехать в helm3 @nightguide
🇷🇺 Vladimir
Эта че такое к нам занесло
Sergey
Иностранцев)
Sergey
Возможно из Китая
Sergey
Как раз где сейчас процветает вирус))
Solyar
Гоша Куценко китаец! ШОК!
Sergey
Я про Кам Чанга))))
Й
Угу, обычно ставится tiller с TLS и правами достаточными для деплоя, для нужного namespace. Иначе дыра в безопасности получится
Да, дыра. Когда у кого-то кроме админов есть доступ к куберу(читай есть соответствующий sa с правами деплоя) Когда у вас все катается пайплайнами - как бы уже и дыра не дыра)
Mr.
Amazon EKS Price Reduction Начиная с 21 января каждый кластер EKS стоит в 2 раза дешевле: As of the 21st of January, the price will reduce from $0.20 per hour for each Amazon EKS cluster to $0.10 per hour. This new price is for all new and existing Amazon EKS clusters. https://aws.amazon.com/ru/blogs/aws/eks-price-reduction/
Dmitry
Да, дыра. Когда у кого-то кроме админов есть доступ к куберу(читай есть соответствующий sa с правами деплоя) Когда у вас все катается пайплайнами - как бы уже и дыра не дыра)
А что мешает задеплоить через пайплайн код, который будет с tiller'ом общаться и делать все что ты захочешь? Также может быть доступ к пайплайнам и можно вынести все секреты от туда, например kubectl конфиг
Й
И как код будет общаться с тиллером?
Dmitry
И как код будет общаться с тиллером?
grpc же, tiller то сервер, который принимает запросы
Й
Port forward и поехали ?
Откуда права на это?)
George
Откуда права на это?)
У тебя в пайплайне кьюбконфиг откуда берется ?
Dmitry
Откуда права на это?)
зачем права? Твой код внутри кластера работает, общаешься с ним через сервис (он там есть)
George
Кто код запустит?)
Ну, юзер, может в соседнем неймспейсе
Й
Ну, юзер, может в соседнем неймспейсе
У юзеров НЕТ доступа к кубу
George
Теоретически ты можешь там Нетворк полиси прифигачить.
Dmitry
Кто код запустит?)
Любой сотрудник, который может деплоить свой код в кластер через пайплайны
George
Но это не для всех
George
У юзеров НЕТ доступа к кубу
Напрямую - нет, опосредованно - да
Й
Напрямую - нет, опосредованно - да
Если только кого-то из нас попросив это сделать