VyacheslavS
не совать такое большое файло в etcd, а скачивать при старте в init-контейнере например
тут собственно инит контейнер и есть, как обычно скачку реализуют?
Rokker
Чудес не бывает. kubectl config view покажи
То есть видишь, даже по тупому качаешь с сайта kubectl прямо в поде и можно злодействовать)
Lucky SB
тут собственно инит контейнер и есть, как обычно скачку реализуют?
curl ом. как угодно. или начинают использовать persistance storage
Sergei
@rokkerruslan export покажите
Sergei
в контейнере export, покажит все env
Rokker
Ну там миллион наших переменных окружения, какая-то определённая интересует?
Sergei
пусть будут все с KUBERNETES*
Lucky SB
в контейнере export, покажит все env
там была заявка, что конфиг кубконтрола пустой. при пустом конфиге он действительно пытается на localhost:8080 подключится
Sergei
так а го приложуха, что делает? она не слушает на 8080 случаем?
Rokker
так а го приложуха, что делает? она не слушает на 8080 случаем?
Нет, я просто скопировал с README.md библиотеки стандартной, она просто все ноды запрашивает
Rokker
пусть будут все с KUBERNETES*
Да, там лежит примерно вот такое: declare -x KUBERNETES_SERVICE_HOST="10.x.x.x” declare -x KUBERNETES_SERVICE_PORT="443" Какой IP не важно, просто из втунтренней сети
Sergei
так у вас либо нет аутификации на апи, или го приложуха авторизуется
Solyar
Я потерял нить
Sergei
KUBERNETES_SERVICE_HOST эт не просто хост, это адрес кубер апи
Solyar
Зачем такой контейнер нужен вообще?
Sergei
ага
Solyar
Какой-нибудь
Solyar
10.233.0.1
Rokker
Приложение вот что делает: https://github.com/ericchiang/k8s
Lucky SB
меня на самом деле в этой чудо сказке беспокоит вот такой вопрос. почему там кластер версии 1.11.3, а компоненты в ns kube-system работают всего 22 дня
Rokker
Код прямо из readme можно взять
Lucky SB
Я 22 сам поставил
шифруешься что ли ?
Rokker
Но версия кубера у нас 1.11
Rokker
шифруешься что ли ?
Нет, просто копировать лень, там большой вывод, я просто сам набрал строку одну
Rokker
Ну так что, кто нибудь скажет в какую сторону копать? Это нормально или нет?
VyacheslavS
curl ом. как угодно. или начинают использовать persistance storage
блин, понятно. Была надежда , что знаете как конфиг мап с бинарником примапить
Lucky SB
блин, понятно. Была надежда , что знаете как конфиг мап с бинарником примапить
знаю. у тебя вопрос в другом. насколько разумно тащить огромные блобы в etcd
Lucky SB
Ну так что, кто нибудь скажет в какую сторону копать? Это нормально или нет?
curl -k localhost:8080/api/v1/namespaces/kube-system/pods/ что нить выводит ?
Rokker
Connection refused
Lucky SB
нууу хоть один верный ответ )
Rokker
443 тоже refused
Sergei
@rokkerruslan нет не нормально, ./kubectl -n kube-system get nodes Error from server (Forbidden): nodes is forbidden: User "system:serviceaccount:mining:default" cannot list resource "nodes" in API group "" at the cluster scope я воспроизвел у себя, у вас какие то проблемы с пермисиями, в каком неймспейсе под создан и от кого
Lucky SB
а если по адресу из $KUBERNETES_PORT ?
Igor
у кого-то есть опыт/ссылки на kubeadm+calico+ipv6(only) настройку ? А то предварительно все выглядит немного стремно.
Sergei
в каком неймспейсе под запущен?
Rokker
А какая разница? Ну пусть будет asdf
Anonymous
Всем привет. Возник вопрос: А вот есть две конфигурации для двух кластеров в yaml, с той лишь разницей что у них разные Docker Registry. Как этим удобно управлять при деплое? Менять 30 yaml и там и там не хочется ради смены URL в image, есть bash скрипт который это делает, но может кто-то использует инструмент удобный ? Terraform не нравится тем, что нужно писать те же yaml, но уже в синтаксисе terraform, что как бы не очень для разработчиков удобно.
Sergei
ну может он у вас в kube-system, тогда kubectl -n asdf get serviceaccount для начала @rokkerruslan
VyacheslavS
знаю. у тебя вопрос в другом. насколько разумно тащить огромные блобы в etcd
Поделитесь ) . Тащить в меру разумно, их по пальцем пересчитать.
Rokker
ну может он у вас в kube-system, тогда kubectl -n asdf get serviceaccount для начала @rokkerruslan
ладно, спасибо, я понял что в политиках безопасности что то не то, я передам инфу админам
VyacheslavS
и тащит их разовый job
Sergei
там не просто не то, там пздц
Lucky SB
ладно, спасибо, я понял что в политиках безопасности что то не то, я передам инфу админам
ну да. кубконтрол подключается по адресу из переменной окружения. и использует токен из /run/secrets/kubernetes.io/serviceaccount/token почему дефолтному сервис-аккаунту в вашем кластере даны такие права - надо смотреть. вот убей не помню, в 1.11 RBAC еще можно отключить или уже нет
Sergei
опасные рудименты
Lucky SB
и тащит их разовый job
эм. какая разница разовый или нет. конфиг мап размером 400+ килобайт есть же в наличии ?
VyacheslavS
эм. какая разница разовый или нет. конфиг мап размером 400+ килобайт есть же в наличии ?
Да нехай висит в etcd , это файл времянка, но его периодически будут обновлять какое то время.
Rokker
Когда мы это пофиксим, я ещё отпишусь что было не так, вдруг кому будет полезно.
Lucky SB
Когда мы это пофиксим, я ещё отпишусь что было не так, вдруг кому будет полезно.
обновиться бы вам барин.... да чета боязно такое советовать _
VyacheslavS
Дали же возможность, надо использовать )
Rokker
это уже старая версия?
Rokker
ну я видел что 1.16 есть, просто сложно сказать, поддерживают они 11 или нет
Rokker
у них есть где то поликика поддержки релизов?
Lucky SB
у них есть где то поликика поддержки релизов?
не поверишь. на сайте написана
Rokker
ну там написано что поддерживается 1.11
VyacheslavS
ну а в чем проблема то ? конкретно.
Проблема в том, что не знаю что написать для моунта как файл. Если с обычной датой в конфигмапе все просто: volumeMounts: - mountPath: /tmp/realm-export.json name: realm-export-config subPath: realm-export.json Ну и сам волюм: - name: realm-export-config configMap: name: identity-realm-export-json-confmap
VyacheslavS
то как бинарник подцепить непонятно
Lucky SB
то как бинарник подцепить непонятно
kubectl create configmap game-config-2 --from-file=configure-pod-container/configmap/game.properties
VyacheslavS
ну а в cm identity-realm-export-json-confmap есть ключ realm-export.json ?
это как раз рабочий конфиг с обычным текстовым конфигом
VyacheslavS
а вот так бинарное поле выглядит "apiVersion": "v1", "binaryData": { "mapping.xlsx": "UEsDBAoAAAAIAAAAIQAO6JbqEAMAAOEHAAAQAAAAZG9jUHJvcHMvYXBwLnhtbJxVy07bQBTdV+o/jLyCBTihFaqQY1SgFUitikRgP3UmiVXHtjxDRLriUbVSWbTqCrUI9fEDppAq4vkLM3/UMzY4dkhoVGWR8cy955577p071vxW }, "kind": "ConfigMap", "metadata": { "creationTimestamp": "2019-10-23T13:26:50Z", "name": "job-configmap", "namespace": "default", "resourceVersion": "7290303", "selfLink": "/api/v1/namespaces/default/configmaps/job-configmap", "uid": "2e912cc2-a0d9-40c2-bd96-765f177ff94c" } }
Sergei
@rokkerruslan можете еще попробовать создать под из вашего окружения в контейнере, если не даст, то возможно пермисии ток на рид, а для кого-то это типа ок
VyacheslavS
Это вывод чего ?
конфигмап в json с бинарным полем ( --from-file=/home/mapping.xlsx )
Lucky SB
конфигмап в json с бинарным полем ( --from-file=/home/mapping.xlsx )
ну супер. теперь берешь и монтируешь как файл в под.
FFF
Кто подскажет как кубер (GKE) работает в данном случае: например у меня есть 2 ноды и в них 3 пода, затем мне нужно поднять число подов до 5, как они будут распределены между этими 2 нодами?
Sergei
@rokkerruslan если даст создать в другом неймспейс, тогда поздравляю, все секреты ваши
Sergei
хотя тут походу вообще весь кластер ваш
VyacheslavS
ну супер. теперь берешь и монтируешь как файл в под.
то , что написал ранее работает как файл при стандартном конфигмапе: "apiVersion": "v1", "data": { "init.sh" ....... бла бла бла
Rokker
@rokkerruslan если даст создать в другом неймспейс, тогда поздравляю, все секреты ваши
нет, там не ридонли, я почему начал копать, я с гитлаб ci, деплоил приложения в кластер, а потом задался вопросом, как это работает, я ведь нигде никакие креды не указывал, и пошло поехало
VyacheslavS
при binaryData моунтится папка
Lucky SB
при binaryData моунтится папка
а subPath есть ? потому что папка - она без subPath