Roman
пробую заново)
Andrey
Великолепный план. Надёжный, как швейцарские часы. Не забудь, если взлетит, удалить один из подов эластика - увидишь, что будет.
Roman
holms@debian ~> kubectl logs elasticsearch-master-0 -c file-permissions —namespace elasticsearch chown: /usr/share/elasticsearch/data/lost+found: Operation not permitted chown: /usr/share/elasticsearch/data/lost+found: Operation not permitted chown: /usr/share/elasticsearch/data: Operation not permitted chown: /usr/share/elasticsearch/data: Operation not permitted chown: /usr/share/elasticsearch/: Operation not permitted chown: /usr/share/elasticsearch/: Operation not permitted
Roman
забавно)
Roman
благодарен что научил дебагить - я про инит-контейнеры не знал
Roman
и как это решается блин
Andrey
пересоздатся должен не?
Должен. Но не взлетит во второй раз.
Roman
почему? будет пытатся создать существующий том?
Roman
ответ похоже тут
Roman
https://www.digitalocean.com/docs/kubernetes/how-to/add-volumes/#setting-permissions-on-volumes
Roman
контейнер ставит 1000 на группу
Roman
а это дефолт темлейта оказывается
Roman
Директорию
я так полагаю что mkdir -p должно быть
Roman
чтож они за блядские дефолты то дают
Roman
Директорию
Не выходит .(
Roman
выставил как они и пишут
Roman
securityContext: runAsUser: 1000 fsGroup: 2000
Roman
а в инит command: ['chown', '-R', '1000', '/usr/share/elasticsearch/']
Roman
незнаю как этот $userid пропихнуть туда
Roman
выставил даже privileged на этот init container
Roman
поставил под на рут и теперь вот Warning Unhealthy 109s (x3 over 2m9s) kubelet, elasticsearch-g5dr Readiness probe failed: Waiting for elasticsearch cluster to become cluster to be ready (request params: "wait_for_status=green&timeout=1s" ) Cluster is not yet ready (request params: "wait_for_status=green&timeout=1s" {"type": "server", "timestamp": "2019-11-06T03:31:13,681Z", "level": "INFO", "component": "o.e.x.m.e.l.LocalExporter", "cluster.name": "elasticsearch", "node.name": "elasticsearch-master-0", "message": "waiting for elected master node [{elasticsearch-master-1}{eR8NUuWFQpGJq6mZ2cGSWw}{D9RmgU-tSBWrGonWhAj5xA}{10.244.5.87}{10.244.5.87:9300}{dilm}{ml.machine_memory=512000000, ml.max_open_jobs=20, xpack.installed=true}] to setup local exporter [default_local] (does it have x-pack installed?)", "cluster.uuid": "ENj7CIAbSbKmqIPj0EujJQ", "node.id": "yBVr_x-GRsSbOtDin1DQfg" } оказывается не я один https://github.com/elastic/helm-charts/issues/279
Andrey
кто-нибудь запускал osx в kubernetes?
Terry
кто-нибудь запускал osx в kubernetes?
в контейнерах, или о чем речь?
Andrey
kubevirt/virtlet
𝚔𝚟𝚊𝚙𝚜
кто-нибудь запускал osx в kubernetes?
А зачем, можно поинтересоваться? )
Andrey
в k8s можно каким-то образом заставить работать старые api groups? На 1.16 всякие deployment не работают разверну. Пытаюсь заставить работать romana на 1.16. При установке из https://raw.githubusercontent.com/romana/romana/master/docs/kubernetes/romana-kubeadm.yml падает с ошибками типа no matches for kind "Deployment" in version "extensions/v1beta1", после правки поды стартуют, но romana-listener не может найти конфигурацию из-за Failed to list *v1beta1.NetworkPolicy - скорей всего по той же причине
Andrey
А зачем, можно поинтересоваться? )
запускать специфичные для osx задачи
Andrey
которые не пойдут на винде или линуксе
𝚔𝚟𝚊𝚙𝚜
Мм, а вы прям оркестрировать этим хотите? Если это делается ради какого-то конкретного приложения, то qemu-kvm сам по себе неплохо в контейнере работает, то есть можно собрать виртуалку через какой-нибудь guestfish описав всё действия в Dockerfile и запускать процесс qemu через куб. kubevirt прикольный, но там всё тоже не всё так просто. Хотя в вашем кейсе может зайти.
𝚔𝚟𝚊𝚙𝚜
Разумеется ни о какой live-migration речи идти не может. Я бы советовал вам рассмотреть более специализированные решения, например OpenNebula
Andrey
хотелось бы запихать в существующий GKE :)
Andrey
у нас всё в облаке
Konstantin
миграция в облако прошла успешно
𝚔𝚟𝚊𝚙𝚜
хотелось бы запихать в существующий GKE :)
Не упущу момента попиариться чуток
𝚔𝚟𝚊𝚙𝚜
Зафигачил хелм-чарт для деплоя OpenNebula в полностью автоматическом режиме: с RAFT'ом, автообновлением и автофейловером. https://github.com/kvaps/kube-opennebula
Andrey
я просто с opennebula не familiar
𝚔𝚟𝚊𝚙𝚜
это control-plane? Рабочие ноды с kvm отдельно?
Можно и их в контейнерах с hostNetwork запустить, только при рестарте докера виртуалки будут умирать
𝚔𝚟𝚊𝚙𝚜
Готовый docker-image есть, нужно только манифест с ssh-сервером и либвиртом описать. Если интересно у меня даже где-то был такой, позже могу найти и скинуть.
Семён
Solyar
Чет орнул
Solyar
Спасибо
Andrey
блин, как в kubeadm cidr поменять? Никак не могу найти
Andrey
где вообще доки по конфигу kubeadm? пипец..
Andrey
нашёл таки https://unofficial-kubernetes.readthedocs.io/en/latest/admin/kubeadm/#using-kubeadm-with-a-configuration-file-config-file
Andrey
всё блин через жопу, такие вещи должны быть в официальной доке
Slach
где вообще доки по конфигу kubeadm? пипец..
;))) https://kubernetes.io/docs/reference/setup-tools/kubeadm/ ну да, но должны быть это еще не значит что их кто-то делает оно же Опенсорц =) это любимая отмазка 2000+ веселых опенсорцеров "меняющих ландшафт cloud native" ничем вам не обязаны 😉 сделайте pull-request как разберетесь
Andrey
так, может кто-нибудь сталкивался с такой задачей? Как поменять pod network cidr на уже задеплоеном кластере?
Andrey
гугл внятных ответов не даёт
Slach
https://pastebin.com/ssqEhUzT
Slach
это на init
Andrey
https://pastebin.com/ssqEhUzT
обновить-то как? c init всё понятно и так
Slach
вот тут https://kubernetes.io/docs/reference/setup-tools/kubeadm/kubeadm-init/#config-file есть ссылка на API reference https://godoc.org/k8s.io/kubernetes/cmd/kubeadm/app/apis/kubeadm/v1beta2 оно кстати стало более вменяемым со времени когда я последний раз туда смотрел
NM
так, может кто-нибудь сталкивался с такой задачей? Как поменять pod network cidr на уже задеплоеном кластере?
Переводить ручками, сервисы все равно останутся с теми же метками на поды
NM
оно потом не похерится при kubeadm upgrade?
С чего бы ? Ты же сеть ввел
Andrey
С чего бы ? Ты же сеть ввел
ничего никуда я не ввёл. Мне её поменять надо
Andrey
бардак с этим kubeadm, простейшая операция же
NM
бардак с этим kubeadm, простейшая операция же
Тогда openshift и redhat техподдержка
Andrey
да это-то понятно всё
Alexander
Коллеги, а вот такой вопрос. Вот есть у нас 1 кластер для проекта. По производительности его пока что с головой, и по этой причине нам больше как бы и не надо. Но вот беда - юзеры обитают по всему шарику. И у части есть периодические проблемы с доступом. Есть ли какие-то решения, которые хотя бы частично исправят ситуацию? ну кроме очевидного решения сделать несколько кластеров в разных регионах? Я вот пока нагуглил только ClooudFlare Argo - обещают примерно то, что нужно, за недорого.
NM
да это-то понятно всё
Что за плагин сетевой?
Andrey
Что за плагин сетевой?
да я пытаюсь flannel поднять, до этого была романа, но она благополучно сдохла при обновлении до 1.16
NM
Help! I need to change the pod CIDR in my Kubernetes cluster | Capstone IT https://capstonec.com/help-i-need-to-change-the-pod-cidr-in-my-kubernetes-cluster/
NM
Вот примерно так
Alexander
Gke only
explain please 🙂
NM
Некогда, просто опыт
NM
Главное, свои образы можешь прислать в gke https://www.findelabs.com/post/openbsd-on-gce/
NM
Как пример
Sn00part
можно подключить clowdflare
Sn00part
cloudflare*