сейчас он монтируется в /usr/local/lib/Licence/planetaLicence

где нашел этот путь?

а поняла! спасибо

где нашел этот путь?

mountPath + ключ конфигмапы

я сделала локалвольюмами временное решение

а если у меня две ноды? на одной ноде будет одно количество файлов, а на второй другое?( или эти lv нужно nfs связать?

mountPath + ключ конфигмапы

спасибо, видно вэтом и был косяк

мне синхронизация обязательна

где нашел этот путь?

если надо монтировать в существующую директорию, то нужен subPath в volumeMounts

quay.io лежит?

https://status.quay.io/

мне синхронизация обязательна

А почему сделано через statefulset?

Ребят привет. Помогите с проблемой плз. Задавал в соседней группе, не помогло

А почему сделано через statefulset?

скейлить нужно приложение

скейлить нужно приложение

Скейлить и deployment можно

Скейлить и deployment можно

readwriteonce

Кто-нибудь встречался с тем, что кубер не может загрузить образ с докер-сервера гитлаба? говорит, denied: access forbidden Хотя перед этим сделан docker login registry.mysite.ru:5555 и docker login gitlab.mysite.ru:5555 И далее вот такая штука kubectl create secret generic regcred \ --from-file=.dockerconfigjson=<path/to/.docker/config.json> \ --type=kubernetes.io/dockerconfigjson так же, пробовал и явно указывать креды: kubectl create secret docker-registry regcred --docker-server=<your-registry-server> --docker-username=<your-name> --docker-password=<your-pword> --docker-email=<your-email>

не получится же в один вольюм

а если у меня две ноды? на одной ноде будет одно количество файлов, а на второй другое?( или эти lv нужно nfs связать?

сначала придумай, как сделать без куба вручную, потом станет понятно, как запихать в куб

сначала придумай, как сделать без куба вручную, потом станет понятно, как запихать в куб

так я понимаю что нужно не понимаю только если делать localvolume, то как их синкать

а походу так можно будет

ладно, пошаманю, всем спасибо

Чёт это все подозрительно выглядит. Отчего не какой-нибудь nfs или что ещё с rwx + деплоймент сразу?

Чёт это все подозрительно выглядит. Отчего не какой-нибудь nfs или что ещё с rwx + деплоймент сразу?

та думал можно проще nfs а то с амазоном придется опять повозиться, чтоб прокинуть папку на нужные ноды

та думал можно проще nfs а то с амазоном придется опять повозиться, чтоб прокинуть папку на нужные ноды

На Амазоне вообще же nfs как сервис предоставляется

На Амазоне вообще же nfs как сервис предоставляется

да, только папку этого сервиса еще нужно на ноды прокинуть делал уже, не оч просто понравилось таким заниматься

да, только папку этого сервиса еще нужно на ноды прокинуть делал уже, не оч просто понравилось таким заниматься

Что там и куда надо прокидывать?

Что там и куда надо прокидывать?

ну блин) https://docs.aws.amazon.com/efs/latest/ug/mounting-fs.html

ну блин) https://docs.aws.amazon.com/efs/latest/ug/mounting-fs.html

*звуки охуевания* Хочешь магию покажу?

*звуки охуевания* Хочешь магию покажу?

удиви😳

А не дорого брать НФС как сервис? Работаю с гуглом в облаке - достаточно дорогое удовольствие... Решил как альтернативу для файлового хранилища поднимать ВМ

А не дорого брать НФС как сервис? Работаю с гуглом в облаке - достаточно дорогое удовольствие... Решил как альтернативу для файлового хранилища поднимать ВМ

да там не так много всего будет литься и как временное решение надеюсь подойдет

удиви😳

Я просто создал EFS, маунтпоинт и вот такой PV руками apiVersion: v1 kind: PersistentVolume metadata: name: staging-media-nfs spec: accessModes: - ReadWriteMany capacity: storage: 100Gi nfs: path: / server: fs-xxxxxx.efs.us-east-1.amazonaws.com persistentVolumeReclaimPolicy: Retain volumeMode: Filesystem А потом PVC, который подхватил этот PV и усе. А когда я вообще обленился, то создал стораджкласс вот с этим https://github.com/kubernetes-incubator/external-storage/tree/master/aws/efs

Я просто создал EFS, маунтпоинт и вот такой PV руками apiVersion: v1 kind: PersistentVolume metadata: name: staging-media-nfs spec: accessModes: - ReadWriteMany capacity: storage: 100Gi nfs: path: / server: fs-xxxxxx.efs.us-east-1.amazonaws.com persistentVolumeReclaimPolicy: Retain volumeMode: Filesystem А потом PVC, который подхватил этот PV и усе. А когда я вообще обленился, то создал стораджкласс вот с этим https://github.com/kubernetes-incubator/external-storage/tree/master/aws/efs

хм.... любопытно, спасибо за лайфхак! поколдую

хм.... любопытно, спасибо за лайфхак! поколдую

а там другой вариант и не сработает ... поосторожнее со сторедж классами ;)

хм.... любопытно, спасибо за лайфхак! поколдую

А ты маунтил nfs руками, а потом юзал в подах hostPath или как?

А ты маунтил nfs руками, а потом юзал в подах hostPath или как?

😆 ансиблом но да))

не знал что в создании pvc можно указать было nfs Оо

это прям в доке даже есть?:D

это прям в доке даже есть?:D

блин да)))

как порой было бы полезно дочитывать всю главу до конца, а не до момента где нужно было по шурику глянуть нужную инфу

Андрей, если память не изменяет там даже версию НФСможно указывать

Андрей, если память не изменяет там даже версию НФСможно указывать

не помню такого. глянул - нельзя.

это прям в доке даже есть?:D

Сегодня штефану признался что кубеня умеют из коробки в NFS. Он выглядел покинутым и лишь спросил: «Прям при создании pv можно указывать?» Я грустно ответил что можно. Он спросил еще «И это прям в доке даже есть?» Я кивнул. Он что то пробубнил под нос и ушел. В квартире уже несколько гробовая тишина.

https://kubernetes.io/docs/concepts/storage/persistent-volumes/

Сегодня штефану признался что кубеня умеют из коробки в NFS. Он выглядел покинутым и лишь спросил: «Прям при создании pv можно указывать?» Я грустно ответил что можно. Он спросил еще «И это прям в доке даже есть?» Я кивнул. Он что то пробубнил под нос и ушел. В квартире уже несколько гробовая тишина.

можно - не изменяет мне таки память :)

можно - не изменяет мне таки память :)

точно, забыл про mountOptions

сейчас он монтируется в /usr/local/lib/Licence/planetaLicence

эм, кажется маунт прошел не в виде файла а в виде директории пустой

что меня вводит в недоумение

volumeMounts: - mountPath: /usr/local/lib/pbolapserver name: license subPath: pbolapserver - mountPath: /usr/local/Data/ name: planeta-ini subPath: Data - mountPath: /usr/local/Data name: pvc-olap-data volumes: - configMap: defaultMode: 420 name: olap-license name: license - configMap: defaultMode: 420 name: planeta-ini name: planeta-ini - name: pvc-olap-data persistentVolumeClaim: claimName: olap-data /usr/local/Data/ и вот тут появилась диретория planeta-ini хотя это конфигмап

volumeMounts: - mountPath: /usr/local/lib/pbolapserver name: license subPath: pbolapserver - mountPath: /usr/local/Data/ name: planeta-ini subPath: Data - mountPath: /usr/local/Data name: pvc-olap-data volumes: - configMap: defaultMode: 420 name: olap-license name: license - configMap: defaultMode: 420 name: planeta-ini name: planeta-ini - name: pvc-olap-data persistentVolumeClaim: claimName: olap-data /usr/local/Data/ и вот тут появилась диретория planeta-ini хотя это конфигмап

а как конфигмап выглядит?

create configmap planeta-ini --from-file=planeta.ini

apiVersion: v1 data: planeta.ini: | http 0.0.0.0 7771 admin 0.0.0.0 7777 log /usr/local/Logs/planeta.log template-directory /usr/local/Api autosave L 02:00 kind: ConfigMap

а как конфигмап выглядит?

вот так

вот так

так а почему у тебя subpath не planeta.ini?

так а почему у тебя subpath не planeta.ini?

изменила, но сейчас проблема в дубликатах )))

mountPath: /usr/local/Data/

изменила, но сейчас проблема в дубликатах )))

??

:) да, в композе, что переделываю на сервис кубера было - создать директорию bind и в ней файлик конфиг

ну окей руками положили, запустили, но сейчас Error: failed to start container "server": Error response from daemon: oci runtime error: container_linux.go:235: starting container process caused "container init exited prematurely"

ну окей руками положили, запустили, но сейчас Error: failed to start container "server": Error response from daemon: oci runtime error: container_linux.go:235: starting container process caused "container init exited prematurely"

Спека деплоймента, логи докера с ноды

Руками - через init-контейнер?

Я просто создал EFS, маунтпоинт и вот такой PV руками apiVersion: v1 kind: PersistentVolume metadata: name: staging-media-nfs spec: accessModes: - ReadWriteMany capacity: storage: 100Gi nfs: path: / server: fs-xxxxxx.efs.us-east-1.amazonaws.com persistentVolumeReclaimPolicy: Retain volumeMode: Filesystem А потом PVC, который подхватил этот PV и усе. А когда я вообще обленился, то создал стораджкласс вот с этим https://github.com/kubernetes-incubator/external-storage/tree/master/aws/efs

а каким образом у тебя pvc подхватио созданный pv? а то у меня судя по всему pvc не создается из-за того, что нужно указать в pvc storage class как я понял мне без efs-provisioner не создать?

pv создался нормально, efs url амазона увидел

а живые люди использую desheduler?

а каким образом у тебя pvc подхватио созданный pv? а то у меня судя по всему pvc не создается из-за того, что нужно указать в pvc storage class как я понял мне без efs-provisioner не создать?

Нет. Смотри, либо pvc берет уже созданный руками подходящий pv, либо юзает стораджкласс

Спека деплоймента, логи докера с ноды

а каким образом у тебя pvc подхватио созданный pv? а то у меня судя по всему pvc не создается из-за того, что нужно указать в pvc storage class как я понял мне без efs-provisioner не создать?

Спеки обоих давай

Events: Type Reason Age From Message ---- ------ ---- ---- ------- Normal Scheduled 10m default-scheduler Successfully assigned planeta/olap-64d886b5f7-h86zx to gasu-development.ibs.ru Normal Pulling 8m (x5 over 10m) kubelet, gasu-development.ibs.ru pulling image "docker-registry.default.svc:5000/planeta/olapserver:latest" Normal Pulled 8m (x5 over 10m) kubelet, gasu-development.ibs.ru Successfully pulled image "docker-registry.default.svc:5000/planeta/olapserver:latest" Normal Created 8m (x5 over 10m) kubelet, gasu-development.ibs.ru Created container Warning Failed 8m (x5 over 10m) kubelet, gasu-development.ibs.ru Error: failed to start container "server": Error response from daemon: oci runtime error: container_linux.go:235: starting container process caused "container init exited prematurely" Warning BackOff 16s (x44 over 9m) kubelet, gasu-development.ibs.ru Back-off restarting failed container

Спеки обоих давай

у меня сейчас вот так, что я упустил, подскажи пожалуйста, а то не понял что значит давать обоим спеки https://pastebin.com/1BZMADuE

у меня сейчас вот так, что я упустил, подскажи пожалуйста, а то не понял что значит давать обоим спеки https://pastebin.com/1BZMADuE

а дефолтный стораджкласс у тебя есть?

а дефолтный стораджкласс у тебя есть?

gp2

амазоновский kubernetes.io/aws-ebs

default kubernetes.io/aws-ebs 83d такой еще, но оба судя по EBS не подходят, других sc нет

поставь в pvc storageClassName: ""

https://kubernetes.io/docs/concepts/storage/persistent-volumes/#class-1

Угу, то есть не через init-контейнер. А как тогда?

Угу, то есть не через init-контейнер. А как тогда?

так я скинула деплоймент))