Lucky SB
а я читаю слурм. может сларм? почему слёрм? ё в английской транскрипции есть?
ну потому что в начале это было computer learning, которое пару раз сократили, потом трагскрипировали на русский и обратно на английский....
Lucky SB
ну в процессе слегка помялось ;)
Lucky SB
всем привет. стоит вопрос.как задеплоить Cert-Manager в мастер ноду, как это можно сделать быстро и безболезненно? он деплоится через kubectl apply -f
и прописать правильный tolerations в деплоймент. но лучше всего озаботится вопросом - точно ли вы знаете что вы делаете ? и почему вам на мастер узлах нужны всякие левые поды ? и почему cert manager ставите не по инструкции от автора ?
Vadim
2019/08/12 08:24:33] [error] [io_tls] flb_io_tls.c:348 X509 - Certificate verification failed, e.g. CRL, CA or signature check [2019/08/12 08:24:33] [error] [filter_kube] upstream connection error
Vadim
во fluentbit такие ошибки
Vadim
filter-kubernetes.conf: | [FILTER] Name kubernetes Match kube.* Kube_URL https://kubernetes.default.svc:443 Kube_CA_File /var/run/secrets/kubernetes.io/serviceaccount/ca.crt Kube_Token_File /var/run/secrets/kubernetes.io/serviceaccount/token Kube_Tag_Prefix kube.var.log.containers. Merge_Log On Merge_Log_Key log_processed K8S-Logging.Parser On K8S-Logging.Exclude Off
Vadim
этот сертификат не подходит?
Vyacheslav
парни а кто использует harbor + kaniko? нет проблем с сохранением кеша kaniko в harbor?
George
парни а кто использует harbor + kaniko? нет проблем с сохранением кеша kaniko в harbor?
первое - да, второе - нет. Говори конкретнее - ошибка такая-то, ничего не работает. ну, и я надеюсь, что ты ишью по харбору искал - там есть нюансы с НЕДОКЕР образами, а OCI
Vyacheslav
сейчас именно по канико открытых не нашел
Anton
пытаюсь задеплоить в мастер, получаю 0/2 nodes are available: 1 node(s) didn't match node selector, 1 node(s) had taints that the pod didn't tolerate
Anton
apiVersion: v1 kind: Pod metadata: name: busybox namespace: default labels: kubernetes.io/cluster-service: "true" spec: containers: - name: busybox image: busybox:1.28 command: - sleep - "3600" imagePullPolicy: IfNotPresent restartPolicy: Always nodeSelector: dedicated: master tolerations: - key: dedicated operator: Equal value: master effect: NoSchedule
Anton
@toshuk_kr
да вроде ж прописал правильный. проверил...
su
ну потому что в начале это было computer learning, которое пару раз сократили, потом трагскрипировали на русский и обратно на английский....
вот, ответ которого я ждал, у меня глазки плакали кололись и ломались на названии, это мешало изучению, потому что не мог решиться нажать на ссылку, сейчас справился со своими ментальными проблемами, спасибо) просто закрываю глаза жмякаю и открываю)
Anton
я думаю тебя интересует dedicated=master
Lucky SB
Anton
хм...
Anton
не понял... а что не так?
Lucky SB
не понял... а что не так?
https://kubernetes.io/docs/concepts/configuration/taint-and-toleration/
Валентин
пытаюсь задеплоить в мастер, получаю 0/2 nodes are available: 1 node(s) didn't match node selector, 1 node(s) had taints that the pod didn't tolerate
Если с английским тяжко - на хабре вроде у фланта была статья с примерами для понимания этого дела
Lucky SB
Ты прописал label на ноде и nodeselector для нее. А вот taint на ноде не прописал, хотя в деплое toleration для него сделал
не надо давать вредных советов. тайнт у него на ноде уже есть. второй не стоит добавлять
Валентин
не надо давать вредных советов. тайнт у него на ноде уже есть. второй не стоит добавлять
Так-то и лейбл уникальный у мастера тоже есть, так что тут разными путями можно решать задачу. Лишь бы автор разобрался в том, что он не доделал
Vadim
судя по всему у него DOшный кластер, они вроде не дают мастера менять емнип
Alex
а, это для коннекта к куберу
Lucky SB
Так-то и лейбл уникальный у мастера тоже есть, так что тут разными путями можно решать задачу. Лишь бы автор разобрался в том, что он не доделал
а ты представь, что будет, если ты на мастер-узел добавишь свой тейнт с эффектом noschedule ? а у тебя вдруг найдутся поды, которые должны жить на мастере, но у которых толерейшен прописан только к дефолтным тейнт. оно будет работать, долго, все уже забудется, пока мастер не ребутнут, и они там не смогут стартовать. весело же будет ?
Alex
filter-kubernetes.conf: | [FILTER] Name kubernetes Match kube.* Kube_URL https://kubernetes.default.svc:443 Kube_CA_File /var/run/secrets/kubernetes.io/serviceaccount/ca.crt Kube_Token_File /var/run/secrets/kubernetes.io/serviceaccount/token Kube_Tag_Prefix kube.var.log.containers. Merge_Log On Merge_Log_Key log_processed K8S-Logging.Parser On K8S-Logging.Exclude Off
filter-kubernetes.conf: | [FILTER] Name kubernetes Match kube.* Kube_URL https://kubernetes.default.svc.cluster.local:443 Kube_Tag_Prefix kube.var.log.containers. Merge_Log On Merge_Log_Key log_processed K8S-Logging.Parser On K8S-Logging.Exclude Off
Alex
вот такой конфиг
Vadim
спасиб, попробую, не знай, не я делал, но не работает, пытаюсь исправить
Anton
Anton
да вроде ж всё так...
Anton
apiVersion: v1 kind: Pod metadata: name: busybox namespace: default spec: containers: - name: busybox image: busybox:1.28 command: - sleep - "3600" imagePullPolicy: IfNotPresent restartPolicy: Always nodeSelector: dedicated: master tolerations: - key: dedicated operator: Equal value: master effect: NoSchedule
Andrey
Господа, что брать: glusterfs, cephfs или есть ещё варианты?
Alex
Господа, что брать: glusterfs, cephfs или есть ещё варианты?
openebs еще есть. Или вообще nfs. Вообще смотря куда и зачем брать
Dr_Rob0tnik
Каковы цели?
Andrey
Нужна отказоустойчивая сетевая фс
Alex
пока всё подходит )
Alex
какие еще требования?
Alexander N.
бери IPFS не прогадаешь )
Andrey
Высокая производительность не требуется
Denis
Высокая производительность не требуется
Можешь Linstor глянуть, если правильно понял
Alex
по простоте установки и настройки мне openebs понравился, но со стабильностью не очень было (смотрел 0.8.x)
Alex
сейчас они уже 1.x, по-идее должно стать лучше
Andrey
Не блочные устройства
Lucky SB
да вроде ж всё так...
ойвей... ты добавил второй тайнт на узел, и поменял толерейшен в поде. теперь у тебя под толерантен только к одному тайнту из двух. удаляй свой тайнт с мастера
Anton
удалил. но по прежнему я хз чего он не хочет на матстере запускаться
Lucky SB
удалил. но по прежнему я хз чего он не хочет на матстере запускаться
жди. пока оно сново попытается отработать цикл шедулинга
Lucky SB
tolerations: - key: node-role.kubernetes.io/master operator: Equal effect: NoSchedule
Anton
можно как-то применить патч через kubectl apply (не patch)?
Anton
мне нужно вызывать kubectl apply -f <file>
Anton
через апишку курлом можно что угодно сделать
Anton
удалять сообщения не обязательно ;)
Anton
да не так прочел)))
𝚔𝚟𝚊𝚙𝚜
Нужна отказоустойчивая сетевая фс
Из экзотического можешь посмотреть ещё на RozoFS
Andrey
Из экзотического можешь посмотреть ещё на RozoFS
выглядит интересно, но я чет не в настроении сегодня писать CSI плагин
𝚔𝚟𝚊𝚙𝚜
выглядит интересно, но я чет не в настроении сегодня писать CSI плагин
А зачем плагин? с Shared FS можно просто hostPath юзать
𝚔𝚟𝚊𝚙𝚜
Ещё есть LeoFS, у неё есть nfs-интерфейс, но я ещё не пробовал
Andrey
А зачем плагин? с Shared FS можно просто hostPath юзать
А, ну да, но это не очень красиво
𝚔𝚟𝚊𝚙𝚜
вообще если тебе производительность не важна, бери глюстер, он легко деплоится и в принципе работает
𝚔𝚟𝚊𝚙𝚜
csi для него тоже вроде есть
𝚔𝚟𝚊𝚙𝚜
если же производительность важна и нужен ReadWriteMany бери Linstor и nfs-server-provisioner
Andrey
ReadWriteMany обязательно нужен
Andrey
Я лет 7 назад с глюстером имел дело, но там с производительностью вообще все ультрапечально было. Надеюсь, сейчас стало получше.
𝚔𝚟𝚊𝚙𝚜
если же производительность важна и нужен ReadWriteMany бери Linstor и nfs-server-provisioner
либо сразу nfs-server-provisioner, если не нужна отказоустойчивотсь на уровне ноды