uncordon, не?
Пробовал. Да ребутну ноду. kubelet жив насколько понял
Denis
Anton
Всем привет! Подскажите, был OOM на ноде k8s. Все поды переехали на другие ноды. Проблему исправил, но эта нода в статусе NodeNotReady в describe. Подскажите как ей сказать что она здорова?
после eviction как то kubelet не оживал, просто рестартанул его
Artem
Добрый. Обновил все ноды в кластере до 1.12, пытаюсь заджойнить еще одну ноду, получаю такую ошибку: configmaps "kubelet-config-1.12" is forbidden: User "system:bootstrap:qws8xq" cannot get configmaps in the namespace "kube-system"
Artem
кто-нибудь подскажет, что может быть не так?
Sergey
тебе же все написали в ошибке
Denis
Товарищи, посоветуйте какой-нибуть удобный дашборд в графане, чтобы в нем было видно состояние всех нод в кластере? Много их уже перелопатил , но что то не могу найти то что нужно
Sergey
Sergey
теперь в курсе
Sergey
А можно ссылочку? А то сижу гуглю и ничего ненахожу
https://habr.com/company/flant/blog/423851/
Sergey
habr
grafana
зачем гуглить
Никита
Товарищи, посоветуйте какой-нибуть удобный дашборд в графане, чтобы в нем было видно состояние всех нод в кластере? Много их уже перелопатил , но что то не могу найти то что нужно
Дык kube-prometheus, там дашбордов всяких хватает.
Никита
Ток он через оператор и кастомные ресурсы работает.
Sergey
Denis
Stanislav
ncuxu(tm)
Iaroslav
А кто-то к дашборду ldap прикручивал? dex поставлен а дашборд по токенам и не ясно как вообще все это связать вместе
𝚔𝚟𝚊𝚙𝚜
𝚔𝚟𝚊𝚙𝚜
Anonymous
приветствую. Встречал кто ошибку с cephfs-provisioner "mount error 5 = Input/output error" PVC создается, но не маутиться.
Konstantin
у меня проблема такого плана: когда я создаю кластер в kops 1.10+, то на мастере поднимается только kube-proxy. В /etc/kubernetes/manifests только он и лежит.
А на 1.9.x всё нормально. Никто не сталкивался?
Konstantin
ls /etc/kubernetes/manifests/
kube-proxy.manifest
Anonymous
Разобрался, надо namespace исключить
Georgiy
привет
когда кронджоба не может исполнится копятся POD-ы: 0/1 ImagePullBackOff 0 3d, и в какой-то момент кончается квота на POD и перестают работать другие джобы/деплой приложений
можно ли где-то поставить, чтобы зафейлившиеся поды удалялись ?
Denis
привет
когда кронджоба не может исполнится копятся POD-ы: 0/1 ImagePullBackOff 0 3d, и в какой-то момент кончается квота на POD и перестают работать другие джобы/деплой приложений
можно ли где-то поставить, чтобы зафейлившиеся поды удалялись ?
Помоему там есть параметр , который отвечает за общее время жизни джобы
Denis
Georgiy
работает как надо, спасибо
Й
бляяяя
bebebe
@SinTeZoiD
Rainbow
надо группу шардировать, им же не интересны группы меньше какого-то порога 😂
Михаил
им всё равно
Anton
нет
Здорова, не подскажешь у тебя не было проблем с запуском stolon-keeper в кубере? на некоторых машинах не работает сегфолтится initdb
Михаил
не было
Anton
На машинах где 256гб, выдает шаред память 32мб - все запустилось, на тез где 64 выдает 8мб и там крашится
Михаил
взяли
Михаил
какие не помню
Anton
взяли
А на хосте сколько памяти? просто уже че только не делал и русурсы прописывал и /dev/shm в память монтировал - нифига, единственное предположение связано с хостовой памятью
Михаил
Михаил
та не за что)
Anton
ну хотябы пока буду думать в направлении памяти на хосте
vlad
Народ есть сводная табличка сравнения реализаций сетевой подсистемы flannel/calico/weavenet/etc,
по аналогии с https://docs.google.com/spreadsheets/u/1/d/16bxRgpO1H_Bn-5xVZ1WrR_I-0A-GOI6egmhvqqLMOmg/edit#gid=1612037324 для ингресов
?
vlad
что бы всё в одном месте
Anton
вброшу про postgres, в его буферы же обычно не загоняют всю раму с хоста. в контейнерах с лимитами какая политика по выделению памяти? каждый коннект жрет немало, да и под файловый кэш нужно пространство.
Anton
вброшу про postgres, в его буферы же обычно не загоняют всю раму с хоста. в контейнерах с лимитами какая политика по выделению памяти? каждый коннект жрет немало, да и под файловый кэш нужно пространство.
на тестовых хостах 64 рамы, в контейнер отдал 16 - под буфер выделил 8, но при initdb столон не учитывает настройки
Anton
он там 400кб берет чтоли
Anton
creating directory /stolon-data/postgres ... ok
creating subdirectories ... ok
selecting default max_connections ... 20
selecting default shared_buffers ... 400kB
Anton
на некторых хостах
FATAL: could not create shared memory segment: No space left on device
DETAIL: Failed system call was shmget(key=4097, size=56, 03600).
HINT: This error does *not* mean that you have run out of disk space.
It occurs either if all available shared memory IDs have been taken,
in which case you need to raise the SHMMNI parameter in your kernel,
or because the system's overall limit for shared memory has been reached.
на некоторых просто segmentation fault
Anton
там где рамы 256 и более - проблем нет, думаю раму он отдает в каком то процентном соотношении
Alexey
> in which case you need to raise the SHMMNI parameter in your kernel
а kernel.shmmni пробовал поднимать?
Usagi
Здарова всем. Кто подключал self-hosted gitlab с kubernetes? У меня кластер подключается к проекту, helm tiller устанавливается, но runner не работает (last contact: never).
Михаил
Гитлаба
Usagi
там все чисто. Даже подключал runner напрямую (не kubernetes) - все работает. Но именно runner в кластере не подключается. При этом в логе контейнера ругает: 401 Unauthorized
Usagi
Usagi
И вот так вот в гитлабе
Usagi
Anton
Евгений
все не так просто - https://github.com/kubernetes-incubator/external-storage/tree/master/local-volume- но с костылями можно
так, а о каких костылях речь? вроде как динамического провиженинга там вообще нет ни в каком виде
Vadim
так, а о каких костылях речь? вроде как динамического провиженинга там вообще нет ни в каком виде
вот именно, если хочется динамического - то тут начинаются костыли
Евгений
вот именно, если хочется динамического - то тут начинаются костыли
ну так а можно пример?) какими костылями его можно включить?
Rainbow
вот именно, если хочется динамического - то тут начинаются костыли
а какой динамический на baremetal? сколько есть, столько и создал. Это же не облако.
Vadim
а какой динамический на baremetal? сколько есть, столько и создал. Это же не облако.
именно по этому я не стану показывать свой костыль - 1) он жуткий, 2) у гражданина выше поди другая ситуация
𝚔𝚟𝚊𝚙𝚜
ну так а можно пример?) какими костылями его можно включить?
как вариант написать свой провижионер,
что-нить типа такого:
- запускается как daemonset и смотрит за новыми PVC, как только PVC появляется.
Создает local-волум с нужными параметрами на ноде, затем PV в кубере.
Остается только придумать как они между ссобой договариваться будут
Евгений
oh shi)
Евгений
тогда зайду с другой стороны. допустим у меня есть виртуалка со 100 гигабайтами диска. как сказать куберу - вот тебе тачка, хости все на ней?
Евгений
и чтоб dynamic обязательно работал
Vadim
тогда зайду с другой стороны. допустим у меня есть виртуалка со 100 гигабайтами диска. как сказать куберу - вот тебе тачка, хости все на ней?
как кубернетесу угадать на котором из дисков это хостить?