Anton
А есть возможность например пересоздавать под, скажем каждый час?
Anton
Без скриптов извне
Михаил
есть
Andor
есть
Михаил
гугли cronjob
Andor
google://kubernetes+cronjob
Михаил
только не забудь лимиты)
Михаил
а то можно разнести кластер в щи
Михаил
одним неловким движением)
Andor
в смысле? которые лимиты?
Anton
Спасибо уже нашел
Andor
*и
Anton
Я гуглил по шедулеру, нахрдил немного не то
Andor
а, это да
Anton
А лимит 100 подов на ноду планируют увеличивать?
Anton
Кто в курсе
Andor
а его же вроде расхардкодили
Andor
не?
Anton
В наличии есть ксеоновые ноды по 256гб памяти
Anton
At v1.10, Kubernetes supports clusters with up to 5000 nodes. More specifically, we support configurations that meet all of the following criteria:
No more than 5000 nodes
No more than 150000 total pods
No more than 300000 total containers
No more than 100 pods per node
Andor
зионовые
Anton
У мну 1.9.5 даже
Михаил
At v1.10, Kubernetes supports clusters with up to 5000 nodes. More specifically, we support configurations that meet all of the following criteria:
No more than 5000 nodes
No more than 150000 total pods
No more than 300000 total containers
No more than 100 pods per node
100 подов это же рекомендация
Andor
мы на виртуалки поломали
Andor
брат жив?
Михаил
ага
Andor
а какая сеть и какие подсети на ноду?
Михаил
два варианта
с бриджами и калико
Михаил
ты с Мск?
Andor
уже нет
Andor
я тракторнул полгода назад
Andor
я помню как докер начинал уходить в себя на 100 подах на одном демоне
Andor
раскладывание по вируталкам на том же хосте помогало
Михаил
думаем поднять лимиты
Andor
@SinTeZoiD у тебя сколько подов на ноде выходит?
Andor
щас у нас /26 на ноду с калико (побороли вчера в этом же чяте), но нода = виртуалка на железном хосте
Михаил
щас у нас /26 на ноду с калико (побороли вчера в этом же чяте), но нода = виртуалка на железном хосте
я так и не понял, зачем ты делаешь /26 на ноду
Andor
ну точнее калико потом (судя по доке) выделит потом новый /26 когда старый кончится
Andor
не-не, я так не делаю, это калико делает
Andrey
Andor
и "на ноду" - неправильно я написал
Andor
угу
Михаил
@SinTeZoiD у тебя сколько подов на ноде выходит?
я вот прямо сейчас посмотрел 100 не превышаем
Andor
и на ходу можно подправить
Andor
неудобно, но сработало
Михаил
не-не, я так не делаю, это калико делает
я просто не знаю как делает ваниальный калико ) мы его распотрошили немного)
Andor
и не бэкпортили в апстрим наработки? :(
Roman
kube-controller-manager --allocate-node-cidrs=true --cluster-cidr=10.20.24.0/22 --node-cidr-mask-size=26
реально размерность сети на ноду выбирает не сам калико
fyi конфиг кубадма в этом месте немного сломан и задается вот так
controllerManagerExtraArgs:
allocate-node-cidrs: "true"
cluster-cidr: "10.20.24.0/22"
node-cidr-mask-size: "26"
Костя
Коллеги, немного нубский вопрос, но стесняться некого. Headless сервис для чего вообще юзается? Можете кратко пояснить?
Andor
ваще да, это всё Рома заборол, не "мы" :)
Andor
Рома - молодец
Andor
Костя
Это получается сервис без балансинга или как?
Andrey
просто выдает список A записей для эндпоинтов
Костя
Все равно чуть не вьезжаю. Получается тупо чтобы поды внутри statefulset общались между собой по одному имени?
Костя
😨
Andor
наоборот
Andor
ну то есть не обязательно внутри
𝚔𝚟𝚊𝚙𝚜
ну точнее калико потом (судя по доке) выделит потом новый /26 когда старый кончится
Ух ты, а давно так калико умеет?
Romana тоже так делает, только там блоки /29 по дефолту
Костя
ну то есть не обязательно внутри
Вот к примеру есть statefelset с двумя репликами. Нафиг им headless сервис?
Andor
Ух ты, а давно так калико умеет?
Romana тоже так делает, только там блоки /29 по дефолту
я честно говоря не знаю, с этим @rgersh вчера ковырялся и скидывал цитату на какой-то их тикет
Andor
Вот к примеру есть statefelset с двумя репликами. Нафиг им headless сервис?
да не обязателен он, ты можешь ручками ходить в каждый из них
𝚔𝚟𝚊𝚙𝚜
о как. а у него это где-то настраивается?
$ grep cidr /etc/kubernetes/manifests/kube-controller-manager.yaml
- --allocate-node-cidrs=true
- --cluster-cidr=10.244.0.0/16
- --node-cidr-mask-size=24
𝚔𝚟𝚊𝚙𝚜
подозреваю тут, но калико может свой конфиг юзает, не уверен
Roman
я так понял что калико не имеет отношения к выдаче блока на ноду, это делает именно сам kube-controller-manager. А калико только анонсит эту сеть
𝚔𝚟𝚊𝚙𝚜
вот я тоже всегда думал что так
Andor
ну мы просто со стороны калико искали почему анонсится /24 когда мы ожидали /26
𝚔𝚟𝚊𝚙𝚜
ну мы просто со стороны калико искали почему анонсится /24 когда мы ожидали /26
а в spec.podCIDR ноды, чего?