Stefan
Или название
https://github.com/stakater/Reloader я это юзал
Евгений
Или название
https://github.com/jimmidyson/configmap-reload
Евгений
Может подёргать за вебхук для релоада конфига
Yuriy 🐼
https://github.com/stakater/Reloader я это юзал
Он весь pod рестартует?
Stefan
хуки не всегда работают, как минимум с прометеем вебхук релоудил конфигурацию, но она не применялась😑
George
да причм тут есть он или нет
Stefan
да, именно на это я и попал
зато его алертменеджер прекрасно релоудил конфигурацию и она применялась
George
ты чего - в манифесты переделать не сможешь хельм темплекты?
George
ну, это реально смешно
Nik
рельно нет никого в чате кто юзает containerd+calico?
Stefan
helm нет у нас написал же
helm template команда
Stefan
оно тебе выплюнет простыню манифестов сгенерированных, а там под себя переделай уже
Stefan
рельно нет никого в чате кто юзает containerd+calico?
да наверняка есть, просто не читают (
Yuriy 🐼
Prometeus charts юзают вебхук от jimmidyson/configmap-reload
George
да, все так
Dmytro
Ссылки не нужны, я найду (хотя может помните про что примерно было?), просто нужна была консультация того кто в этом разобрался. И найти такого человека оказалось довольно сложно. И это приводит к пониманию того что сейчас где-то очень много людей не понимают почему у них те или иные проблемы
освежил память и нашел ссылку https://medium.com/@maxwell9215/cfs-bandwidth-control-warmup-b03af4cc1cc4 которая хорошо объясняет как работает CFS (slice и sched_entities), только тут объясняется что размер слайса всегда задан в /proc/sys/kernel/sched_cfs_bandwidth_slice_us но не так давно добавили позможность задавать размер слайса для каждой cgroup отдельно https://lwn.net/Articles/753177/
Dmytro
поэтому стало еще сложнее
Dmytro
значение же requests же на нагруженной ноде (когда нет spare cycles) по сути задает приоритет/вес каждой из cgroup - какую cgroup ядро первее должно шедулить на выполнение
G72K
Кстати я тут недавно задавал вопрос про СFS троттлинг и в итоге разобрался. И выходит так что при большом количестве cgroups все балансируется используя cpu.shares для выделения процессорного времени, а лимиты уже регулируют сколько вы из этой части сможете заиспользовать. Это я сейчас говорю про систему под какой-то более менее нагрузкой, на свободной все чуть чуть иначе. И по сути если у нас реквест 10m то у нас будет “вес” cpu.shares=10 и мы будем по умолчанию получать намного меньше вычислитетльных ресурсов чем наш сосед. И если у нас лимит 500m то мы конечно сможем получить до половины от ядра, но на деле мы будет получать и так мало из-за развесовки, и из этого мало мы еще и сможем использовать только часть, а именно (по дефолту период 100ms, и до версии куба 1.12 это хардкод) всего 50ms из 100ms (т.к. 500m в кубернетисе в итоге превратятся в cpu.cfs_quota_us=50000 при cpu.cfs_period_us=100000) выделенного процессорного времени, а все остальное время будет троттлится Если кому-то интересно могу постараться и оформить это все в пост, возможно меня кто-то поправит или сможет помочь более глубокими знаниями при вычитке Или может кто-то сможет со мной на днях пообщаться 1 на 1 у меня есть вопросы чтобы собрать всю картину
Нет же, лимиты абсолютны, shares относительны процессорное время будет ограничено тем ,что первое выстрелит . Ну и сам механизм ограничения разный: у shares это как часто будут давать процессор относительно других претендентов, а limits "штрафует" и снимает с процессора безальтернативно на cfs period ns
Cholovik
Нет же, лимиты абсолютны, shares относительны процессорное время будет ограничено тем ,что первое выстрелит . Ну и сам механизм ограничения разный: у shares это как часто будут давать процессор относительно других претендентов, а limits "штрафует" и снимает с процессора безальтернативно на cfs period ns
> у shares это как часто будут давать процессор относительно других претендентов Но ведь это тоже актуально, мне сначала должны дать, пока не дадут я не смогу использовать и соответственно не на что применять квоты?
Nik
я тут зашёл в англоязычный слак кубера, и как то там оооочень тихо (сравнительно с этим чатом). может есть какое то более активное англоязычное сообщество, кроме слака? или там все социопаты?
Cholovik
Да, если набралось меньше лимита, он не выстрелит
Всмысле мне по в теории весу может прилететь меньше процессорного времени чем указано в квоте и тогда я до троттлинга не дойду просто? Немного запутано конечно пока что
G72K
Там вроде бы есть какие-то нюансы то ли с прерываниями то ли с сисколами, вобщем время считается не всегда аккуратно , но лучшего у нас ничего нет :)
Cholovik
Просто сложно перестроить картину мира после того как думал о реквестах/лимитах как о шедулинге/ограничении на максимальное потребление на - борьбу за хоть кусочек цпу/борьбу за то чтобы потратить то что выдали 😍
G72K
Ну shares используется при шедулинге тоже и по-сути представляет минимально возможное количество ресурса под гарантированно получит (если кублет правильно настроен и учитывает системные процессы)
Dmytro
Просто сложно перестроить картину мира после того как думал о реквестах/лимитах как о шедулинге/ограничении на максимальное потребление на - борьбу за хоть кусочек цпу/борьбу за то чтобы потратить то что выдали 😍
там еще сложнее, т.к. идет шедулинг идет слайсами по 5мс (по дефолту) и шед мог не доиспользовать весь слайс - то недоиспользованная часть этих 5мс отдается следующему шеду (если больше 1мс), я эту часть до конца так и не раскурил
inqfen
Иногда выделение времени нехорошо
inqfen
Что-то вроде того, что ядро для обеспечения квот начинает исходя из них переключать контекст проца
inqfen
Выполняя то одно, то другое, а операция это затратная
inqfen
В итоге выходит, что все процессы время по квотам получили - а в общем работало дольше чем если бы их просто не было
inqfen
Поэтому ими лучше только приоритезировать, а не вешать на все
Nik
а есть у версий кубера минимальная совместимая версия cni плагина в cri?
Fedor
Кто нибудь интегрировал openstack + k8s? Не могу настроить cloud provider. Не поднимается coredns, flanet поднялся в логах ошибок нет, etcd тоже на ура, ip другим контейнерам не раздает. K8s version: 1.16.0
Fedor
В дескрайбе к поду coredns пишет что толерантность, хотя по лейблам совпадений точно нет
🇷🇺 Vladimir
огласите полный дескрайб пожалуйста
D
Господа, а есть какой-нибудь осмысленный способ бандлить сторонние модули с NGINX Ingress Controller (который от Kubernetes-комьюнити)?
Maksim
всем привет
Maksim
вопрос а есть возможность как то в хелм чарте загрузить енв файл в конфигмап? как у куба --from-env-file
Maksim
?
Dmytro
Но лучше не надо
Dmytro
вопрос а есть возможность как то в хелм чарте загрузить енв файл в конфигмап? как у куба --from-env-file
Есть возможность загрузить любой файл или директорию в конфигмап и секрет - см документацию по темплейтам
Alexander
28 Октября пройдет вебинар на русском языке Amazon EKS за один час https://pages.awscloud.com/EMEA-field-OE-Amazon-EKS-DeepDive-2019-reg-event.html Может быть кто-то захочет подключиться.
Vladimir K
А я правильно понимаю, что флаги apiserver'а (куб был поставлен kubeadm на голом железе) указываются только в манифесте пода? Или есть другой способ их поправить (какой-нибудь командой kubeadm, например)?
Владимир
Добрый день, коллеги Требуется мнение профессионалов, поставили задачу установить на 5 серверов Ceph и K8S одновременно. Типа железа нет, а кубер хочется. Кто нибудь пробовал такое извращение? Первое что вижу, проблемы с OOM, кубер потребует отключить своп, в результате при неаккуратных настройках мы можем потерять весь узел. Стоит ли вообще пытаться так сделать?
Владимир
Да, видимо так и сделаю. Спасибо! В соседней теме по цефу к тому же пришли.
Nurlan
как в istio точно указать путь к сервису? что-то типа - match: - uri: equals: /mypath
Nurlan
prefix не подошел так как были конфликты с похожими ссылками
Anonymous
подскажите по gitlab ci-cd helm ранее делали так: в гитлабе переменные DEV_APP=1111 PROD_APP=2222в момент деплоя я выполняю команду sed env | grep "^DEV_" | sed "s/^DEV_//" | sort > /storage/.envя выбиваю из переменной для окружения develop приставку DEV_ и в файлик .env складываю переменные для дальнейшего использования... а как вы делаете это в helm ? можно обойтись без sed?
V 🏴‍☠️
--set
რად
подскажите по gitlab ci-cd helm ранее делали так: в гитлабе переменные DEV_APP=1111 PROD_APP=2222в момент деплоя я выполняю команду sed env | grep "^DEV_" | sed "s/^DEV_//" | sort > /storage/.envя выбиваю из переменной для окружения develop приставку DEV_ и в файлик .env складываю переменные для дальнейшего использования... а как вы делаете это в helm ? можно обойтись без sed?
helm умеет в подмену значений в values. Создай в репе три файла типа values.dev.yaml,`values.stage.yaml`, values.prod.yaml и четвертый обычный values.yaml. В основном определи все переменые, а по окружениям те, что будешь подменять. Дальше во всех стейджах своего CI гоняй helm install chartname -f values.yaml -f values.${environment}.yaml, где в перeменной environment отдавай то, что нужно
Vadim
calico 3.8.3 работает у кого-нибудь? чет не пашет node sheduler, а 3.8.2 норм
Andrey
Добрый вечер, поделитесь секретным знанием, какую версию куба лучше использовать для прода? Есть какие-то предпочтения? Например, пробовал 15.+ Поставить там баги с latest helm-ом.. И вот что стабильнее?
Alisher
Всем привет. На GCP k8e нужно поставить эластик и пару рест сервисов у которых должен быть доступ к эластику. Как это правильно сделать? Все должны быть в разных кластерах ? Подскажите в какую сторону двигаться.
Andrey
Стоит 1.15.2 и helm 2.14.3, всё ок
Дашборд под 15 появился? Месяц назад не было поддержки 15 (если я там смотрел)
V 🏴‍☠️
Дашборд под 15 появился? Месяц назад не было поддержки 15 (если я там смотрел)
Смысла в дашборде в принципе нет, но бетка работает без проблем
Andrey
Смысла в дашборде в принципе нет, но бетка работает без проблем
Все в консоли, или есть более удобные альтернативы?
V 🏴‍☠️
Все в консоли, или есть более удобные альтернативы?
В консоли. Но ещё раз повторюсь - дашборд работает
Andrey
Хм, спасибо
Салтыдык
В консоли. Но ещё раз повторюсь - дашборд работает
чо вы отговариваете его?) Хельм не работает, дашборда не пашет. Чувак по правильному пути идёт)
V 🏴‍☠️
Хм, спасибо
Слыш, там ничо не работает, ставь и используй nomad (не шучу)
Салтыдык
я тоже поглядывал на hashicorp стек)
Andrey
а вообще дашборд с опеншифта норм, пробуй ставить его