Й
kubectl get pv -o yaml
Пасиб кэп 😏
Lucky SB
Пасиб кэп 😏
обращайсо. ты бы рассказал нафига ты в etcd напрямую лезешь
Vladimir
Всем привет, конфигурация кластера 2 сервера etcd+master, и 3 etcd вынесен на work ноду, подскажите чем грозит потеря мастера? я так понимаю etcd не развалится, хватит ли 1 api-servera, не встанет ли кластер колом?
Й
обращайсо. ты бы рассказал нафига ты в etcd напрямую лезешь
Живется слишком легко. Хочу руками подправить одну запись
Й
И нет, через манифест это слделать нельзя
Й
и да я знаю что это не правильно
Й
но, мой бля кластер, че хочу то и делаю. Я не спрашиваю правильно это или нет. Я спрашиваю - как мне это сделать
Й
вот обожаю русскоговорящее комюнити)
Lucky SB
но, мой бля кластер, че хочу то и делаю. Я не спрашиваю правильно это или нет. Я спрашиваю - как мне это сделать
да нифига ты не спрашивал. ты начал кричать, что etcd тебе ересь возвращает
Й
Ясно)
Vladimir
да чет не очень охото) это прод)
Семён
Dmitriy
ребят, кто-нибудь это юзал? https://kudo.dev
Rokker
Есть вопрос по rolling update. Есть deployment в котором настроен этот самый rolling update. В образе лежил приложение, которое может в graceful shutdown. То есть после поступления сигнала SIGTERM останавливает приём новых соединений, дожидается завершения всех существующих и только поле этого выходит. Проблема: во время rollout undo на другую ревизию запускаю wrk который полылает чуть больше чем пару запросов на приложение и вижу такую картину: 6944 requests in 1.00m, 0.87MB read Socket errors: connect 0, read 20, write 0, timeout 0 То есть ошибок при соединении нет, это значит сервис не перенаправил запросы на поды к которые он послал sigterm. Но видим ошибки при чтении, а это значит что некоторые поды были остановлены во время своей работы. Или kub отключил поды от сервиса, хотя они не завершили передачу данных. Версия kubernetes : 1.11 Конфиг стратегии обновления: strategy: type: RollingUpdate rollingUpdate: maxSurge: 2 maxUnavailable: 0 Ещё конфигарация readness readinessProbe: httpGet: path: / port: 10002 failureThreshold: 1 initialDelaySeconds: 1
Andrey
Есть вопрос по rolling update. Есть deployment в котором настроен этот самый rolling update. В образе лежил приложение, которое может в graceful shutdown. То есть после поступления сигнала SIGTERM останавливает приём новых соединений, дожидается завершения всех существующих и только поле этого выходит. Проблема: во время rollout undo на другую ревизию запускаю wrk который полылает чуть больше чем пару запросов на приложение и вижу такую картину: 6944 requests in 1.00m, 0.87MB read Socket errors: connect 0, read 20, write 0, timeout 0 То есть ошибок при соединении нет, это значит сервис не перенаправил запросы на поды к которые он послал sigterm. Но видим ошибки при чтении, а это значит что некоторые поды были остановлены во время своей работы. Или kub отключил поды от сервиса, хотя они не завершили передачу данных. Версия kubernetes : 1.11 Конфиг стратегии обновления: strategy: type: RollingUpdate rollingUpdate: maxSurge: 2 maxUnavailable: 0 Ещё конфигарация readness readinessProbe: httpGet: path: / port: 10002 failureThreshold: 1 initialDelaySeconds: 1
wrk на что конкретно шлет запросы?
Andrey
не на ингресс?
Rokker
не на ингресс?
Нет, сервис node-port, на ip одного из узлов кластера.
Rokker
Да, я помню. Он не превышен, поды останавливаются в течении нескольких секунд. Значение gracefulTerminationPeriod - 30 секунд
Rokker
Тут даже получается вопрос не в rolling update, а в более узком - Termination of Pods.
Rokker
Настораживает последнее предложение в 5 пункте https://kubernetes.io/docs/concepts/workloads/pods/pod/#termination-of-pods
Rokker
Не совсем понимаю, если “Pod is removed from endpoints list for service” то понятно что он ещё работает какое то время (terminationGracePeriodSeconds), но может ли он дообслужить клиента?
Alex Sharov
Народ, а как измерить какие оптимальные лимиты/рекветы ставить контейнерам?
Alex Sharov
cpu & mem
Alex Sharov
просто сидеть и долбить лоад тестами смотря на графики?
Simon
Привет. У нас крутится под в кубере, мы мониторим его в графане. Если зайти в графики, то там есть три 3 линии: current, requested, limit Что есть requested? сколько мы указали лимит в поде? А limit? Ограничение на namespace?
Andrey
Еееееееееее!
Simon
Имеется ввиду, что requested <> максимальный пик, который был за последнее время
Simon
верно?
Mentat
Имеется ввиду, что requested <> максимальный пик, который был за последнее время
реквестед - это столько, сколько ты попросил в манифесте этому поду выделить, там есть request и limit. По первому шедулится, по второму вырубает
Simon
Ага, понял
Simon
Спасибо
Mentat
Те в идеальном мире идеального кубера request=limit, sum of requests < sum of resources
Vitaly
Коллеги, здравствуйте. я правильно понимаю, что kubectl-ю нельзя передать опции/попросить его подождать, пока deployment станет healthz? чтобы прошла liveness проба. Он просто применяет и никак иначе. и "подождать пока контейнер поднялся" - нужно как-либо самому снаружи, да? банальная вещь - падать в pipeline если приложение упало
George
два - у тебя может быть создано стопицот объектов, но фактическая их доступность и ее проверка - это не задача для kubectl
George
--wait=false: If true, wait for resources to be gone before returning. This waits for finalizers.
George
вот такая опция есть
Rokker
возможно, эндпоинты не успевают обновиться достаточно быстро
Получается что kubernetes отключает поды от сервиса, но можно это как-то подтвердить?
Dmitry
Всем привет: kubernetes 1.11 Пытаюсь вычитать из etcd инфу и чет получаю какую-то ересь. Нид хелп Так читаю ETCDCTL_API=3 etcdctl --endpoints=http://localhost:4001/ get /registry/persistentvolumes/pvc-2e38d46f-decc-11e9-b191-02a0a8f7b7fe вот результат http://i.imgur.com/oU6EQPt.png
я тоже ковырял это, в итоге докопался до какой-то утилиты из реп openshift'а которая вроде как умеет это делать, но я не проверял и забил на это
Dmitry
Вот и я так же поступил
но я когда-нибудь это снова буду ковырять, если что отпишусь об этом =)
Й
но я когда-нибудь это снова буду ковырять, если что отпишусь об этом =)
Ахахахахахах! Я так же подумал. Дажу таску создал себе, когда нить это чекнуть еще раз))
Alexander N.
Коллеги, а кто-нибудь в составе обычного куба использует опеншифтовскую морду?
𝚔𝚟𝚊𝚙𝚜
Я конечно могу ошибаться но возможно на этот etcd можно настравить api-server и через него вытащить всё что нужно
Alexander N.
да, я
Какой версии? Я на 4.2 ловлю какие-то приключения со временем, почти всегда с начала эпохи показывает :)
Alexander N.
После нее смотреть на обычный dashboard совсем не хочется, но косяки со временем и полуживой мониторинг расстраивает )
Alexander N.
Да и разработчикам больше нравится, благо oidc заводиться без диких бубнов
𝚔𝚟𝚊𝚙𝚜
посмотрел, image из latest, номер версии не нашёл 🤦
George
Пора свое репо хостить ?
𝚔𝚟𝚊𝚙𝚜
А?
quay.io/openshift/origin-console@sha256:5f1e4d33f03fcfb2e949803bc98dc60b2c6bdd315f4e87f3fe01577363f21288это 4.3.0
Tuntsov
Всем привет. У меня в кластере есть мониторинг, ставился с помощью прометеус-оператора. В графановском дашборде красивенький mixin выглядит так
Tuntsov
Nickolay
Гордитесь?
𝚔𝚟𝚊𝚙𝚜
Alexander N.
посмотрел, image из latest, номер версии не нашёл 🤦
А со временем то бага есть?) Кстати latest та что 4.3 - очень любит утекать по памяти в браузере, пришлось откатываться на 4,2
Alexander N.
И корректно ли метрики из прома забирает?
Tuntsov
Гордитесь?
В то же время внешний прометеус собирает из куберовского метрики, но там совершенно другие кратинки
Tuntsov
Tuntsov
Воу четыре тыщи
Dmitry
#devops #kubernetes #it Приглашаем 10 специалистов по кубернетис для оценки нового сервиса от МТС. Важно, чтобы вы высказали свою точку зрения на этот продукт. География: Москва (метро Технопарк), ул. Проектируемый проезд №4062, дом 6, стр. 2  БЦ Порт Плаза (usability-лаборатория МТС/Stream)  Расписание:  Даты : 02.12.2019-06.12.2019 Время с 9:00 до 13:00 или с 17:00 до 19:00 Продолжительность интервью: от 1.5 до 2 часов Вознаграждение 4000 руб. переводим сразу после интервью на вашу карту.
Nickolay
запросы выполните которые под кривыми цифрами в каждом прометеусе, без суммирования, посомотрите какие метрики есть, каких нет
Tuntsov
хорошо
Tuntsov
у вас есть возможность поделиться куском params:
Tuntsov
Я не уверен что мои джобы верны, до конца
Nickolay
да, кстати, частота скрэйпа федерации и внутреннего одинакова? а то там avg есть, соответственно при разной частоте может разное количество попадать..