V 🏴‍☠️
Вон выше свой вариант киляния джобов выложил
rambling
ток если их по нс размазало
rambling
смотреть надо, думать, нюансы учитывать
V 🏴‍☠️
Ну до пайпа всунь -А вместо неймспейса, прикрути греп, после пайпа поймай ещё одним авком нужный неймспейс
V 🏴‍☠️
Блин там дело то в одну строку
rambling
ну д
rambling
странно что люди которые добираются до куба о таком спрашивают
V 🏴‍☠️
А вообще можно по лейблам просто отсортировать то, что надо прибить
Lucky SB
размер имеет значение. 1000 джобов и 150000 джобов - достаточно большая разница. чтобы имело смысл задуматься об оптимизации
V 🏴‍☠️
Но это не так универсально
rambling
размер имеет значение. 1000 джобов и 150000 джобов - достаточно большая разница. чтобы имело смысл задуматься об оптимизации
ну да и любой кто учил пграмирование знает что сортировка слиянием от пузырька отличается
V 🏴‍☠️
George
где гифка с наркоманами
Игорь
а kubectl delete job -l foo=bar --wait=false не справится, кстати? (если есть селектор, по которому удалять)
George
V 🏴‍☠️
Или про то, что выше про лейблы написал
Lucky SB
Я про -l у kubectl
wtf ??? с каких это пор это стало называться сортировкой ?
V 🏴‍☠️
Я сплю уже
Lucky SB
Ну выборка
давай ты сначала доку прочитаешь
George
повторюсь
Lucky SB
а то мне как-то стыдно за тебя
rambling
Поэтому не надо грузить аписервер сортировками, используй awk и grep
грепка так то тоже сложная штука алгоритмически
rambling
если чот сложнее ^a делоть
Марат
когда удалишь старые, добавь новым ttlSecondsAfterFinished все-таки)
Марат
а если пропатчить... хотя это наверно еще тяжелее будет)
Lucky SB
кто-то знает норм способ delete 150К джобов ?
аааэм. а как у тебя докеры поживают ? Когда у меня случился (меньший по масштабам) вывал кронджобов, на нодах была куча остановленных контейнеров от выполнившихся джобов. примерно по 1000 с лишним на узел из-за которых докеру поплохело настолько, что только ребут узла помогал
George
ttlSecondsAfterFinished ?
George
https://habr.com/ru/company/flant/blog/476320/
George
тут флантовцы предлагают activeDeadlineSeconds
Марат
альфа
150к башем удалять конечно лучше, не поспоришь)
George
взаимозаменяемые или взаимодополняюшие штуки?
Lucky SB
https://kubernetes.io/docs/concepts/workloads/controllers/jobs-run-to-completion/#job-termination-and-cleanup
V 🏴‍☠️
а то мне как-то стыдно за тебя
Бляд, -l там должно быть, а не -о
Igor
docker ps -a на узле норм ?
wc 237 штук , но норм
V 🏴‍☠️
vkz ? почему это ?
Вешаешь лейблы, чтоб было проще по ним делать выборку
Отделение Bereke Bank
Пошел шатать прод
создаем 150к джобов
Марат
тут флантовцы предлагают activeDeadlineSeconds
Once a Job reaches activeDeadlineSeconds, all of its running Pods are terminated and the Job status will become type: Failed with reason: DeadlineExceeded. они и так остановлены у тебя
V 🏴‍☠️
Вешаешь лейблы, чтоб было проще по ним делать выборку
Удаляешь то, что попало в эти лейблы
V 🏴‍☠️
vkz ? почему это ?
Это я про свою опечатку
V 🏴‍☠️
Говорю ж - сплю
Lucky SB
kubectl get jobs -n namespace | awk '{print $1}' | xargs -r kubectl delete jobs -n namespace
Эм ? Я про вот эту команду.... тут авк не нуно kubectl get job -n n1 -o name | xargs -r kubectl -n n1 delete
Lucky SB
Удаляешь то, что попало в эти лейблы
Зачем сначала вешать лейблы ? чтобы потом по ним удалять ? ;)
V 🏴‍☠️
Зачем сначала вешать лейблы ? чтобы потом по ним удалять ? ;)
Ну лейблы вообще полезны бывают. Не только для простоты удаления=)
V 🏴‍☠️
соглы. но если их нет ? ;)
Вот потому я и сказал, что это не универсальный способ - удалять по лейблам
V 🏴‍☠️
И xargs тут более полезен
Отделение Bereke Bank
создаем 150к джобов
медленно идет 😒 к утру наверное закончится 😂
Lucky SB
хочешь сказать нужно постоянно делать docker prune ? А то докер заваливается от миллионов выполненных контейнеров ?
нихт. хочу сказать, что у меня был случай, когда висела куча выпоненных джобов...
Lucky SB
и к каждому такому джобу прилагался остановленный контейнер.
Lucky SB
как только джоб удаляли - удалялся и контейнер
Lucky SB
в нормально ситуации
Отделение Bereke Bank
Lucky SB
Всегото ?
Lucky SB
11**
болеем за твой кластер ))) потом расскажешь сколько раз оом приходил к контролплейну
George
стресс тесты )
Отделение Bereke Bank
пока скатаю в доту
V 🏴‍☠️
стресс тесты )
Которые мы заслужили, ага
rambling
можно сделоть джоб который чистит кластер
Egor
Друзья! я новичок в kube, столкнулся с проблемой, может объясните мне что не так. Есть кластер, два нода, накачен nginx-ingress, насколько я понял там свой балансер, и вот из моих двух нод одна down другая healthy, это нормально или нужно найти способ что обе ноды были здоровы?
Lucky SB
# istioctl experimental upgrade -f i.yml Client - istioctl version: 1.4.0 Error: the target version 1.4.2 is not supported by istioctl 1.4.0, please download istioctl 1.4.2 and run upgrade again # istioctl version client version: 1.4.2 control plane version: 1.4.1 data plane version: 1.4.1 (7 proxies) wtf ? качнул новый istioctl верси 1.4.2 - не хочет обновлять ... говорит что клиент старый. есть кто шарит ? ;)
rambling
а бинарь разве 1.4.2?
Egor
Если кто то даун - это не нормально... по какому мануалу кластер ставил ? kubectl describe node имя-узла что пишет в Events ?
вот по этому https://www.digitalocean.com/community/tutorials/how-to-set-up-an-nginx-ingress-with-cert-manager-on-digitalocean-kubernetes
Lucky SB
а бинарь разве 1.4.2?
ну 5 минут назад скачал с гитхаба
Lucky SB
вон istioctl version пищщит, что 1.4.2 да и не было у меня в том кластере 1.4.0 никогда