Zhyhanov
Добрый. OpenJDK 64-Bit Server VM 18.9 (build 11.0.2+9, mixed mode)
Ну сейчас точно не скажу, на какой версии но вроде как исправили багу с GC или ещё пилят. Мы костыльнули лимитом самого кубера что бы убивал её. Так -xmx в этом случае не помогает.
Zhyhanov
Или форк какой-нибудь допилить
Любо баш и ватчдог от фланта :)))
Solyar
Любо баш и ватчдог от фланта :)))
Написал пару скриптиков на питоне
Solyar
Жив, деплою безопасно
Solyar
С роллбеком
Zhyhanov
Dmitry
Поду
Да, она и сама отвалиться по ООМ тогда)
Egor
А ошибка то какая?
systemd[1]: dev-loop0.device: Job dev-loop0.device/start timed out. systemd[1]: Timed out waiting for device dev-loop0.device. systemd[1]: Dependency failed for /mnt/disks/myvolume1. systemd[1]: Dependency failed for Local File Systems. systemd[1]: local-fs.target: Job local-fs.target/start failed with result 'dependency'. systemd[1]: local-fs.target: Triggering OnFailure= dependencies. systemd[1]: mnt-disks-myvolume1.mount: Job mnt-disks-myvolume1.mount/start failed with result 'dependency'. systemd[1]: dev-loop0.device: Job dev-loop0.device/start failed with result 'timeout'. Вот такое происходит, похоже что cat /proc/mounts | grep 'myvolume1.img' >> /etc/fstab не лучшее решение.
Zhyhanov
Да, она и сама отвалиться по ООМ тогда)
Ну так хоть ты будешь это контролить что бы она не выела всю память на ноде.
𝚔𝚟𝚊𝚙𝚜
сам /var/volume то откуда берётся, это тоже mount point?
Egor
сам /var/volume то откуда берётся, это тоже mount point?
/var/volume это директория в / , то есть не отдельная точка монтирования.
Egor
попробуй добавить nofail,x-systemd.requires=multi-user.target к опциям монтирования в /etc/fstab
Мне кажется какие-то грабли именно в ubuntu, ещё советуют прописать noauto,x-systemd.automount буду пробовать.
Niko
Господа, есть ли уже готовое решение с преднастроенными алертами для ресурсов кластера?
Nikolay
такое есть https://github.com/coreos/kube-prometheus
Niko
такое есть https://github.com/coreos/kube-prometheus
Спасибо, юзаю аналог, https://github.com/helm/charts/tree/master/stable/prometheus-operator Но в grafana алерты нужно добавлять самому
Eduard
Подскажите годный мануал на дебаг coredns. ~20% времени эта гадость не отвечает. Сеть/диск/etcd/apiserver проверил, кол-во запросов тоже не должно было измениться, да и снизил кол-во подов.
Alina
Есть у кого опыт работы с ДЦ Amazon? На сервере упал процес sshd, может можно подключится как-то по другому и поднять его?
Roman
Хм!
Anatolii
Всем доброго утра. Поделитесь инфой, как работают механизмы в кубернетис в целом и в частности сеть, контролллер, скхедулер и т.д. Ссылки на правильные статьи или фооумы. 🤔
gani
Доброго утра! Есть уже подключенная NFS шара, хочу поменять IP/path на другой NFS. Какие мои шаги? - Удаляю PVC kubectl delete pvc/pvcname (после чего разboundится PV, да? и я смогу забаунтить новую в него) - Пишу новый, с новым NFS, создаю (kubectl apply ….) - Готово. ?
gani
Ой, точно. - удаляю пвс - редактирую пв - баундю пвс обратно
gani
Поменял ip/path, обновляю пв, ошибку выдает, смотрю что это. kubectl apply -f pv-nfs-snapshots.yaml The PersistentVolume "nfs-snapshots-pv" is invalid: spec.persistentvolumesource: Forbidden: is immutable after creation
Solyar
Там же написано черным по белому. Pv иммутабелен после создания
Алексей
Всем привет. Помогите, пожалуйста. Пишу сюда, т.к. в каналах по гугл клауду тишина на этот счёт... https://serverfault.com/questions/988931/cant-delete-custom-metrics-from-google-stackdriver
V 🏴‍☠️
Подскажите, может я что-то упускаю или не понимаю. Необходимо выполнять команду в контейнере с помощью kubectl exec, но выхлоп данной команды надо выводить в тот stdout, который пишется кубом как лог пода, как это организовать? Куда нужно вывод перенаправить?
George
в самой команде sh -c " ЧТОТО > /proc/1/fd/0"
George
попробуй так
V 🏴‍☠️
Я так пробовал по всем вариантам, какие могут быть для tty и stdout, он не может туда перенаправить и exit 1 выкидывает
George
покажи все варианты, которые ты выполнял
V 🏴‍☠️
/dev/stdout ссылается на /dev/pts/ptmx, который в свою очередь ссылается на /proc/self/fd/0, вот их и пробовал
George
проверил
George
kubectl -n NAMESPACE exec -it OOOOOO -- sh -c "echo 'ffsfsfsd' > /proc/1/fd/1"
George
вот так работает
V 🏴‍☠️
Ок, ща гляну конкретно такой вариант
George
ну, я думал, что у тебя фантазии достаточно
George
🤷‍♂️🤷‍♂️🤷‍♂️
George
там же три потока ввод-вывода под номерами 0, 1, 2. Ес-но я не помню КАКОЙ ИЗ НИХ КАКОЙ
V 🏴‍☠️
Моя фантазия увела меня в сторону=)
George
stdin, stdout, stderr
V 🏴‍☠️
Ну вот я все их и проверял=)
V 🏴‍☠️
0 - in, 1 - out, 2 - err
George
ну, логично, в ин писать низзя
V 🏴‍☠️
Да
George
только в out & err
G72K
kubectl -n NAMESPACE exec -it OOOOOO -- sh -c "echo 'ffsfsfsd' > /proc/1/fd/1"
Разве у докера fd 1,2 не сокеты или это от драйвера зависит?
George
Разве у докера fd 1,2 не сокеты или это от драйвера зависит?
эм... это ты вообще долбишься в потоки ввода-вывода инита
George
работает и ВНЕ докера, так-то
V 🏴‍☠️
Крч я понял почему не получилось. Приложение принципиально в соответствии со своим конфигом лог выводит
V 🏴‍☠️
Плюёт на перенаправление
G72K
эм... это ты вообще долбишься в потоки ввода-вывода инита
Если эти потоки - сокеты, то переоткрыть их нельзя , только унаследовать, а значит exec с таким перенаправление работать не будет. Я вот и спрашиваю, сокеты ли они? Мне казалось что у докера - да. У systemd процессов например точно сокеты
G72K
ну, вот так вот работает
ls -lh /proc/1/fd что показывает?
George
George
цветное. куль
Max
Events: Type Reason Age From Message ---- ------ ---- ---- ------- Normal Scheduled 2m33s default-scheduler Successfully assigned gs/gs-1-2-3 to s1 Normal Pulled 2m32s kubelet, s1 Container image "test" already present on machine Normal Created 2m31s kubelet, s1 Created container Normal Started 2m31s kubelet, s1 Started container Warning Failed 2m19s kubelet, s1 Error: transport is closing Warning FailedSync 72s (x6 over 2m15s) kubelet, s1 error determining status: CreatedAt is not set
Max
В чем может быть проблема?
Max
редко, но бывает что под не запускается
Lucky SB
Lucky SB
а в логах докера есть что ? выглядит так, что контейнер стартует и тут же роняет докер. так, что кублет теряет связь с докер-демоном.
Lucky SB
реальный кандидат - оом киллер приходит
Max
посмотрю щас(
Александр
Доброго дня! Может кто сталкивался, через некоторое рандомное время (в примере далее - через 3 дня, ночью), pod теряет статус Ready, хотя до этого успешно жил и отвечал (собственно как и сейчас, зашел через kubectl exec и курлом дернул localhost). status: conditions: - lastProbeTime: null lastTransitionTime: "2019-10-16T04:08:06Z" status: "True" type: Initialized - lastProbeTime: null lastTransitionTime: "2019-10-19T01:05:10Z" status: "False" type: Ready - lastProbeTime: null lastTransitionTime: "2019-10-16T04:08:17Z" status: "True" type: ContainersReady - lastProbeTime: null lastTransitionTime: "2019-10-16T04:08:06Z" status: "True" type: PodScheduled P.S. readinessProbe нет
Александр
куда копать?
NM
цветное. куль
бубунта ? 😉