NM
Если вам нравится условный сворм — юзайте его, не нужно про бест практис в k8s рассказывать
да не тут не в swarm дело - я просто немного удивлен как Borg работает
Валентин
В rh он никому не нужен, потому что они его повторили. Т.е для юзера ниче не изменилось
Евгений
Borg и k8s это разные вещи
NM
Borg и k8s это разные вещи
и то что мы имеем в лице K8 только верхушка
Евгений
У вас нет тех проблем, с которыми сталкивается гугл
Евгений
И зачем ориентироваться на борг тогда?
NM
И зачем ориентироваться на борг тогда?
просто у нас навязанное решение с ограничениями по масштабированию. вот мы все режем монолитные приложения на сервисы потом переводим в контейнеры и потом уже в кубер так... а Borg зараза такой он же запускает приложения на кластере и масштабирует их при этом
Lucky SB
Коллеги. ну хватит уже флудить и кормить тролля .... У него ж слова знакомые, а когда он их в предложения складывает - смысла никакого в них нету.
George
но это решается административно
G72K
Что такое "масштабировать сервис". Контейнеры в вашем видении будущего остались? Где они относительно "сервиса"
George
George
и это нормально.
Валентин
Вам и сейчас надо abc123, т.к. запросы на main.js могут прилететь в другой под другой версии
Ну я ж пример приводил. Чтобы понять мысль - ее стоит упростить, чтоб охватить ее в голове :)
George
Обсудим вопрос. Все придут к какой-то своей точке зрения. И успокоятся
Евгений
Мысль у него простая — один под - один контейнер
George
ну, нормально )
Andrey
ну, нормально )
ну только хрен так получится)
Alexander
и это нормально.
На Западе вообще скоро разрешат жениться на Podах
Lucky SB
Мысль у него простая — один под - один контейнер
вот только он так и не смог внятно объяснить - зачем так делать и какая от этого выгода
NM
Мысль у него простая — один под - один контейнер
неа, вообще без подов обойтись. а так да, лучше не тут флудить
Евгений
Потому что в гугле нету подов (на самом деле просто борг управляет как виртуалками, так и контейнерами, поэтому нельзя 1-to-1 матчить)
NM
Потому что в гугле нету подов (на самом деле просто борг управляет как виртуалками, так и контейнерами, поэтому нельзя 1-to-1 матчить)
но там развита кластеризация горизонтальная тот же nginx - разливается сколько угодно и с разным окружением. у нас такого нет в кубе
NM
можно конечно сделать yaml но опять мы уираемся в под
Евгений
Вы просто путаете тёплое с мягким
NM
не не, представь что сервис не выше приложения а просто как сетевой сервис на 4 уровне. я не путаю просто узнал как это работает
Stanislav
Всем привет. Нужна помощь. Кубер знаю на уровне, что могу сделать get po ) По этому прошу подсказать в какую сторону копать. Падает kube-dns kube-dns-58cc98f4f-zlhf2 1/3 CrashLoopBackOff Состояние пода # kubectl describe po kube-dns-58cc98f4f-zlhf2 -n kube-system Events: Type Reason Age From Message ---- ------ ---- ---- ------- Normal Pulled 2h (x223 over 1d) kubelet, tst-k8s-m3 Container image "docker.idb.local:5000/k8s-dns-kube-dns-amd64:1.14.7" already present on machine Warning Unhealthy 58m (x1225 over 1d) kubelet, tst-k8s-m3 Liveness probe failed: HTTP probe failed with statuscode: 503 Warning BackOff 18m (x5657 over 1d) kubelet, tst-k8s-m3 Back-off restarting failed container Normal Killing 13m (x315 over 1d) kubelet, tst-k8s-m3 Killing container with id docker://dnsmasq:Container failed liveness probe.. Container will be killed and recreated. Warning BackOff 8m (x4146 over 1d) kubelet, tst-k8s-m3 Back-off restarting failed container Warning Unhealthy 3m (x1451 over 1d) kubelet, tst-k8s-m3 Readiness probe failed: Get http://10.244.2.165:8081/readiness: dial tcp 10.244.2.165:8081: getsockopt: connection refused Логи контейнера kubedns # kubectl logs kube-dns-58cc98f4f-zlhf2 kubedns -n kube-system ... I1018 08:51:12.471044 1 dns.go:173] Waiting for services and endpoints to be initialized from apiserver... I1018 08:51:12.971055 1 dns.go:173] Waiting for services and endpoints to be initialized from apiserver... E1018 08:51:13.130446 1 reflector.go:201] k8s.io/dns/pkg/dns/dns.go:150: Failed to list *v1.Service: Unauthorized E1018 08:51:13.136163 1 reflector.go:201] k8s.io/dns/pkg/dns/dns.go:147: Failed to list *v1.Endpoints: Unauthorize ...
Stanislav
Понятие не имею что с тим делать ( Фаервол выключен на всех тачках с кубом
George
Всем привет. Нужна помощь. Кубер знаю на уровне, что могу сделать get po ) По этому прошу подсказать в какую сторону копать. Падает kube-dns kube-dns-58cc98f4f-zlhf2 1/3 CrashLoopBackOff Состояние пода # kubectl describe po kube-dns-58cc98f4f-zlhf2 -n kube-system Events: Type Reason Age From Message ---- ------ ---- ---- ------- Normal Pulled 2h (x223 over 1d) kubelet, tst-k8s-m3 Container image "docker.idb.local:5000/k8s-dns-kube-dns-amd64:1.14.7" already present on machine Warning Unhealthy 58m (x1225 over 1d) kubelet, tst-k8s-m3 Liveness probe failed: HTTP probe failed with statuscode: 503 Warning BackOff 18m (x5657 over 1d) kubelet, tst-k8s-m3 Back-off restarting failed container Normal Killing 13m (x315 over 1d) kubelet, tst-k8s-m3 Killing container with id docker://dnsmasq:Container failed liveness probe.. Container will be killed and recreated. Warning BackOff 8m (x4146 over 1d) kubelet, tst-k8s-m3 Back-off restarting failed container Warning Unhealthy 3m (x1451 over 1d) kubelet, tst-k8s-m3 Readiness probe failed: Get http://10.244.2.165:8081/readiness: dial tcp 10.244.2.165:8081: getsockopt: connection refused Логи контейнера kubedns # kubectl logs kube-dns-58cc98f4f-zlhf2 kubedns -n kube-system ... I1018 08:51:12.471044 1 dns.go:173] Waiting for services and endpoints to be initialized from apiserver... I1018 08:51:12.971055 1 dns.go:173] Waiting for services and endpoints to be initialized from apiserver... E1018 08:51:13.130446 1 reflector.go:201] k8s.io/dns/pkg/dns/dns.go:150: Failed to list *v1.Service: Unauthorized E1018 08:51:13.136163 1 reflector.go:201] k8s.io/dns/pkg/dns/dns.go:147: Failed to list *v1.Endpoints: Unauthorize ...
сломалси
George
прав не хватает
George
он у тебя ппытается получить из апихи список сервисов
George
но не может
NM
У тебя же go-шечный вызов говорит что dial tcp 10.244.2.165:8081: getsockopt: connection refused
George
без предыстории не могу помочь, но похоже, что для него (для днс) не заведена соответствующая сущность внутри кластера с clusterole/bindings
NM
я понимаю, что ты имеешь в виду, но у нас тут чат про кубернейтс
в том то и дело, залез в исходники и смотрю....
V
ребят подскажите prometheus operator вот такими сообщениями спамит etcdHighNumberOfFailedGRPCRequests: etcd cluster "kube-etcd": 100% of requests for Watch failed on etcd instance обыскался в инете может ктото уже конкретно знает?
Алексей
всем привет) скажите, плиз, можно ли почистить данные в кастомных метриках в stackdriver monitoring?
NM
Вот же у гугла есть https://cloud.google.com/monitoring/quickstart-lamp
Алексей
Вот же у гугла есть https://cloud.google.com/monitoring/quickstart-lamp
там весь проект сносится. это не то
NM
там весь проект сносится. это не то
ты поясни ты в GKE все это развернул так ?
Алексей
но я уже, наверное, понял, как. https://cloud.google.com/monitoring/api/ref_v3/rest/v3/projects.metricDescriptors/delete
NM
главное чтобы этот API был закрыт остальным 😉
gani
#неругайте Как закрепить пару нод на определенную ноду? С помощью taints and tolerations только? У них общий NFS
Lucky SB
#неругайте Как закрепить пару нод на определенную ноду? С помощью taints and tolerations только? У них общий NFS
тейнты - это про то, чтобы всех подряд на ноду не пускать. а не про выбор. общий NFS ?? ты на поде через hostpath хочешь обращаться к каталогу куда NFS примонтирован ???? не делай так. это плохо для кармы
Lucky SB
да
gani
Ух, отпустило)
gani
Вот это я тупанул!
gani
Все, догнал, спасибо!)
Lucky SB
nfs-utils (или как оно там) на всех узлах стоит ?
gani
nfs-utils (или как оно там) на всех узлах стоит ?
Нет) только на одной ноде, там где тестил/проверял. Поставлю на все.
Dmytro
да! Но можно же узнать, как они решают эту задачу у себя
Ставят Х, мониторят в течение двух дней (например), меняют. И потом в проде аналогично
Dmytro
вообще такое ощущение, что нагрузочное тестирование (как и A/B тесты и пр.) надо отдавать отдельным обученным ребятам
Нужен хотя бы один человек который понимает специфику и научит писать девов тесты. У нас есть команда из нескольких человек для этого и они обучают продуктовые команды писать jmeter тест план с нужной структурой
Dmytro
Например 2
Hankey
Например 2
Спасибо за совет. А как вы метрики по потреблению ресурсов забираете с кластера?
Dmytro
читал, что есть обратная совместимость у podman с докеорм
@StanislavKhalup помнится писал что dockershim для подмана в глубокой альфе
Stas
я про фаеркрекер и контейнерд писал
Stas
у Подмана вроде все окей, у меня правда под WSL2 не завелось
Dmytro
Вам и сейчас надо abc123, т.к. запросы на main.js могут прилететь в другой под другой версии
Более того, во всех новых версиях надо хранить все предыдущие abcxxx
NM
Язабан
Чегой то ? Группа же по куберу: Общаемся на темы, посвященные Kubernetes, конфигурации и возможностям. Новости, вопросы, идеи и т.д.
Dmytro
это не я сделал так а в том же Google для примера 😉
А потом гугл после хз сколько лет с боргом сделал куб с нуля с подами - и у вас даже мысли не появилось подумать почему?
George
А потом гугл после хз сколько лет с боргом сделал куб с нуля с подами - и у вас даже мысли не появилось подумать почему?
гугль кинул кость людям. Чтоб они подсаживались. Пришла пора распределенных систем
George
нужно было занять эту нишу и всем впаривать гуглоклауд