Это нормально, Azure-style

Aws style ??

Как пофиксить?

Ядер больше или как?

Само собой в конечном итоге весь cpu зарезервирован и не даёт стартануть другим подам :(

какой смысл запускать без лимитов?

шедулингу нужна актуальная инфа. что толку запускать кучу подов, если им cpu time не хватит или будет пиздец тормозить

если устраивает что пиздец тормозит - выставляй лимит оч низкий

Это понятно

Но сейчас нужна отладка

Я с помощью Прометея сниму метрики но какого хера AWS меня так подставляет :(

А на проде какой бы не стартанул cpu requests 100m

небось дефолтные лимиты вписаны

А где их пофиксить

Оркестрация с помощью kops

https://kubernetes.io/docs/tasks/administer-cluster/manage-resources/memory-default-namespace/

А дефолтные лимиты найти не могу:(

ну ты сделай kubectl get all --all-namespaces -o yaml и ковыряйся сколько влезет

Я с помощью Прометея сниму метрики но какого хера AWS меня так подставляет :(

https://github.com/kubernetes/kops/issues/2787

ну раз уж такое дело то запощу сюда https://github.com/buttplugio/buttplug

ну раз уж такое дело то запощу сюда https://github.com/buttplugio/buttplug

#проклято

еще раз спасибо чуваки, я переделал конфиг с нуля, все заработало

ну раз уж такое дело то запощу сюда https://github.com/buttplugio/buttplug

хотел аватарку потролить, а не выйдет, так и должно быть... ?

Кто-нибудь здесь запускает php в кубере одним контейнером без нжинкса?

Кто-нибудь здесь запускает php в кубере одним контейнером без нжинкса?

апачем...?

Кто-нибудь здесь запускает php в кубере одним контейнером без нжинкса?

бывало

апачем...?

Я скорее думал про roadrunner или nginx unit

проще 2 deployment написать на nginx и fpm

бывало

Как логи собираете? Через stdout или приложение само отправляет?

проще 2 deployment написать на nginx и fpm

Не хочу держать рядом с каждым микросервисом ещё конфиг для нжинкса

Хотя он достаточно типовой получается, но мне кажется что это лишняя прослойка

Как логи собираете? Через stdout или приложение само отправляет?

ох, пропустил "в кубере"

подскажите такую вещь, при обычном рестарте docker сервиса одновременно на всех нодах в кластере, Galera падает в Crash Loop, я конечно понимаю что в кластерах такой вариант не очень, но есть ли какой-нибудь выход?

Не хочу держать рядом с каждым микросервисом ещё конфиг для нжинкса

зря, это удобно.

Коллеги кто обновлялся с 11 до 12 - грабли были?

Кластер обновился без проблем. А на клиентах перед обновлением кубелетов нужно конфиг кубеадм снести

1.10.0 как? Полеты норм?

я только одного не понимаю, должно быть node.kubernetes.io/network-unavailable а он почему-то node.kubernetes.io/not-ready добавляет

Ещё с cni демонсетом прикол был

1.10.0 как? Полеты норм?

Хз, я с 1.11 обновлялся, полагаю что так же и с 1.10

Там dynamic kubelet configuration завезли, но старый /etc/systemd/system/kubelet.service.d/10-kubeadm.conf больше не работает, это если через кубеадм ставили

я вообще так делаю: apt-get purge kubeadm apt-get install kubelet kubeadm

просто чудесно

полгода назад сетапили кластер - теперь не можете

so 2018

much devops

@Andorka м?

да то что способ установки опять переделали

Да ниче не поменялось особо для клиентов, ток многочисленные опции для kubelet теперь в конфиг переехали, который теперь можно еще и на стороне сервера конфигурить.

смотря что ты называешь "клиент"

kubelet - клинент имхо :)

но вообще я имел ввиду все воркер-ноды

ну или там где выполняется kubeadm join

Лучше бы они викубадмин норм HA мастер завезли

Даже у мерзости это из коробки 100 лет как

что

Лучше бы они викубадмин норм HA мастер завезли

так давно жеж уже https://kubernetes.io/docs/setup/independent/high-availability/

Я же спецом написал нормальный )

@robolucion а как на счет такого? https://medium.com/@bambash/ha-kubernetes-cluster-via-kubeadm-b2133360b198

Я могу ещё пару вариантов накинуть, я вообще писал про то, что бы кубадмин из коробки без "лишних" телодвижений деплоил ха мастер

Да и лод балансер - точка отказа, которую тоже надо резервировать, а облаках это проще конечно

VRRP - для необлаков

BGP - для богов

Metallb для народа

metallb для мета-богов

ECMP FTW

извините

VRRP - для необлаков

Вы с ним явно боли не видели )

Metallb для народа

как вы его без куба заведете?

Вы с ним явно боли не видели )

не видел

Всем привет! Подскажите плз кто работал с EKS - я же правильно понимаю, что DNS записи для сервисов нужно писать через cname к dns имени ELB, а не через A записи к IP адресу, в который он разрешается?

есть подозрение что это не про EKS вопрос

Всем привет! Подскажите плз кто работал с EKS - я же правильно понимаю, что DNS записи для сервисов нужно писать через cname к dns имени ELB, а не через A записи к IP адресу, в который он разрешается?

Да, cname, но как сказано выше это не про EKS

Да, cname, но как сказано выше это не про EKS

окей, спасибо

Как после обновления конфигмапа перезапустить поды деплоймента?

вижу rolling restart где то, но вроде его еще не существует

1) руками по одному делать delete pod 2) передавать например в ENV подам рандомное число (или например хеш от конфигмапы) 3) была где-то тулза, которая умела дёргать вебхук при изменении файла

1 - боль. 2 - видел костыли с датой. Держу в голове, но стремно как то выглядит. 2 - внутри пода?

3 - да, в соседнем контейнере

беда.

все варианты говно, если уж честно :)

ага

Как после обновления конфигмапа перезапустить поды деплоймента?

я ci_job_id передаю в переменную окружения подов через ci, соотвественно в каждый прогон ci делается rolling update - вроде норм

пойду поголосую за фичи с роллинг рестартом

я ci_job_id передаю в переменную окружения подов через ci, соотвественно в каждый прогон ci делается rolling update - вроде норм

а если без ci? просто пошел переконфигурил конфигмап.

я ci_job_id передаю в переменную окружения подов через ci, соотвественно в каждый прогон ci делается rolling update - вроде норм

не очень понятно нафиг редеплоить при _каждом_ прогоне пайплайна

а если без ci? просто пошел переконфигурил конфигмап.

Не Надо Так

Не Надо Так

Да понятно. В будущем из репо взял конфигмап и применил.

Пока только разворачиваю же

а если без ci? просто пошел переконфигурил конфигмап.

тогда через хеш от конфиг мапы, в большинстве гайдов в принципе так и пишут

и хотел потом послать команду на роллинг рестарт подов

не очень понятно нафиг редеплоить при _каждом_ прогоне пайплайна

ну если он запустился вообще, то в большинстве случаев именно для деплоя + еще если нужно деплоить контейнеры с неизменяющимся тегом других способов пока нет

Как после обновления конфигмапа перезапустить поды деплоймента?

#платиновые_треды_k8s

https://quay.io/coreos/configmap-reload если понимаете что делаете и к чему это ведет

Коллеги кто обновлялся с 11 до 12 - грабли были?

Нет