Alexander
Ну и вопрос латенси между мастером в AWS и воркерами в Хе
Alexander
А плюс секурити - и в принципе дать разрешения и чтоб было безопасно
Alexander
Думаю всем влом проводить такой эксперимент
Alexander
Мало денег - это понятно. Тогда лучше в Гугле Кубер взять. Они за master plane не берут вроде. А EKS стоит вроде 150$ - это инст 16G можно взять в Гугле или больше
Евгений
Да не, я до сих пор за PureScript топлю на докладах
Вот так вот, нынче мало на митапах выступать -- нужно флудить в чатах, чтобы не считали что ты затих
Евгений
Привет! Кто-нибудь пробовал использовать амазонвский managed k8s (EKS) с воркерами вне aws? Запущенными, например, в хетцнере.
Даже если тебе удастся зарегать алиен-воркеры контрол-плейн eks сойдёт с ума, а потом приведёт себя в консистентное состояние состояние
Валентин
Как разбирать oom? Сейчас вижу что oomkiller приходит к каким-то php процессам, а у меня на ноде с десяток контейнеров с пыхой. В dmesg среди сообщений от oom есть строка Memory cgroup stats for /kubepods/burstable/podляляля и это вот ляля не бьется с именами контейнеров
George
Т.е. ты по тому, что в этот момент времени что-то шлепнулось не можешь соотнести события ?
Alexander
То есть кто сожрал память - см мониторинг
George
А ещё настрой оверкоммит. Чтоб его не было
Валентин
Вот конкретно произошел oom, как понять какой php какого пода он убил?
Just a baka
oom скоринг вообще выглядит весело, но имя убитого процесса там должно быть подсказка: процесс, который триггернул оом, не факт, что будет убит. жертву см. снизу
Валентин
Что делать в будущем понятно, мне надо вот только что произошедший oom разобрать
Валентин
Да, я снизу вижу pid. Как выяснить, в каком поде он был? :)
Валентин
Т.е что делать с oom без контейнеров я знаю. А вот когда контейнеры - как продраться через них я не понимаю
George
Да, я снизу вижу pid. Как выяснить, в каком поде он был? :)
А у тебя лимиты на подах расставлены ?
Just a baka
Да, я снизу вижу pid. Как выяснить, в каком поде он был? :)
если там идентификатора cgroup нет / под пересоздался, то никак. См. события в кубере, где бабахнулось )
Валентин
Рестартов подов не было, но и из dmesg я вот писал выше пример строки - оттуда id не бьются с контейнерами
Валентин
Соответственно события нет, т.к под не рестартился
Alexander
Вероятно в рестартах - то что сам Кубер рестартовал только
Alexander
Может он создал новый под с каунтом 0?
Валентин
Может он создал новый под с каунтом 0?
Тогда б время было у него минута-другая - не вижу таких
George
Соответственно события нет, т.к под не рестартился
Думаешь это был дочерний процесс чего-то, что бежит у тебя в поде ?
Валентин
Но у меня с десяток подов с php-fpm, в каждом процессов по 50.
Валентин
Just a baka
кластер Шредингера
Валентин
Судя по вашим ответам - напрямую из инфы dmesg выяснить под нельзя. Грустно :( Были б другие способы узнать - я бы ими воспользовался.
Валентин
А так только ssh до ноды и kubectl из средств
Andrey
в kubelet логах должно быть про oom
Pavel
В describe пода есть про OOM
Aleksandr
Всем привет, есть вопрос: а если я создаю сервис, который шарит любой порт, например 3000, при этом у меня 3 деплоймента есть, как определяется на какой деплоймент сервис таргентит порт?
Валентин
А ещё настрой оверкоммит. Чтоб его не было
Ты про то, чтоб в /proc опцию overcommit_memory в 2 выставить?
Aleksandr
спасибо
George
Aleksandr
Selector сервиса
А если получается у меня mysql, и php сайт, то для mysql нужно тоже сервис создавать? Те как они друг друга найдут? В docker-compose было просто - задаешь одну сеть и они там по hostname коннектят
Валентин
В том числе
А что еще?
George
Сервис - это просто балансировщик внутри. В принципе, он с другой стороны и решает вопрос создания записи днс для сервиса. И есть разные способы его юзать
George
Но тебе никто не мешает и по имени пода ходить )
Andrey
helm решит все проблемы за вас. helm install mysql
Aleksandr
Но тебе никто не мешает и по имени пода ходить )
те в рамках namespace они должны другу друга видеть по именам подов?
George
те в рамках namespace они должны другу друга видеть по именам подов?
Учитывая, что поды пересоздаются - надёжнее через сервис, ога
Михаил
helm решит все проблемы за вас. helm install mysql
любую проблему можно решить путём введения дополнительного уровня абстракции, кроме проблемы слишком большого количества уровней абстракции.
Tema
Ребят, у меня init контейнер не рестартится, когда рестартится под. Это можно как-то поправить?
Tema
так не бывает
Хм, просто у меня ваульт агент в ините, и при рестарте пода токен тухлый дежит. Мб он при перезапуске не генерит токен
Artem
Добрый день, подключил k8s к vsphere, диски создаются, вот только примонтировать не получется - отваливаются. Сыпет ошибку AttachVolume.Attach failed for volume "PVC-..." ServerFaultCode: A general system error occurred: Could not open or create change tracking file и Unable to attach or mount volumes: unmounted volumes=[] unattached volumes=[] timed out waiting for the condition. На воркерах вижу как диски добавляются, а потом отваливаются. Может кто сталкивался?
Злодей
Коллеги, добрый день. Подскажите, пожалуйста, развёрнут кластер кубернетеса 1.11, наблюдаем проблему с проседанием скорости при цикличном скачивании одного и того же файла через ингресс из пода(в т.ч. во время скачки разброс в пределах 60 Мб). При аналогичной операции через сервис пода, без участия ингресса, скорость стабильная и больше в полтора раза. С чем может быть связано проседание скорости?
Aleksandr
А обязательно создавать StorageClass для PVC?
Aleksandr
в примерах не описано как обязательное требование
Aleksandr
но чет не стартует, ругается на него
Валентин
таскать данные оператором
Не понял, причем тут оператор? Оператор чего, какие данные им таскать?
Валентин
твои проблемы с мониторингом
Ну чуть более конкретно можешь ответить? Оператором чего, о чем ты вообще сказал мне?
NM
мониторинг оператором можно и нужно сделать в отдельном namespace твоих php
NM
посмотрел - когда были настроены на старых проектах мониторинг через Prometheus
Валентин
php работают в пуле ?
php-fpm в контейнере запущен, с 50 чилдами. В общем да, пул.
NM
ну вот и строй метрики - там не сложно
Валентин
посмотрел - когда были настроены на старых проектах мониторинг через Prometheus
В кластере у меня стоит prometheus operator для мониторинга, но он не показывает в этой ситуации ничего полезного. Oomkiller убивает конкретный php воркер, поэтому с точки зрения мониторинга все ок - никакие поды не перезапускаются
Валентин
В итоге я перебором нашел нужный мне под, разбираюсь теперь с ним
G72K
Да не, я до сих пор за PureScript топлю на докладах
Он же здох, сейчас бы за https://reasonml.github.io/ топить :) а блог есть?
Dmytro
В describe пода есть про OOM
Это если лимиты стоят. А тут oom ноды - dmesg же