Vadim
прометеус 3.5гига жрет, маленький кластер 3 ноды, 160 подов, что-то многовато ?
KrivdaTheTriewe
витоге в последнем ранчере у кого гитлаб получилось поставить? Failed to install app gitlab. Error: release gitlab failed: resource's namespace kube-system doesn't match the current namespace git
KrivdaTheTriewe
совсем грустн(
Solyar
Vadim
Vadim
почему поды не эвиктятся по одному
Vadim
OOM срабатывает раньше Eviction Policy, может memory.available надо увеличить, чтоб раньше эвиктились поды
Artem
/report
Igor
Добрый день. Использует ли кто-нибудь здесь RabbitMQ хельм чарт stable/rabbitmq-ha?
Denis
Igor
да юзается в 2 проектах
как вы решаете проблему с рестартом всех нод кластера (например helm upgrade -i --recreate-pods или просто отключением всех узлов)?
используете podManagementPolicy: Parallel для StatefulSet или forceBoot: true или ещё как-то?
Andrei
Парни кто может за вознаграждение помочь мне, у меня 502 на ingress рендомно стреляет, есть подозрение что приложение не рабоатет на keepalive то есть девелоперы говорят что все ок. Я не знаю как проверить.
Igor
у меня rabbitmq не включается (waiting for mnesia tables) т.к. pod-0 ждёт когда другие поды включатся и весь стейтфул сет не включается.
Артём
George
George
хелсчеки все в норме? если напрямую в приложение в обход ингресса идти - ок ?
Andrei
Hankey
Andrei
приложение отправляет RST-пакет
Andrei
настриваивал readinessProbe
Andrei
httpGet:
path: /ready
port: 4000
initialDelaySeconds: 5
timeoutSeconds: 2
periodSeconds: 15
George
хм
George
прибей приложение к нодам - вдруг у тебя сетевые проблемы
George
там движа нет - типа оно постоянно куда-то перешедюливается
George
https://kubernetes.io/blog/2019/03/29/kube-proxy-subtleties-debugging-an-intermittent-connection-reset/
George
я просто такое дерьмо вспоминаю
Andrei
George
George
оно однопоточное? может попросту с трафиком не справляется ?
Andrei
нет
мм тогда Deployment сделать равным количеству нод и оставить бегать по одной на ноде? Может загнать приложение на ноду где бегает ingress (один экземпляр)
George
попробуй, тут только экспериментировать и отлаживать
George
если не продакшен - ты в принципе ничего не теряешь, кроме времени
Andrei
Hankey
в других неймспейсах/окружениях
Антон
Ребят, есть какой-то способ сделать задержку старта подов в даймонсете, кроме подключения инитконтейнера?
Отделение Bereke Bank
Отделение Bereke Bank
Ну и наверняка там всратый JS упёрся в одно ядро и помирает
Denis
Andrei
Denis
Hankey
Oleh
что такое CNI
https://habr.com/ru/company/flant/blog/420813/
Hankey
что такое CNI
я имею ввиду, сеть в кластере на чём построена?
Andrei
Readiness probe failed иногда стреляет
Viktor
Как решается вопрос заворачивание трафика из пода в проксю? Istio? Есть ли альтернативы?
George
Viktor
Поясни ?
Нода с кубером и доступом только на 1.2.3.4, где-то вдалеке есть squid на сервере 1.2.3.4.
Все запросы с сервисов на ноде должны заворачиваться и возвращаться через проксю
George
пропиши в каждом поде HTTP_PROXY, HTTPS_PROXY
G72K
Alfred
Коллеги, доброго дня. Такая ситуация не могу понять куда копнуть. Есть приложение на PHP и оно отправляет сообщения через почтовый сервис mailgun. Дело в том что в миникубе на ноуте почта отправляется а вот в EKS засада какая то. В логах все ок типа все ушло а на самом деле нет. Гуглил и везде натыкался на то что якобы Amazon блочит все почтовые рассылки (активности) из за спама. мождет кто подсказать как с этим боролись?
George
ну все правильно - тебе исходящий по 25-му порту надо разрешить
George
или как ты в мейлган ходишь? апихой ? тогда странно
Alfred
Alfred
Dmitry
George
да через апи
слух, ну, если апи, то амазон не должен его блочить
Камила
кто небудь знает программу Avs Video Editor, программа по созданию роликов, у меня имеется вопрос , уже которое время не могу понять ,почему у меня все замерло , и не показывает мне ролик.
UglyKoyote
репорт?
Andrey
Секретный чат DevOps'ов раскрыт.
George
Gunslinger
добавьте програмку в стек
Gunslinger
скоро будут спрашивать на собесах
Anonymous
Ребят, всем привет.
Можно пару вопросов задать? По кубу. Входные данные, куб:1.13.12, coredns:1.2.6.
1) долго запускаются pod’ы из джоб, бывает pending от 3 до 20 секунд, потом ContainerCreating ещё от 4-30 секунд, потом сам старт и отработка джобы за 1 секунду. Вопрос, как понять что он делает в этих статусах? Пуллинг образа проходит меньше секунды. В под монтируется порядка 2-3 конфигамапов, 1-2 секретов, 2-3 волюма cephfs. При этом если джоба имеет политику Forbid и под запускается долго, больше минуты, то под стартует не каждую минуту, если у неё шедулинг каждую минуту стоит. Что конечно плохо( Куда копать? Подскажите.
2) вторая проблема тоже с джобами. Работает стабильно все, потом в один момент код не может отрезолвить имя сервиса внутри пода при запуске джобы, а следующая джоба уже запускается и отрабатывает корректно. Проблема может и массовая, но проявляется только на 3-4 джобах в конкретный момент времени. Потом сама разрешается. В логах корднс пусто. Куда посмотреть ещё можно? Достаточно критичная проблема, длительные джобы падают с ошибкой и задача считается невыполненной.
3) и третья проблема тоже с кронами) допустим есть 10 нод, на 3-х из них при помощи нод селектора разрешено запускаться подам джобов. На остальных запрещено. Джобы деплоятся последним хелмом 2-ой версии. Шедулер из при этом шедулит только на 2 доступные ноды из 3-х. Третью какую то одну из них в упор не видит до тех пор пока не сделаешь ее кордон и обратный анкордон. Тогда начинает видеть. И так после каждого деплоя джоб.
Ребят, подскажите куда посмотреть можно?) Заранее спасибо.
George
Ребят, всем привет.
Можно пару вопросов задать? По кубу. Входные данные, куб:1.13.12, coredns:1.2.6.
1) долго запускаются pod’ы из джоб, бывает pending от 3 до 20 секунд, потом ContainerCreating ещё от 4-30 секунд, потом сам старт и отработка джобы за 1 секунду. Вопрос, как понять что он делает в этих статусах? Пуллинг образа проходит меньше секунды. В под монтируется порядка 2-3 конфигамапов, 1-2 секретов, 2-3 волюма cephfs. При этом если джоба имеет политику Forbid и под запускается долго, больше минуты, то под стартует не каждую минуту, если у неё шедулинг каждую минуту стоит. Что конечно плохо( Куда копать? Подскажите.
2) вторая проблема тоже с джобами. Работает стабильно все, потом в один момент код не может отрезолвить имя сервиса внутри пода при запуске джобы, а следующая джоба уже запускается и отрабатывает корректно. Проблема может и массовая, но проявляется только на 3-4 джобах в конкретный момент времени. Потом сама разрешается. В логах корднс пусто. Куда посмотреть ещё можно? Достаточно критичная проблема, длительные джобы падают с ошибкой и задача считается невыполненной.
3) и третья проблема тоже с кронами) допустим есть 10 нод, на 3-х из них при помощи нод селектора разрешено запускаться подам джобов. На остальных запрещено. Джобы деплоятся последним хелмом 2-ой версии. Шедулер из при этом шедулит только на 2 доступные ноды из 3-х. Третью какую то одну из них в упор не видит до тех пор пока не сделаешь ее кордон и обратный анкордон. Тогда начинает видеть. И так после каждого деплоя джоб.
Ребят, подскажите куда посмотреть можно?) Заранее спасибо.
Заведи днс на каждую ноду куба
George
Дефолтный конфиг, когда кореднс где-то там - дрянь
Дмитрий Харитонов
почему запрос через ingress может фризится если идёт через https?
George
Долгий ссл хендшейк ?
George