George
За что ты их не любишь так 😉
сложные в понимании и обслуживании
NM
initContainers: - name: wait-for-other-pod image: docker.some.image args: - /bin/sh - -c - > set -x; while [ $(curl -sw '%{http_code}' "http://www.google.com" -o /dev/null) -ne 200]; do sleep 15; done
NM
сложные в понимании и обслуживании
Просто ты не ту траву куришь шеф 😉
Peter
Просто ты не ту траву куришь шеф 😉
ну видимо я тоже. потому что statefulset это сам по себе знатный костыль.
Dmitry
Коллеги, подскажите, пожалуйста. Есть кластер с фланелом и есть айпи сервиса. В случае с дрейн одной из нод, куда смотрит этот сервис, начинаются ошибки. Ендроинты за айпишником сервиса - это просто правила dnat на каждой ноде куба. Отсюда вопрос: кто знает насколько часто и по какому триггеру эти правила перестраиваются и сфэйливштйся айпишник пода оттуда удаляется? Прошу прощения за путанное описание.
задержка обновления правил iptables/ipvs это норм. Такое вполне может быть, куб тебе не гарантирует моментальное обновление правил. Поэтому проектировать приложение можно исходя из этого. Например можешь задать в lificycle таймаут на 10-20 секунд перед выключением пода. Также не забывай, что ingress направляет трафик напрямую на под, поэтому ему побоку на iptables/ipvs правила, то есть он будет направлять трафик на под, пока не увидит что в endpoints пода больше нет и не обновит свою конфигурацию.
Peter
чет тут 4000 человек, а в чате одни и те же лица. ни у кого другого проблем не возникает походу)
Valentin
в чате первопроходцы, остальным помогает поиск по чату :)
victor
у меня возникли - но мой вопрос про ноды нотреди пропустили, подумал, людям нечего сказать, значит и беспокоить незачем =)
Peter
в чате первопроходцы, остальным помогает поиск по чату :)
ну это пока помогает. когда сообщений станет много (ну в смысле реально много) то походу будет проще в гугле искать.
George
Dmitry
Я про PreStop говорил
Dmitry
Когда под удаляется. Все контроллеры куба действуют независимо и параллаельно. Один котроллер удаляет его из endpoints, другой начинает процедуру его остановки, другие видят что он удалился из endpoints и дейсвтуют с в соотвесвтии с этим, и все это параллельно.
Ivan
Всем привет. Кто юзает EKS, как впечатления? Сейчас кручу все кластера в AWS на KOPS но, есть желание попробовать EKS. Стоит ли тратить время на это?)
victor
https://habr.com/ru/company/flant/blog/326062/
Спасибо, но это немножко про мониторинг, а не про менеджмент - мы можем попросить аутоскейлер убивать ноды NotReady самостоятельно, без ручного вмешательства и без баша с кронтабом?
Victor
Я про PreStop говорил
догадывался об этом... А в момент исполнения PreStop, под уже начнет удаляться из ендпоинтов на apiserver ?
Fedor
Всем привет, не подскажете как можно реализовать auto rollout на previous version при неудачном деплое? Без ручного труда ввиде этого kubectl rollout undo deploy/app -n namespace
Отделение Bereke Bank
Dmitry
Если у тебя тупо контейнеры не поднимаются, так deployment сам не будет развертывать поды, если ready настроены
Dmitry
и останется на предыдущей версии
Fedor
хмм, к примеру ошибка с образом, либо не прошёл healt_check -> livenessProbe, readinessProbe
Dmitry
пиздюли от тимлида
хук вешаешь на пиздюли от тимлида. И откат по хуку =)
George
Можно настроить так, что дкплоймент убьет старую реплику, а новую уже не создаст
Dmitry
Даже вешать не надо, у него из коробки все работает
Михаил
Хук в табло
Датчик нужен
Dmitry
От настроек зависит
ну по дефолту. Если revisionHistoryLimit не меньше 2, и если readyProbe есть. Вроде этого достаточно
George
Мне кажется, чисто из логики, что ты и прав, и не прав одновременно
George
Прав в том, что деплой запнется и все будет хорошо
George
Не прав в том, что деплоймент будет уже в новом состоянии и автороллбек он не делает
George
Т.е. все равно требуется вмешательство оператора.... Чтобы хотя бы откатить дкплоймент на старую версию (но это можно заскриптовать !)
Fedor
Серьезно нет нормального решения без скриптов?
Dmitry
сам деплой то будет в состоянии: не задеплоен. А вот приложение на старой версии останется. Я вроде это тестил.
Fedor
Это понятно, это уже реализовал, хочется откатить если что...
Dmitry
так у тебя новая версия не выкатится. Откатывать нечего. Правишь проблему и выкатваешь исправленную версию
Dmitry
Ну и в проде же обычно: git tag = новая версия приложения. Говоришь ему - разверни приложение из предыдущего тега
Fedor
helm остой, как по мне (имхо), и не подходит по текущую архитектуру
Dmitry
А можно и не говорить. Деплой упал. Приложение не сломалось (осталось на старой версии). Исправляешь ошибку, деплоешь новую версию
Fedor
Ну и в проде же обычно: git tag = новая версия приложения. Говоришь ему - разверни приложение из предыдущего тега
А вот здесь возможен простой если у тебя допустим приложение с одной репликой
Fedor
к примеру крон какой нибудь
Fedor
Самый удачный пример попасть на грабли указать несуществующий тэг у образа
Dmitry
А вот здесь возможен простой если у тебя допустим приложение с одной репликой
Если у тебя приложение с одной репликой. Это в принципе возможный простой при любых поломках
George
И крон это дно
George
Хотя бы job kubernetes'а юзал
George
Но, вообще, я с тобой согласен. Риски есть. Тем более, если после деплоя кластер полыхнул )
Dmitry
Самый удачный пример попасть на грабли указать несуществующий тэг у образа
Если одна реплика, сделай ему настройку. Чтобы 100% подов должны быть доступны. Он при выкате не будет дропать твой под старый
George
Если там ceph, например, подаётся в под
Fedor
job kubernetes, это круто но тогда придется отказываться от рельсового whenever
Dmitry
Dmitry
И если там cron. Так ли критичен небольшой простой?
Dmitry
Или если наборот два параллельных крона начинают несколько секунд/минут что-то делать?
Dmitry
сделай из них sts, пусть выбирают мастера который будет делать то что тебе нужно =). Вот тебе и отказоустойчивость
Ivan
Выше это обсуждали: https://t.me/kubernetes_ru/215654
Спасибо, думаю не стоит. Все минусы о которых я думал были повторно озвучены. Вопрос закрыт)
Fedor
в кроне запускаются рельсовые таски, которые делают выгрузки и т.п.
Dmitry
в кроне запускаются рельсовые таски, которые делают выгрузки и т.п.
Ты либо используешь CronJob. Либо свой сервис, который будет как надо тебе работать. Если нужна отказоустойчивость, то реализуй ее в этом сервисе, чтобы умел в несколько подов работать.
Fedor
Ты либо костылишь, либо костылишь
Fedor