Alexey
Вопрос к людям использующим calico. Есть в calico возможность открыть egress трафик по хостнейму, а не указывая net\ip?
Mikhail
но можно повесить энвой(там даже какая то интеграция есть) и в нем делать расширенные политики
Дмитрий Харитонов
Столкнулся с багой, если стратует 10 под в деплойменте, то одна из под отваливается по Error: ErrImagePull с формулеровкой unauthorized: HTTP Basic: Access denied Судя по всему, не подгружается imagePullSecrets, так как повторные попытки проверки имеджа проваливаются, и помогает только убить поду
Дмитрий Харитонов
это при imagePullPolicy: IfNotPresent
Дмитрий Харитонов
т.е. актуальный образ на машине уже
George
откуда качаешь? докерхаб?
George
движок - докер?
Дмитрий Харитонов
приватный реджистри
Дмитрий Харитонов
на гитлабе в том же кубере
Дмитрий Харитонов
докер
Ivan
Вопрос к людям использующим calico. Есть в calico возможность открыть egress трафик по хостнейму, а не указывая net\ip?
Нет, в калико нельзя, но можно пустить весь трафик наружу через squid с ssl bumping
Ivan
Костыли, велосипеды, воняет, но работает и acl для сквида писать куда приятнее, чем любые фаерволльные правила
rambling
господа, а как вы решаете допустим такие кейсы - надо по-быстрому обкатать некую идею в кластере (окружение должно максимально быть близким к потенциальному продакшену), но HA настраивать смысла не имеет ну вот никакого. все берется на голом железе. и допустим надо поставить какое-нибудь истио - чисто на хедеры смотреть изучать, то в маленьких кластерах на баре метале это не так чтобы уж совсем просто, а в том же микрок8с - легко. настраиваете отдельный тестовый кластер, неймспейс/изоляция на рабочем дев кластере или таки микрок8с
Mikhail
Вопрос к людям использующим calico. Есть в calico возможность открыть egress трафик по хостнейму, а не указывая net\ip?
в циллиум скорее всего можно. но мы не пользуемся. опыта о надежности нет
Danik
Alexey
шикарная гифка
Sergey
Коллеги, подскажите кто щупал Consul Connect ?
Sergey
Есть ли опыт регистрации сервиса через side-car?
Dmitry
господа подскажите грамотные настройки для readiness probe для nginx который тупо статику отдает
Dmitry
есть у кого-нить какие-нить цифры скока надо на инициализацию времени и как часто чекать
George
стартует он мгновенно
George
ну, поставь 5 секунд... хорошо.
George
по хелсчекам - ровно столько сколько тебе нужно, чтобы понять, что nginx отстрелился. И, да, скорее всего у тебя он отстрелится раньше не по хелсчеку, а по количеству ошибок http, если у тебя вообще все правильно собрано
Ivan
а можно взять Cilium :)
А он уже перестал жрать проц и память, как не в себя?
Tadeusz
А он уже перестал жрать проц и память, как не в себя?
читал ночью про 1.7 rc1, там симпатиШных метрик завезли
Ivan
То есть он не просто жрет память и проц, он еще и сообщает об этом симпатичными метриками?
rambling
Поднимаешь несколько виртуалок, запускаешь куб на них, тестишь, убиваешь
но в баре митол истио так просто не впряжешь, надо как-то черел металлб или руками ковырять энвой-роутинг айпитейблз. я на этих кейсах так понял что куб без облаков в принципе сложно сделать маленьким нормально
Ivan
В качестве лабораторного стенда покатит
rambling
т.е. я так понимаю что лучше избегать соблазна тестить что либо серьезное на огрызках типа к3с и т.д.
G72K
Вопрос к людям использующим calico. Есть в calico возможность открыть egress трафик по хостнейму, а не указывая net\ip?
вам нужен DNS whitelisting , такое можно либо самому накостылять либо в Cilium кажется есть такое
Tadeusz
в cilium'е есть egress: - toFQDNs: - matchPattern: "*.twitter.com" toPorts: ...
George
дорого это.
George
получается на каждый запрос - проверка того, что днс не протух. Плюс еще парсить на L7.
Nickolay
Интересная тема.. А как например на сервис сделать? Если за ним эндпоинт внешний?
Tadeusz
эндпоинт указать, не?)
Tadeusz
там же L7 тоже есть
Nickolay
в calico я нашел только namespace, pod и диапазоны адресов
Nickolay
+ сам сервис указать можешь
не смог найти - как, синтаксис..
Tadeusz
не смог найти - как, синтаксис..
spec: ingress: - from: - podSelector: matchLabels: app: indexer - podSelector: matchLabels: app: admin podSelector: matchLabels: app: postgres
Nickolay
это под-селектор жеж а сервис? или просто полэйблить сам сервис?
Tadeusz
канеш
Tadeusz
Nickolay
так же и на namespace'ы вешаешь лейблы и рулишь
О, я просто искал что-то типа serviceSelector, думал подселектор только на поды...
Nickolay
Спасибо!
Tadeusz
Спасибо!
эт самое, на будущее (мб пригодится), ибо я наступил на грабли - когда deny на egress вешаешь (исключая какой-то сервис), не забывай открывать доступ к DNS :)
cent
А реально, у кого istio в проде, и при каких нагрузках?
Появилась уже какая-то статистика по этому поводу? Или никто так и не ответил?
𝚔𝚟𝚊𝚙𝚜
но в баре митол истио так просто не впряжешь, надо как-то черел металлб или руками ковырять энвой-роутинг айпитейблз. я на этих кейсах так понял что куб без облаков в принципе сложно сделать маленьким нормально
А в чём проблема-то? Ну можно взять OpenNebula (она расскатывается за пять минут через minione) Можно терраформом с ней общаться, нагенерить виртуалок, кубе-спреем развернуть куб на них. Либо есть есть уже готовый Kubernetes appliance в OpenNebula Marketplace, я правда его ещё не тестил.
Dmitry
ребята а есть какие-то аггрегаторы результатов хелсчек проб с куба?
Dmitry
ну типа если фейл пробы - алерт в другую систему
rambling
А в чём проблема-то? Ну можно взять OpenNebula (она расскатывается за пять минут через minione) Можно терраформом с ней общаться, нагенерить виртуалок, кубе-спреем развернуть куб на них. Либо есть есть уже готовый Kubernetes appliance в OpenNebula Marketplace, я правда его ещё не тестил.
в основном проблема в том что не хочется тратить много ресурсов (как времени так и железок) на раскатку нормального НА кластера так и на попытки сделать маленький кластер "нормальным" (я имею ввиду со встроенными лб для нативного истио)
𝚔𝚟𝚊𝚙𝚜
понял, буду смотреть, спасибо
Кстати, возможно будет интересно, но я недавно доклад делал по ней https://m.youtube.com/watch?feature=youtu.be&v=47Mht_uoX3A
Дмитрий Харитонов
А есть какая-то гуёвина или конвертор которым удобно преобразовывать Kubernetes манифесты в helm чарты?
𝚔𝚟𝚊𝚙𝚜
А есть какая-то гуёвина или конвертор которым удобно преобразовывать Kubernetes манифесты в helm чарты?
Звучит устрашающе, но готовые манифесты можно просто складывать в templates, не?
cent
А есть какая-то гуёвина или конвертор которым удобно преобразовывать Kubernetes манифесты в helm чарты?
Просто в templates покидать? Или нужен какой-то хитрый алгоритм, который бы сам и переменные для всего и всея проставил?
Дмитрий Харитонов
ну да, преобразовать в пеменные
Дмитрий Харитонов
ну или какой-то гуй где это делать быстрее чем просто в текстовом редакторе
cent
ну да, преобразовать в пеменные
Проблема в том, что не понятно что именно выносить в переменные?
Дмитрий Харитонов
хотябы основные вещи
cent
хотябы основные вещи
А что есть основные вещи? image ?
Дмитрий Харитонов
лэйблы, имена, порты ит.д.
Дмитрий Харитонов
ну да имеджи
Alex Sharov
подскажите пожалуйста, использую helm2 и меняю параметры HPA: min/max pods. Получаю не то, что ожидаю. ожидаю: если увеличить min, то просто добавятся поды, если увеличить max не произойдет ничего на практике: в любом из этих случаев хелм деплоит новую пачку подов, потом убивает старые как этого избежать?
George
никак. хельм тупой. покажи манифесты - может что-нибудь придумаем
Alex Sharov
HPA элементарный apiVersion: autoscaling/v1 kind: HorizontalPodAutoscaler metadata: name: {{ template "fullname" . }} annotations: {{ include "annotations" . | indent 4 }} labels: {{ include "labels" . | indent 4 }} spec: scaleTargetRef: kind: Deployment name: {{ template "fullname" . }} apiVersion: apps/v1 minReplicas: {{ .Values.autoscaling.min_instances }} maxReplicas: {{ .Values.autoscaling.max_instances }} targetCPUUtilizationPercentage: {{ .Values.autoscaling.cpu_utilization }}
Alex Sharov
в самом деплойменте у меня вот так: updateStrategy: type: RollingUpdate rollingUpdate: maxUnavailable: 0 maxSurge: "33%"
George
ну, все логично. У тебя меняется описание объекта -> хельм думает, что труба -> передеплоивает все остальное
George
возможно, что моя логика хромает и хельм не должен пересоздавать...
Alex Sharov
ну да, у меня меняется обьект HPA