inqfen
Аннотации ингресса metadata: annotations: cert-manager.io/cluster-issuer: "letsencrypt-testing" nginx.ingress.kubernetes.io/proxy-connect-timeout: "30" nginx.ingress.kubernetes.io/proxy-read-timeout: "1800" nginx.ingress.kubernetes.io/proxy-send-timeout: "1800" nginx.ingress.kubernetes.io/permanent-redirect-code: "301"
Aleksandr
те IP ресолвится
Aleksandr
а пакеты не ходят
inqfen
на этот ингресс в логе есть запись creating HTTP01 challenge solver ingress
Armen
у меня одно подозрение: ———————————- metadata: name: "letsencrypt-testing" privateKeySecretRef: name: issuer-account-key ————————————- я делаю одним и тем же kubernetes.io/ingress.class: nginx certmanager.k8s.io/cluster-issuer: letsencrypt-testing certmanager.k8s.io/acme-http01-edit-in-place: "true"
Armen
думаю в твоем случае не хватает только аннотации в ингрессе kubernetes.io/ingress.class: nginx
inqfen
Могу попробовать добавить, вот только и без нее раньше работало
inqfen
Ну и сам ингресс работает, только там серт самоподписанный
Armen
раньше у меня тоже работало, когда тестилл 11-ый все полетело к чертям собачим... но он хорош
Lucky SB
А куда смотреть то, я юзаю стоковый конфиг + flannel, поды на одной ноде друг друга видят, а между соседними нет
смотреть в доку. читать статьи фланта как устроена сеть в кубе. что такое CNI у тебя кто провайдер ? как сеть между узлами устроена ? у тебя какой бекенд у фланнеля используется ? hostgw, vxlan, ipsec, ali-vpc ? смотри ip route на узлах.
inqfen
И http solver тоже создается
inqfen
ТОлько такое ощущение, что на реквест забивается
Armen
можешь по другому тоже проверить в issuer вместо - selector: {} http01: ingress: class: nginx сделать - selector: {} http01: ingress: name: nginx-ingress-name
inqfen
В solver в его path ходил, так набор символов есть
inqfen
Так это его селектор , cert-manager его находит, solve в ingress создан
inqfen
а solve каким-то конкретным issuer создается
inqfen
Если смотрю на серт - Issuer Ref: Group: cert-manager.io Kind: ClusterIssuer Name: letsencrypt-testing Secret Name: example.com-crt Status: Conditions: Last Transition Time: 2019-10-21T14:16:44Z Message: Waiting for CertificateRequest "example.com-crt-946974338" to complete Reason: InProgress Status: False Type: Ready
Armen
sorry
Lucky SB
перед тем как послать запрос в le оно самостоятельно пытается пройти по урлу и проверить что все отдается. если проблемы с Днс внутри кластера или балансировщиков - или зона локально прописана - то проверка не проходит
inqfen
тогда в логах ошибка, что не резолвится такое-то имя
inqfen
Или что не доступен
inqfen
А ошибки нет
inqfen
НУ и вроде это до создания solver ингресса
Lucky SB
Как оно может быть до создания, если оно проверяет урл из солвер ингресса ?
Lucky SB
и ошибки то нету, просто домер ресолвится не в ип ингресс-контроллера-балансировщика а во что то внутреннее например
Armen
сорри я в логе, прочитал что не наийден иссюер... дык по текущему статусу вроде и ошибки нет вроде
inqfen
из default
Armen
нужен полный лог
inqfen
пода серт-менеджера?
Armen
@inqfen как бы я дебагил удали тлс запись из ингресса kubectl delete secretname потом запустил бы следующее в одном терминале kubectl logs -f -n cert-manager cert-manager_podname_here дальше заново прописал бы тлс в ингрессе
inqfen
я весь ингресс удалял
inqfen
удалял certificate и sercet
inqfen
потом заново создавал ингресс - certificate и сикрет появляюся
Armen
можно и весь ингресс удалить главное с самого начала понять что происходит когда появляется новая ТЛС запись
inqfen
и все остается в этом статусе
inqfen
кстати попробую issuer пересоздать
Armen
в логах достаточно ясно все написано если есть ошибка -будет видно по моимшагам
Andrei
первый раз делаю helm chart , заметил что имена сервисов меняеться в зависимости от имени chart. Пока я не пользовался helm одни и те же микросервисы в разных namespace обзывались одинаково, сейчас нужно менять. В принципи я могу подстроиться интересен ваш опыт. Вы обзываете сервисы одинаково в разных namespace одного и того же сервиса ?
Armen
и все остается в этом статусе
я честно говоря не ставил хельмом
inqfen
Хех, помогло
inqfen
Пересоздание issuer
inqfen
с теми же параметрами
inqfen
Пересоздал issuer в итоге - сразу серт получился
Lucky SB
Lucky SB
того что в чат кидал и того что щас
inqfen
Я подозреваю, что дело как-то связано с тем, что он еще с 0.9.0 перекочевал
inqfen
В смысле я его не удалял, а изменял
inqfen
ну и возможно где-то тут собака зарыта, что-то в etcd не изменилось или сорт оф
Lucky SB
ну все равно. сделай дифф.
Armen
да интересно в самом деле :)
Solyar
@kvaps а можно что-то почитать по сбору логов в кубере? Я если честно вообще не могу вкурить как собирать stdout. Твой yaml помог отчасти понять что вообще происходит но с конфигурацией его я не могу разобраться
Solyar
Офф дока это хорошо. Но там не совсем (а точнее совсем не...) затрагивается сбор stdout в Docker в виде Json
Solyar
Собираются все логи
Solyar
Кроме тех что мне нужны)
Александр
Всем привет. создал ConfigMap, подключил его в Deployment в качесте env. Захожу в контейнер, делаю. printenv, вижу переменные. Вроде все отлично. Затем обновляю значение переменной в ConfigMap и применяю его. В дашборде видно, что конфиг обновился, но в контейнере старые значения. Как обновить значения переменных окружения в контейнере?
𝚔𝚟𝚊𝚙𝚜
Офф дока это хорошо. Но там не совсем (а точнее совсем не...) затрагивается сбор stdout в Docker в виде Json
Ну у тебя docker пишет логи по каждому контейнеру в /var/log/containers сразу в json, либо можно настроить что-бы он писал их сразу в systemd. всё что скажет контейнер в /dev/stdout будет обработанно докером и сложенно в виде отдельного объекта с полями: date, container_id, message соответственно дальше тебе их нужно просто чем-то собрать. То есть ты берёшь какой-нибудь filebeat (для json логов) или journalbeat (для логов в journald) и раскатываешь их демонсетом на все ноды. Они смотрят в источник, парсят эти логи, обогащют их метаданными (add_kubernetes_metadata processor) и отправляют в эластик
𝚔𝚟𝚊𝚙𝚜
если у тебя контейнер отправляет json в /dev/stdout то получается что в поле message у тебя будет сохранён json, чтобы его задетектить и распарсить, у beats есть специальный decode_json_fields processor
Александр
Сайдкар или руками пересоздать под
а что использовать в качестве сайдкара?
Solyar
Типо такого*
gani
Как хранить yaml-ы, чтобы бардака не было? Чтобы быстро находилось искоемое. Скажите бест практис. Как вы именуете их?
𝚔𝚟𝚊𝚙𝚜
Как хранить yaml-ы, чтобы бардака не было? Чтобы быстро находилось искоемое. Скажите бест практис. Как вы именуете их?
git-репо с директориями: deploy/app1/ deploy/app2/ deploy/app3/то есть по директории на каждое приложение, внутри каждой такой директории qbec с конфигурацией для всех окружкий где задеплоенно приложение, ака stage и prod
𝚔𝚟𝚊𝚙𝚜
то есть весь процесс деплоя выглядит примерно следующим образом: ENV=stage for i in deploy/app*; do (cd $i; qbec apply "$ENV" --yes) done
𝚔𝚟𝚊𝚙𝚜
но это лишь один из вариантов)
gani
Спасибо за ответ) Я пока работаю с 1 приложением. И пытаюсь привести в порядок в именах ямлов (сервисы, деплойменты, пв, пвс и тп и тд.)
𝚔𝚟𝚊𝚙𝚜
Спасибо за ответ) Я пока работаю с 1 приложением. И пытаюсь привести в порядок в именах ямлов (сервисы, деплойменты, пв, пвс и тп и тд.)
ну в qbec, каждый такой yaml может быть записан как отдельный компонет, в качестве альтернативы можно взять kustomize или helm
Solyar
Jenkins X
Говно же (простите)
Zhyhanov
Solyar
Варианты ?)
Свою шаред либу наваять
Solyar
Или форк какой-нибудь допилить