inqfen
Аннотации ингресса
metadata:
annotations:
cert-manager.io/cluster-issuer: "letsencrypt-testing"
nginx.ingress.kubernetes.io/proxy-connect-timeout: "30"
nginx.ingress.kubernetes.io/proxy-read-timeout: "1800"
nginx.ingress.kubernetes.io/proxy-send-timeout: "1800"
nginx.ingress.kubernetes.io/permanent-redirect-code: "301"
Aleksandr
Aleksandr
те IP ресолвится
Aleksandr
а пакеты не ходят
inqfen
на этот ингресс в логе есть запись creating HTTP01 challenge solver ingress
Armen
у меня одно подозрение:
———————————-
metadata:
name: "letsencrypt-testing"
privateKeySecretRef:
name: issuer-account-key
————————————-
я делаю одним и тем же
kubernetes.io/ingress.class: nginx
certmanager.k8s.io/cluster-issuer: letsencrypt-testing
certmanager.k8s.io/acme-http01-edit-in-place: "true"
Armen
думаю в твоем случае не хватает только аннотации в ингрессе
kubernetes.io/ingress.class: nginx
inqfen
Могу попробовать добавить, вот только и без нее раньше работало
inqfen
Ну и сам ингресс работает, только там серт самоподписанный
Armen
раньше у меня тоже работало, когда тестилл 11-ый все полетело к чертям собачим... но он хорош
inqfen
И http solver тоже создается
inqfen
ТОлько такое ощущение, что на реквест забивается
Armen
можешь по другому тоже проверить
в issuer вместо
- selector: {}
http01:
ingress:
class: nginx
сделать
- selector: {}
http01:
ingress:
name: nginx-ingress-name
inqfen
В solver в его path ходил, так набор символов есть
inqfen
Так это его селектор , cert-manager его находит, solve в ingress создан
inqfen
а solve каким-то конкретным issuer создается
inqfen
Если смотрю на серт -
Issuer Ref:
Group: cert-manager.io
Kind: ClusterIssuer
Name: letsencrypt-testing
Secret Name: example.com-crt
Status:
Conditions:
Last Transition Time: 2019-10-21T14:16:44Z
Message: Waiting for CertificateRequest "example.com-crt-946974338" to complete
Reason: InProgress
Status: False
Type: Ready
Armen
sorry
Lucky SB
перед тем как послать запрос в le оно самостоятельно пытается пройти по урлу и проверить что все отдается. если проблемы с Днс внутри кластера или балансировщиков - или зона локально прописана - то проверка не проходит
inqfen
тогда в логах ошибка, что не резолвится такое-то имя
inqfen
Или что не доступен
inqfen
А ошибки нет
inqfen
НУ и вроде это до создания solver ингресса
Lucky SB
Как оно может быть до создания, если оно проверяет урл из солвер ингресса ?
Lucky SB
и ошибки то нету, просто домер ресолвится не в ип ингресс-контроллера-балансировщика а во что то внутреннее например
Armen
сорри я в логе, прочитал что не наийден иссюер...
дык по текущему статусу вроде и ошибки нет вроде
inqfen
inqfen
из default
Armen
нужен полный лог
inqfen
пода серт-менеджера?
Armen
@inqfen как бы я дебагил
удали тлс запись из ингресса
kubectl delete secretname
потом запустил бы следующее в одном терминале
kubectl logs -f -n cert-manager cert-manager_podname_here
дальше заново прописал бы тлс в ингрессе
inqfen
я весь ингресс удалял
inqfen
удалял certificate и sercet
inqfen
потом заново создавал ингресс - certificate и сикрет появляюся
Armen
можно и весь ингресс удалить главное с самого начала понять что происходит когда появляется новая ТЛС запись
inqfen
и все остается в этом статусе
inqfen
кстати попробую issuer пересоздать
Armen
в логах достаточно ясно все написано если есть ошибка -будет видно по моимшагам
Andrei
первый раз делаю helm chart , заметил что имена сервисов меняеться в зависимости от имени chart. Пока я не пользовался helm одни и те же микросервисы в разных namespace обзывались одинаково, сейчас нужно менять. В принципи я могу подстроиться интересен ваш опыт. Вы обзываете сервисы одинаково в разных namespace одного и того же сервиса ?
inqfen
Хех, помогло
inqfen
Пересоздание issuer
inqfen
с теми же параметрами
inqfen
inqfen
Пересоздал issuer в итоге - сразу серт получился
Armen
Lucky SB
Lucky SB
того что в чат кидал и того что щас
inqfen
Я подозреваю, что дело как-то связано с тем, что он еще с 0.9.0 перекочевал
inqfen
В смысле я его не удалял, а изменял
inqfen
ну и возможно где-то тут собака зарыта, что-то в etcd не изменилось или сорт оф
Lucky SB
ну все равно. сделай дифф.
Lucky SB
Armen
да интересно в самом деле :)
Solyar
@kvaps а можно что-то почитать по сбору логов в кубере? Я если честно вообще не могу вкурить как собирать stdout. Твой yaml помог отчасти понять что вообще происходит но с конфигурацией его я не могу разобраться
Solyar
Офф дока это хорошо. Но там не совсем (а точнее совсем не...) затрагивается сбор stdout в Docker в виде Json
Solyar
Собираются все логи
Solyar
Кроме тех что мне нужны)
Александр
Всем привет. создал ConfigMap, подключил его в Deployment в качесте env. Захожу в контейнер, делаю. printenv, вижу переменные. Вроде все отлично. Затем обновляю значение переменной в ConfigMap и применяю его. В дашборде видно, что конфиг обновился, но в контейнере старые значения. Как обновить значения переменных окружения в контейнере?
Solyar
𝚔𝚟𝚊𝚙𝚜
Офф дока это хорошо. Но там не совсем (а точнее совсем не...) затрагивается сбор stdout в Docker в виде Json
Ну у тебя docker пишет логи по каждому контейнеру в /var/log/containers сразу в json, либо можно настроить что-бы он писал их сразу в systemd.
всё что скажет контейнер в /dev/stdout будет обработанно докером и сложенно в виде отдельного объекта с полями: date, container_id, message
соответственно дальше тебе их нужно просто чем-то собрать. То есть ты берёшь какой-нибудь filebeat (для json логов) или journalbeat (для логов в journald) и раскатываешь их демонсетом на все ноды.
Они смотрят в источник, парсят эти логи, обогащют их метаданными (add_kubernetes_metadata processor) и отправляют в эластик
𝚔𝚟𝚊𝚙𝚜
если у тебя контейнер отправляет json в /dev/stdout то получается что в поле message у тебя будет сохранён json, чтобы его задетектить и распарсить, у beats есть специальный decode_json_fields processor
Solyar
Solyar
Solyar
Типо такого*
gani
Как хранить yaml-ы, чтобы бардака не было? Чтобы быстро находилось искоемое.
Скажите бест практис. Как вы именуете их?
𝚔𝚟𝚊𝚙𝚜
то есть весь процесс деплоя выглядит примерно следующим образом:
ENV=stage
for i in deploy/app*; do
(cd $i; qbec apply "$ENV" --yes)
done
𝚔𝚟𝚊𝚙𝚜
но это лишь один из вариантов)
gani
Спасибо за ответ) Я пока работаю с 1 приложением. И пытаюсь привести в порядок в именах ямлов (сервисы, деплойменты, пв, пвс и тп и тд.)
𝚔𝚟𝚊𝚙𝚜
Zhyhanov
Да, все мониторим, prometheus\grafana метрики бегут, все мониторится, и вижу как с запросами растет mem-usage, но не приходит GC, подключил и appDynamics javaclient, там тоже не совсем те цифры, что и в графане, показывает текущую использованную память самим приложением, исходя из чего только... Вообщем проблема в том, что с ростом запросов к контейнеру, растёт хип java, а GC или не понимает этого хипа или еще чего. Или не понимает вообще лимиты которые я задаю. Простите, если сумбурно пишу.
Java какая ? Наблюдали на прошлой работе такую траблу что у нее heap рос но gc не чистил её така java уже не использует ее но и не отдает обратно. Нам советовали обновить java.
Zhyhanov
Dmitry
Zhyhanov
Solyar
Или форк какой-нибудь допилить