Bohdan
Кстати, если кому то нужно почистить VPS от всех следов каких либо докеров https://github.com/Pomazan-Bogdan/flushalldocker
Сергей
А CEPH то за что? :)
Solyar
Кстати, если кому то нужно почистить VPS от всех следов каких либо докеров https://github.com/Pomazan-Bogdan/flushalldocker
Таким скриптом можно с друзьями админами играть :) На прод серверах # [ $[ $RANDOM % 6 ] == 0 ] && ./flushalldocker.sh || echo "You live"
Fedor
Все доброе утро. Рядом подскажите на тему сбора логов с контейнеров, сейчас остановился на filebeat как daemonset, но в грейлоге не могу получить source и host
inqfen
Там есть теги же
Artur
В конфигурации filebeat
Fedor
есть пример?
Artur
ща
Fedor
Я просто документацию не особо понимаю как её компоновать, уже и так вышла нехилая со всякими условиями( . А я думал filebeat можно настроить для сбора логов через api k8s
Artur
fields.source: host fields_under_root: true
Отделение Bereke Bank
Все доброе утро. Рядом подскажите на тему сбора логов с контейнеров, сейчас остановился на filebeat как daemonset, но в грейлоге не могу получить source и host
Не знаю что там в грейлоге, у меня filebeat настроен так (не в кубере) filebeat.inputs: - type: docker symlinks: true tail_files: false containers: ids: - "" path: "/var/log/containers" processors: - add_kubernetes_metadata: in_cluster: false host: control-02.dev.cloud.aviata.team kube_config: /var/lib/kubernetes/filebeat.kubeconfig default_matchers.enabled: false matchers: - logs_path: logs_path: /var/log/containers/
inqfen
Я filebeat вообще так ставлю на машины
Artur
Я ошибся на счет для каждого, просто в начале самом
Artur
Проблема, насколько я понял, в том что грейлог новые теги не все знает
inqfen
Получается, что смысл тот же, но не зависит от cni, запуск не зависит от kubelet и вот это все
Artur
то есть не обучен с метадатой плоследних beats работать
𝚔𝚟𝚊𝚙𝚜
пока работает только фокус с роутингом. а адрес поду дается каликой так что натить и не надо
В смысле с ip rule на ноде? А внутри пода внешний адрес? - единственный или как дополнительный?
Fedor
с радостью, не подходит в текущих реалиях
Fedor
Я бы его поставил через helm сразу же
Artur
fluent-bit еще советуют
Artur
но, по мне, так удобнее beats'ов ничего нет
Alexey
В смысле с ip rule на ноде? А внутри пода внешний адрес? - единственный или как дополнительный?
на ноде, а поду присвоен единственный адрес влановой сети через аннотацию калико IpAddrs
𝚔𝚟𝚊𝚙𝚜
𝚔𝚟𝚊𝚙𝚜
Ну идея проста, исходящие пакеты с нужным sourceIP нужно завернуть в правильный интерфес
𝚔𝚟𝚊𝚙𝚜
kube-static-egress-ip не ставил
Эта штука должна подменять исходящий IP для подов в нужном сервисе
𝚔𝚟𝚊𝚙𝚜
Так как у вас и так внешний IP в поде, то ничего SNAT'ить не придётся, все пакеты и так попадут куда нужно
Alexey
Эта штука должна подменять исходящий IP для подов в нужном сервисе
И похоже только для идущих в определенном направлении. А у меня 0.0.0.0 потому что форвард прокся в поде
𝚔𝚟𝚊𝚙𝚜
И похоже только для идущих в определенном направлении. А у меня 0.0.0.0 потому что форвард прокся в поде
Только для egress разумеется, ingress трафик на внешний IP обрабатывается kube-proxy
Anonymous
ребята подскажите ставлю prometheus-operator висит минут 15 и падает $ helm install ./prometheus-operator/ --name=prometheus-operator --namespace=monitoring --debug [debug] Created tunnel using local port: '50327' [debug] SERVER: "127.0.0.1:50327" [debug] Original chart version: "" [debug] CHART PATH: /Users/flash/kubernetes/k8s-ci/helm/prometheus-operator Error: transport is closing Кубер 1.16.2
George
у тебя хельм сдох
George
helm template .. | kubectl apply -f -
George
если сканает - ТОЧНО дело в хельме
𝚔𝚟𝚊𝚙𝚜
ужеж третий вроде релизнули, он без тиллера
Anonymous
у тебя хельм сдох
спасибо за команду, теперь вижу какуюто проблему ob.batch/release-name-prometheus-op-admission-create created job.batch/release-name-prometheus-op-admission-patch created ingress.extensions/release-name-grafana created ingress.extensions/release-name-prometheus-op-alertmanager created ingress.extensions/release-name-prometheus-op-prometheus created mutatingwebhookconfiguration.admissionregistration.k8s.io/release-name-prometheus-op-admission created validatingwebhookconfiguration.admissionregistration.k8s.io/release-name-prometheus-op-admission created unable to recognize "STDIN": no matches for kind "Alertmanager" in version "monitoring.coreos.com/v1" unable to recognize "STDIN": no matches for kind "Prometheus" in version "monitoring.coreos.com/v1" unable to recognize "STDIN": no matches for kind "PrometheusRule" in version "monitoring.coreos.com/v1"
Solyar
Сервис ругается на занятый нод порт, но он свободен. Что сделать можно? Флашнуть iptables ?
Anonymous
do it again
validatingwebhookconfiguration.admissionregistration.k8s.io/release-name-prometheus-op-admission configured The Alertmanager "release-name-prometheus-op-alertmanager" is invalid: spec.version: Invalid value: "null": spec.version in body must be of type string: "null"
UglyKoyote
я может туплю, но иптаблес это список правил.. как оно влияет на то что порт занят не занят?
Solyar
пусто
Trurl
А есть какая-нибудь тулза для апгрейда-валидации всех деплойментов/сервисов/прочего под конкретную версию k8s? Ясно что оно и так будет работать в большинстве случаев, но хотелось бы избавляться от всяких устаревших extensions/v1apha1
UglyKoyote
ss / lsof?
Solyar
ss / lsof?
Пусто
Trurl
а то у меня уже некоторым деплоям по 3 года, по принципу "работает - не трогай"...
UglyKoyote
Пусто
хым.. а какой именно сервис ругается и как именно?
Solyar
Error: Service "ca" is invalid: spec.ports[0].nodePort: Invalid value: 31254: provided port is already allocated
Solyar
Типичная ошибка
Solyar
при создании сервиса
UglyKoyote
эм.. так это слово переводится как "уже назначено"
Solyar
ага
UglyKoyote
я то думал оно ругается именно на попытку запуститься на этом порту
UglyKoyote
ну значит у тебя где то оно уже "выделено", получается так
Solyar
Даже тачку уже перезапускал. В кубе ничего кроме контролплейна не установлено
Trurl
kubectl convert 🙂
спасиба )
Trurl
kubectl convert is DEPRECATED and will be removed in a future version.
George
как будто оно там где-то повредилось умом, т.к. может у тебя какой-то параметр не вписан и шаблонизация сломалась
Sn00part
в общем то скриптец делает тож самое но напрямую в апи
И.там надо ид кластера добавлять ранчеру))
Yuriy
И.там надо ид кластера добавлять ранчеру))
да, посмотрел сейчас, у меня их просто 2 версии, одна под ранчер, другая под gke
Solyar
helm install срёт ошибкой
✖️
Добрый день, может кто-нибудь объяснить как развернуть туловину в разных неймспейсах ??? Создал 2 сервиса в разных нейм спейсах, которые ссылаются на поды друг друга, но ничего не работает
Sn00part
А что именно не работает
✖️
А я не знаю, не знаю как это грамотно настроить
Sn00part
Svcname.namespace.kubernetes.svc.local вот так надо
Sn00part
Необязательно но так работать точно будет )
✖️
Два неймспейса, допустим test и test1 разворачиваю спарк кластер с мастером и 4 воркерами если разворачивать все в одном неймспейсе, то все работает но вот хочу мастера отправить в test, а воркеры в test1 и они должны видеться между собой но не видятся
Sn00part
Ну вот воркеров настрой, чтобы они смотрели на твой мастер, адрес выше ))
Lucky SB
Svcname.namespace.kubernetes.svc.local вот так надо
Аф. это что за дичь ? my-svc.my-namespace.svc.cluster-domain.example и кластер-домен по дефолту cluster.local my-svc.my-namespace.svc.cluster.local
Lucky SB
Два неймспейса, допустим test и test1 разворачиваю спарк кластер с мастером и 4 воркерами если разворачивать все в одном неймспейсе, то все работает но вот хочу мастера отправить в test, а воркеры в test1 и они должны видеться между собой но не видятся
ты хочешь странного и стремного - сможешь внятно объяснить какой профит ожидаешь от разбиения мастеров и воркеров в разные ns ? неймспейсы придуманы для разделения проект-прод-стейдж-дев-ветка... а ни как не для разбиения одной сущности на две части.