Похожая проблема - https://stackoverflow.com/questions/40743432/google-container-engine-kubernetes-websocket-socket-io-not-working-on-multi

sessionAffinity: ClientIP не помог

https://github.com/kubernetes/dashboard/wiki/Dashboard-arguments token-ttl

СПС!

Ребят, а как заставить работать сокеты(socket.io) на 4их репликах в связке? Используют nginx-ingress от kubernetes

насколько я понимаю, тут нужен ингресс - ClientIP будет одинаковый у всех т.к. перед сервисов стоит ELB http://nishadikirielle.blogspot.de/2016/03/load-balancing-kubernetes-services-and.html https://blog.shanelee.name/2017/10/16/kubernetes-ingress-and-sticky-sessions/

Приветствую! Кто может подсказать по prometheus-operator? Хочу собирать логи с ceph, запускаю exporter в кластере, настраиваю service для контейнера, создаю servicemonitor, но prometheus его не обнаруживает( https://pastebin.com/ZX6rHSqg

prometheus? логи?

нифига не понятно, покажи с -o yaml

Прометеус даже не замечает его В логах стандартно всё у него

https://pastebin.com/arGKbRge

а как он должен находить экспортеры - это понятно?

в описании к оператору я нашёл только что он ходит по сервисмониторам и вот такой пример https://github.com/coreos/prometheus-operator/blob/master/example/user-guides/getting-started/example-app-service-monitor.yaml

🙈 походу разобрался, там нужен был другой matchSelector под prometheus

Ребят, а как вы решаете проблему множественного подключения к одному volume’к при rolling update’ах? Только выставлять recreate?

Народ, я тут удалил у мастера taint node-role.kubernetes.io/master, а теперь я подключил несколько нод и не хочу, чтобы на мастере что-либо запускалось. Подскажите, как вернуть taint обратно?

Удалял так: kubectl taint nodes —all node-role.kubernetes.io/master- Пытался вернуть так: kube-master:~$ kubectl taint nodes kube-master "node-role.kubernetes.io/master=" error: unknown taint spec: node-role.kubernetes.io/master=

kubectl taint nodes kube-master node-role.kubernetes.io/master=:NoSchedule

kubectl taint nodes kube-master node-role.kubernetes.io/master=:NoSchedule

Спасибо!

какая то ерунда с этим прометеем. Конфиг он подцепил, всё вроде верно, но target не появляется и следовательно данные не тянет с экспортера. Внедрял кто нибудь у себя такую штуку? Можете в лс написать? Спасибо

Внедряю. Чарт взлетел из коробки. Правда, данные node-exporter дублировались, пришлось подкрутить

С установкой прометея вопросов нет вопрос в добавлении нового target в него

у тебя не с прометеем странное, а с prometheus-operator

в прометее как раз всё просто настраивается

Скинь в личку конфиги сервиса и сервисмонитора

helm'а недостаточно для деплоя, надо больше инструментов! https://github.com/GoogleContainerTools/skaffold/blob/master/examples/helm-deployment/skaffold.yaml

скаффолд уже в третий раз минимум )

я отсюда и брал

Привет, товарищи ! Прошу вас о помощи : Есть сервис , у которого есть endpoint /monitor . Как мне средствами ingress сделать так чтобы , только этот endpoint был доступен для вызова , а скажем запрос на / ничего не давал . Знаю что вопрос глупый и легко наверно гуглится , но я не знаю как правильно сформулировать его. Про что мне надо почитать , чтобы сделать это ?

Добавь настроенный nginx в порт

Под

Коллеги, кто-то в кубах разворачивал Zipkin? Мне тут один товарищ посоветовал, у них он в проде даже зачем-то, но они без к8с работают. Мне кажется, в прод такое подключать нельзя. Поделитесь, пожалуйста, опытом, если кто пользуется.

почему нельзя?

ну то есть почему кажется что нельзя?

и во-вторых Zipkin - внутренний проект гугла, возможно ты имел в виду openzipkin

Это же трассировщик пакетов для отладки и замеров скорости и эффективности коммуникаций между сервисами

и во-вторых Zipkin - внутренний проект гугла, возможно ты имел в виду openzipkin

у гугла Dapper

Медленно будет все и, возможно, небезопасно.

у гугла Dapper

о, точняк

и во-вторых Zipkin - внутренний проект гугла, возможно ты имел в виду openzipkin

репа у openzipkin'а так называется: github.com/openzipkin/zipkin :)

попутал

попутал

ты вероятно про Census / OpenCensus

Медленно будет все и, возможно, небезопасно.

откуда инфа про "медленно" и "небезопасно"?

честно говоря не знаю уже с чем попутал

откуда инфа про "медленно" и "небезопасно"?

Исключительно мое настороженное отношение к отладочному софту в проде

а метрики ты собираешь в проде?

Коллеги, кто-то в кубах разворачивал Zipkin? Мне тут один товарищ посоветовал, у них он в проде даже зачем-то, но они без к8с работают. Мне кажется, в прод такое подключать нельзя. Поделитесь, пожалуйста, опытом, если кто пользуется.

для Гошного софта я бы посоветовал посмотреть в сторону https://github.com/jaegertracing/jaeger

как более удобной либе и морде

ну или в сторону OpenCensus который кажется совместим с Егерем

да между ними разницы вроде не очень много

да между ними разницы вроде не очень много

ну либа пофичастее для Го, похуже для джавы

ну и тут вроде вопрос в "не пущать такое в прод!", а не в конкретной реализации

морда поудобнее и на Го + нода

Опять же, плодить лишние иопсы на каждый чих.

про не пущать в прод - ну... вопрос спорный

хороший подход если по умолчанию собирать мало семплов и редко

Опять же, плодить лишние иопсы на каждый чих.

мониторинг тоже плодит иопсы

но при необходимости иметь возможность увеличить частоту сбора информации

для Гошного софта я бы посоветовал посмотреть в сторону https://github.com/jaegertracing/jaeger

Спасибо, как раз го используем.

причём мониторинг плодит иопсы даже если запросов на сервер нет!

ссанымм тряпками его с прода

стыд сплошной

мониторинг тоже плодит иопсы

Так я и стараюсь его по минимуму включать. На уровне: пациент жив/мертв, а там уже по необходимости подключать остальные метрики

короче воспринимай трейсинг как часть мониторинга, который иногда может спасти тебе много часов дебага

ну и он крайне редко нужен на 100% включенным

тогда волосы твои будут мягкие и шелковистые

Так я и стараюсь его по минимуму включать. На уровне: пациент жив/мертв, а там уже по необходимости подключать остальные метрики

ну... есть два подхода

либо собирать только то что известно что нужно - так ты конечно экономишь ресурсы, но если пришел пушной зверек, то у тебя не будет инфы для отладки

причём мониторинг плодит иопсы даже если запросов на сервер нет!

Шутка ли, но прошлые наши админы подрядчики вкрутили какую-то дичь с графаной, оно вешало цпу и тормозила всю приложеньку. "манеторинх", как только нашли и выковыряли - сразу все наладилось: и скорость ответа сервера на веб приложении, и там же скорость генерации страницы на пхп. Магия.

второй подход - собирать как можно больше, тогда можно например деплои откатывать и потом разбираться по тем дебаг семплам и метрикам что были собраны

Шутка ли, но прошлые наши админы подрядчики вкрутили какую-то дичь с графаной, оно вешало цпу и тормозила всю приложеньку. "манеторинх", как только нашли и выковыряли - сразу все наладилось: и скорость ответа сервера на веб приложении, и там же скорость генерации страницы на пхп. Магия.

пхп? прод?

пхп? прод?

Легаси, что поделать

можно ещё трейсинг включать на полную катушку перед/после деплоя

Шутка ли, но прошлые наши админы подрядчики вкрутили какую-то дичь с графаной, оно вешало цпу и тормозила всю приложеньку. "манеторинх", как только нашли и выковыряли - сразу все наладилось: и скорость ответа сервера на веб приложении, и там же скорость генерации страницы на пхп. Магия.

ну важно уметь семплировать данные, если получение их дорого стоит. Не надо собирать все на каждый заброс, особенно если подов или машин много однотипных - ты можешь собирать метрики по каждому 10-ому или 1000ому запросу и все равно иметь близкую к правильной картину

можно ещё трейсинг включать на полную катушку перед/после деплоя

например Staging или Cannary обвешан трейсингом по уши

или вообще там 1% процент машин в кластере обвешан им

Вопрос, а можно как-то равномерно размазать поды в деплойменте по failure domains?

Всем привет. Подскажите, пожалуйста, какие есть бенчмарки для проведения нагрузочного тестирования контейнеров в кубике? Нужно сделать связку с Hora, может делал кто?

Вопрос. Изнутри контейнера не могу установить внешнего соединения никуда. Стоит calico. Pod контейнера в неймспейсе default. Куда смотреть, подскажите пожалуйста. В документации кубера сказано, что по умолчанию поды должны принимать любые входящие и мочь создавать любые исходящие соединения. Почему у меня это не так — очень любопытно. K8s кстати 1.10.

фсеть

Может быть default namespace имеет какие-то особенные networking policies?

кто ж тебя знает