Что, прям go build руками? :)

не, ну бинарники скачал коненчо

божечки, вывел через ингрес графану наружу из собранного кластера руками

не надо на проде только так делать

каждая сущность, всё ручками

не надо на проде только так делать

а как надо?

а как надо?

что-то вроде kubectl port-forward -n monitoring grafana-566fcc7956-5bwj4 3000:3000 go to localhost:3000

что-то вроде kubectl port-forward -n monitoring grafana-566fcc7956-5bwj4 3000:3000 go to localhost:3000

это похоже на какое то временное решение

в графане авторизация ж есть. ну в крайнем случае можно whitelist настроить в ingress resource

или типо, открыл, посмотрел и закрыл?

это похоже на какое то временное решение

это как прыгать на production ноды через промежуточный сервер.

да норм чтобы торчала на ружу. юзера настрой и пароль нормальный

Вот тут и пригождаются два ингреса - один для приложений, второй вот для таких штук.

что-то вроде kubectl port-forward -n monitoring grafana-566fcc7956-5bwj4 3000:3000 go to localhost:3000

вопрос только, а api сервер у вас как доступен? =)

да норм чтобы торчала на ружу. юзера настрой и пароль нормальный

я ссыкую, что в таком месте может быть дыра, про которую я не услышу и чет произойдет.

да, у меня апиха тоже наружу торчит, я rbac настоил

я ссыкую, что в таком месте может быть дыра, про которую я не услышу и чет произойдет.

какая дыра - там просто ui с данными

я про графану

С удовольствием получил бы доступ в графану конкурентов)

Все что умеет принимать POST запросы - потенциальная дыра

С удовольствием получил бы доступ в графану конкурентов)

ну тут уже зависит от уровня паранои )

подскажите, можно ли как-то проверять статус пода и если он отличается от Running отсылать алерт? хотелось бы эту метику в прометеус отсылать чтоб выводить потом в графане

Можно статус и имя пода в label метрики прописать, а value метрики всегда 1

Но там какая то лажа с пропадающими метриками была. Прометей любит когда метрики всегда присутствуют в экспортерах и только численное значение меняется.

kube_pod_container_status_* есть метрики же

подскажите, можно ли как-то проверять статус пода и если он отличается от Running отсылать алерт? хотелось бы эту метику в прометеус отсылать чтоб выводить потом в графане

может лучше объекты выше оценивать? например в deployment чтобы все реплики были доступны?

kube-prometheus стандартный стоит

kube_pod_container_status_* есть метрики же

это стандартная метрика или необходимо доставить что-то? я у себя в прометеусе такую не нашел. в кластере стоит хипстер, блекбокс на нодах

kube-state-metrics

Не знаю, кто точно выгружает, ставил https://github.com/coreos/prometheus-operator/tree/master/contrib/kube-prometheus и все. Только storage указал свой из настроек и дашборды накидал.

kube-state-metrics

https://github.com/kubernetes/kube-state-metrics оно?

ставь через kube-prometheus, как тебе советуют

оно тебе сразу всё что надо принесёт

кто-то пользовался Mirantis/k8s-netchecker-server, как оно, в целом?

Часть алертов в графане норм держать или отстой? Там интеграция с telegram из коробки, так и сижу на ней.

привет, коллеги

cluster ip address == master node ip address?

ставь через kube-prometheus, как тебе советуют

спасибо за совет, но менять прометеус нельзя =( прийдется доставлять видимо kube-state-metrics

спасибо за совет, но менять прометеус нельзя =( прийдется доставлять видимо kube-state-metrics

можно

Часть алертов в графане норм держать или отстой? Там интеграция с telegram из коробки, так и сижу на ней.

на старом проекте все алерты слала графана в телегу, проблем не было, а работает так уже около 2-х лет

спасибо за совет, но менять прометеус нельзя =( прийдется доставлять видимо kube-state-metrics

можно взять манифесты из kube-prometheus

буду пробовать 👍

cluster ip address == master node ip address?

Нет, cluster ip присваивается сервису

Абстракции для доступа к подам

Нет, cluster ip присваивается сервису

да, вы правы, я неправильно выразился. Можно ли присвоить один IP адрес для всего кластера? Это LoadBalancer?

Если у тебя выделенная года с ингресс

Нода*

А потом к этому IP адресу присвоить доменное имя? А это в свою очередь будет дергать сервисы из кластера Например: http://my-cluster.com http://service-one.my-cluster.com http://service-two.my-cluster.com

Выделенная нода с ингресс будет твоим балансером, а айпишник этой ноды - энтрипоинтом

Видимо да, так. Во всяком случае у меня такая схема работала

выделенная нода с ингресс это ingress controller который установился на определенную ноду?

Нужно ингресс установить как daemonset тогда не будет привязки к ноде

Можно и так. Ингресс на каждой ноде. Все годы в одной A записи. А ентрипоинты для сервисов делать через CNAME на эту запись

Но это если у тебя количество нод не уменьшается

У меня пока что три ноды. Если я сделаю доменное имя в локальной сети, это сработает?

Сработает для локальной сети

здорово

спасибо, пойду пробовать

Вообще я кубер через ранчером разворачивал, там из коробки именно такое решение

я развернул через kubespray, в чем разница не знаю)

между кубспреем и ранчером

Ранчер красивый и ленивый.

ну кубеспрей ансибл и тоже ленивый )))

Puma или Рита?)

Я ещё не трогал кубеспрей ))

Puma или Рита?)

как вам удобно )))

Я ещё не трогал кубеспрей ))

А себя под одеялом?

))

А себя под одеялом?

Я с этого начинал, а потом мне друг посоветовал попробовать кубернетес

Пута или Рима?))

Я с этого начинал, а потом мне друг посоветовал попробовать кубернетес

от неловкого петтинга к жесткому хардкору

Хз, пока ничего хардкорнее прикручивания внешнего цефа и элементарных пайплайн в ранчере не делал. Ща буду пилить пет-проджект - надеюсь огребу каких-нибудь сложных задач

Но вот кстати ранчеровские пайплайны из коробки - очень нравица

Какую сеть на ранчере пользуете ?

Canal

Оказывается тут когда говорят Сервисы по умолчанию подразумевают HTTP )))

Почему? Что мешает заэкспоузить из кластера что-угодно через nodeport ?

Просто ingress это про http/https

А вот с остальным - сложнее

Подскажите, что не так? залил на неймспейс ингресс контроллер от нджинкс, external-ip в статусе pending около 10-20 минут

Оказывается тут когда говорят Сервисы по умолчанию подразумевают HTTP )))

а что, есть еще какие-то протоколы?