Ребят, а настраивал кто-нибудь Prometheus на мониторинг кастомных метрик подов?
Под такую штуку отлично подходит Prometheus Operator
Pavel
Andrey
Как вариант- поставьте прометей в кубере и сделайте ноде порт сервис и ходите в этот прометей с другого прометея
И в таком случае он будет нечто вроде прокси ведь, да?
Mikhail [azalio]
И в таком случае он будет нечто вроде прокси ведь, да?
Ну он будет коллектить все метрики с кубера сам.
Mikhail [azalio]
А дальше отдавать кому хочешь
Andrey
А дальше отдавать кому хочешь
А отдавать как? Будет публиковать как метрики или у него есть механизмы как например у zabbix proxy?
Mikhail [azalio]
А отдавать как? Будет публиковать как метрики или у него есть механизмы как например у zabbix proxy?
https://github.com/prometheus/prometheus/blob/master/docs/federation.md
Andrey
https://github.com/prometheus/prometheus/blob/master/docs/federation.md
Огонь. Спасибо ребят! Пойду изучать.
Ivan
Огонь. Спасибо ребят! Пойду изучать.
Для метрик лучше сделай PVC и держи все без федераций как минимум так будет удобнее в плане подключения Grafana (любой дашбоард c grafana.com будет работать без допила), не забудь сразу сделать конфиги для алертменеджера. У меня сразу все работало через федерации, 1 прометеус собирал метрики из 3 кластеров + был 1 алертменеджер в который заходили все алерты - гемор еще тот, иногда отпадали эндпойнты и графики в Grafana без допила не работали.
G72K
https://techcrunch.com/2018/08/29/google-steps-back-from-running-the-kubernetes-infrastructure/
bebebe
расходимся
Eduard
Vadim
тестировать на RPi теперь будут?
Eduard
@all #needFeedback
Сделал генератор чартов через апиху. CLI прилагается :)
https://github.com/egeneralov/helm-chart-generator-api
https://github.com/egeneralov/helm-chart-generator-cli
Andrey
Для метрик лучше сделай PVC и держи все без федераций как минимум так будет удобнее в плане подключения Grafana (любой дашбоард c grafana.com будет работать без допила), не забудь сразу сделать конфиги для алертменеджера. У меня сразу все работало через федерации, 1 прометеус собирал метрики из 3 кластеров + был 1 алертменеджер в который заходили все алерты - гемор еще тот, иногда отпадали эндпойнты и графики в Grafana без допила не работали.
А в чем проблема с федерацией была? Там метрики приезжают не as is?
Anton
https://techcrunch.com/2018/08/29/google-steps-back-from-running-the-kubernetes-infrastructure/
Гугл, АбиделсО, там столько мемберов, а башляю в основном я
Михаил
Михаил
ждет когда алибаба или какой-нибудь vmware будет закидывать бабло в сообщество и проталкивать принудительно свои фичи
Vadim
Гугл, АбиделсО, там столько мемберов, а башляю в основном я
для гугла инфра для тестов стоит копейки тащемта
Михаил
я думаю это просто принципиальная позиция
Vadim
дело скорее в том, что отдельную CI команду для непрофильного проекта держать намного дороже. А так - и кредитов дали и платить з\п не им (наполовину)
Andrey
Мне прост чтоб оценить уровень гемора
Ivan
Там немного меняется запрос и динамические переменные нужно корректировать
Etki
Sergei
https://techcrunch.com/2018/08/29/google-steps-back-from-running-the-kubernetes-infrastructure/
это же про хостинг, а не про проект
Denis
Всем привет! Подскажите каким образом кубелет выкачивает новый имейдж с докер реджестри? К примеру у меня автодеплой сервиса в кластер проходит с помощью gitlab CI и Helm (Helmfile). У нас на девелоп кластер имейдж собирается с тегом develop и при автодеплое должен обновлятся, но этого не происходит. В спеке пода указываю pullPolicy: Always
Eduard
Всем привет! Подскажите каким образом кубелет выкачивает новый имейдж с докер реджестри? К примеру у меня автодеплой сервиса в кластер проходит с помощью gitlab CI и Helm (Helmfile). У нас на девелоп кластер имейдж собирается с тегом develop и при автодеплое должен обновлятся, но этого не происходит. В спеке пода указываю pullPolicy: Always
Тык кубер не понимает, что у тебя новый image. Поставь тэг branch-build_id
Denis
Тык кубер не понимает, что у тебя новый image. Поставь тэг branch-build_id
Я думал там по хэшу имейджа умеет вытягигивать его(
Denis
Костыль вида docker pull в крон, если мучится не хочешь
Да я буду наверное пушить имейдж с еще с одним тегом
bebebe
Костыль вида docker pull в крон, если мучится не хочешь
Прекратите! Только вечера такое видел. Бррр
Denis
Мне кажется это с хелмом беда
Sergei
Хелм этим не занимается. Он только изменения в объекте отслеживает. Если тэг не поменялся (как строка), то он ничего не делает.
bebebe
Я просто думал при указании pullPolicy: Always он должен всегда имейдж обновлять
Этим должен заниматься CI/CD
std::slavik
кстати вопрос интересует давно - вот вроде кубернетес это все про хайлод, масштабирование и тд. А как вы в хайлод проект попали - свой вырастили или по найму в основном?
std::slavik
интересно с какой точки зрения - у кого есть опыт личный именно развития инфраструктуры. Типа там начиналось все с одной вдски, а сейчас 100 датацентров и все такое)
std::slavik
А то есть некоторое ощущение, что все наперебой советуют крутые инструменты всем подряд, но возникает подозрение что они их сами не внедряли , а в рабочей уже системе научились с ними работать.
это как бы немного уже меняет картину
bebebe
Какие аллюзии вас посещают
std::slavik
какие есть
bebebe
Вы как нибудь с этим боритесь?
bebebe
А Славик, это вы, сразу вас и не признал
Eduard
Anonymous
Приветствую, "message": "failed to allocate a serviceIP: range is full" не могу разобраться куда съелись /16. Ззанято 277
Anonymous
Any one have doc related to configure rook storage in kubernetics
Anonymous
Разобрался.
Mikhail [azalio]
Any one have doc related to configure rook storage in kubernetics
Just look the site. I have installed rook with doc from the rook’s site.
Й
Всм привет. Кто работал с local-volume провиженером?
Поддерживаются ли в нем квоты по месту?
Может ли под заюзать места больше чем указано в PVC?
Ilya
Anton
Всм привет. Кто работал с local-volume провиженером?
Поддерживаются ли в нем квоты по месту?
Может ли под заюзать места больше чем указано в PVC?
какие такие квоты? по его логике вы целое устройство отдаете. или раздел в pv
Anton
если делать mount bind из одного большого раздела, добром это не кончится
Й
вооооот
Й
спасибо!
Салтыдык
нарезай LVM
Й
Угу :(
Это был запасной вариант
Й
А есть ли уже готовое какое-нить решение для ЛВМ? lvm провиженер....?
Anton
такое только в пропозалах в дизайн
Й
Эхххх. Спасибо!
Anton
А есть ли уже готовое какое-нить решение для ЛВМ? lvm провиженер....?
вручную (ну тоесть с ansible например) сейчас делаю. сервисов, которым нужен pv не так много, перед деплоем создаешь pv выбрав ноду вручную, опять же.
было бы отлично если бы кто то делал это сам, еще учитывая другие ресурсы машины (ram\cpu)
Anton
в общем это все от нежелания крутить sds на тех же машинах. даже не знаю что лучше, юзать так локальные вольюмы или вертеть на маленьком кластере рядом еще и ceph
Й
Даааа, при "отрицательном" бюджете хранилище создает просто кучу гемора
Artem
Можно еще наколхозить что-то вокруг flexvolume
Artem
Была наркоманская идея заюзать ansible внутри flexvolume
Anton
https://github.com/sysoperator/kube-lvm-flexvolume
Anton
я не пробовал сам =) нагуглилось
Anton
https://github.com/kubernetes/examples/tree/master/staging/volumes/flexvolume
Anton
короч оказывается так тоже можно
Й
👍
Anonymous
всем привет, пытаюсь интегрировать куб со слаком а он не находим пакет в хелме
> helm install --name kube-slack-bot stable/kube-slack
> Error: file "stable/kube-slack" not found
как так то? вот же этот чарт:
https://github.com/helm/charts/tree/master/stable/kube-slack
bebebe
helm repo list?
Anonymous
helm repo list?
хм не смотрел, но нашел похожую проблему у людей:
https://github.com/helm/helm/issues/2030
>rm -rf ~/.helm && helm init --client-only
вылечил вот так
bebebe
ээээээ