Вообще для меня было сюрпризом, что до сих пор никто ничего толкового не придумал. Все используют shell+kubectl

зачем изобретать велосипед, чем kubectl плох?

ну так-то можно и курлом, если уж по-хипстерски

зачем изобретать велосипед, чем kubectl плох?

всё бы хорошо, если бы не kubeconfig

перед использованием kubectl нужно kubeconfig подготовить.

а хочется в jenkins просто выбирать secrets для нужного тебе кластера и namespace

у меня кластеров много.

сейчас зоопарк обвязок deploy.sh для каждого проекта. с содержимым типа: cat > "${K8S_CONFIG}" <<- EOM apiVersion: v1 clusters: - cluster: certificate-authority: /data/docker/k8s-ca.pem server: https://1.2.3.4 name: ${K8S_CONTEXT} contexts: - context: cluster: ${K8S_CONTEXT} user: jenkins name: ${K8S_CONTEXT} current-context: ${K8S_CONTEXT} kind: Config preferences: {} users: - name: jenkins user: client-certificate-data: ${K8S_CERT} client-key-data: ${K8S_KEY}

вот поставил, изучаю и что-то не могу найти требуемый пример

да я уже увидел, что там что-то не то

с дженкинсом, к сожалению, пока приходится ковырять исходный код, чтобы увидеть как с этим все работать

с дженкинсом, к сожалению, пока приходится ковырять исходный код, чтобы увидеть как с этим все работать

вот этим и занимаюсь сейчас. параллельно ищу другие пути

перед использованием kubectl нужно kubeconfig подготовить.

мы тупо храним на s3 готовые конфиги, в одной из фаз билда стягиваем на билд-машину

костыль, конечно

но работает отлично

а еще нет возможности изкоробки сохранять все изменения манифестов ыв репу

ето да

двавай

https://gist.github.com/iMelnik/9903073829046829c3eb8111129e7248 как-то так. "Я не настоящий сварщик"

если понравится, создам репу запилю автоматизацию и будет готовый проект

👍

я хотел гугловую авторизацию прикрутить, но остановился на том что есть

инкластер должно заводиться без бубна

Вообще для меня было сюрпризом, что до сих пор никто ничего толкового не придумал. Все используют shell+kubectl

Helm же

Helm же

OpenShift!

OpenShift!

Разные весовые категории же :)

Разные весовые категории же :)

ну я не удержался)

Openstack вас победит

Openstack вас победит

а что там кроме juju есть для кубика?

из живого

aws :)

даёшь больше названий проектов.

Helm же

Да, я думал тиллер напрямую дергать, но решил что это немного перебор для моей задачи. хотя есть https://github.com/AcalephStorage/rudder

даёшь больше названий проектов.

ну я хотя бы попытался остаться в рамках твоего вброса)

вброс: унифицировать и упростить деплоймент для множества кластеров и namespaces. избавиться от bash скриптов

без подробностей сложно помочь

вброс: унифицировать и упростить деплоймент для множества кластеров и namespaces. избавиться от bash скриптов

Пиши скрипты на чем-то другом... я пока это делаю на питоне, хотя на Го, было бы проще эксплуатировать, наверно

либо настраивать kubectl исключительно используя environment variables и избавиться от kubeconfig. так можно?

и запилить set of secrets в jenkins на все случаи жизни

http://stackoverflow.com/questions/41433577/how-to-authenticate-kubectl-using-environment-variables

Пока только такое решение для себя нашел: curl -v -XPUT -H "Content-Type: application/json" "${KUBE_API_URL}/apis/extensions/v1beta1/namespaces/${NAMESPACE}/deployments/${DEPLOYMENT}" --cacert <(echo "${BASE64_CA}" | base64 -d) --cert <(echo "${BASE64_CERT}" | base64 -d) --key <(echo "${BASE64_KEY}" | base64 -d ) -d@<(python -c 'import sys, yaml, json; json.dump(yaml.load(sys.stdin), sys.stdout)' < deployment.yml)

голый yaml с Content-Type: application/yaml у меня почему-то не проглатывается

майм-тайп вроде x-yaml, емнип

disregard that, в своггере просто application/yaml

если в одном клатере все, то для kubectl можно без секретов, через serviceaccount

голый yaml с Content-Type: application/yaml у меня почему-то не проглатывается

может --data-binary=@deployment.yaml поможет?

мегафон так и лежит. я слышал они там как раз k8s начали внедрять бгг

вброс: унифицировать и упростить деплоймент для множества кластеров и namespaces. избавиться от bash скриптов

Хороший вброс. У нас проблема деплоя давно, т.к. он сильно сложнее kubectl apply. Сейчас пытаемся построить связку bazel, helm, gitlab-ci. И связать это все своим консольным приложением, в котором вся логика

deis?

deis?

А как жить с deis без AWS, GCS и т.д?

Он к ним не приаязан

A variety of Deis Workflow components rely on an object storage system to do their work, including storing application slugs, Docker images and database logs.

Т.е workflow требует AWS...

slugs не нужны если докерами деплоить, docker registry можно свой подсунуть... ну да, там надо в настройках bucket указывать но в целом есть знакомые которые на bare metal это держат

Самому интересно стало надо будет спросить

А насколько мне поможет такая штука как https://coreos.com/tectonic/ ?

А насколько мне поможет такая штука как https://coreos.com/tectonic/ ?

а чего хочется?

А насколько мне поможет такая штука как https://coreos.com/tectonic/ ?

смотря в чем.

А насколько мне поможет такая штука как https://coreos.com/tectonic/ ?

https://coreos.com/blog/minikube-and-rkt.html

https://github.com/alekssaul/minikube-tectonic/blob/master/minikube-up.sh

Всем привет А есть какой-то способ сконфигурить readiness и liveness probes так, что бы они при старте чекали под и не фейлили его пока он не поднимется или пока не пройдет какой-то таймаут? При старте пода вначале запускаются скрипт прогревания кеша, а потом уже сам апликейшн. Кеш может прогреваться и 2 минуты и 5 минут. Сейчас поставил initialDelaySeconds в 5 минут и получается в любом случае, даже если апликейшн будет ready через 2 минуты, первый чек пойдет только через 5 минут и только после этого он будет включен в балансер.

если я правильно понял, то initialDelaySeconds нужно поставить только для livenessProbe

тогда оно фейлит под на этапе инициализации

Может прогрев кеша вынести в инит-контейнер?

Всем привет А есть какой-то способ сконфигурить readiness и liveness probes так, что бы они при старте чекали под и не фейлили его пока он не поднимется или пока не пройдет какой-то таймаут? При старте пода вначале запускаются скрипт прогревания кеша, а потом уже сам апликейшн. Кеш может прогреваться и 2 минуты и 5 минут. Сейчас поставил initialDelaySeconds в 5 минут и получается в любом случае, даже если апликейшн будет ready через 2 минуты, первый чек пойдет только через 5 минут и только после этого он будет включен в балансер.

https://kubernetes.io/docs/concepts/workloads/pods/init-containers/

хм, идея неплоха, спасибо. Кеш - это файл у меня, осталось только еще видимо через volume его копировать между контейнерами

Всем привет А есть какой-то способ сконфигурить readiness и liveness probes так, что бы они при старте чекали под и не фейлили его пока он не поднимется или пока не пройдет какой-то таймаут? При старте пода вначале запускаются скрипт прогревания кеша, а потом уже сам апликейшн. Кеш может прогреваться и 2 минуты и 5 минут. Сейчас поставил initialDelaySeconds в 5 минут и получается в любом случае, даже если апликейшн будет ready через 2 минуты, первый чек пойдет только через 5 минут и только после этого он будет включен в балансер.

Инит конейнерв не без сюрпризов. Сделайте readinessCheck через exec скрипта

сюрпризы, это когда они зависают при старте и всё?

нет, это когда их обновляешь, делаешь kubectl apply, а ничего не происходит

в итоге выясняется, что только обновления image перезапускают под :)

любые другие параметры -нет. Учитывая что у меня init containerы были /bin/sh -c 'abc', было занятно

Инит конейнерв не без сюрпризов. Сделайте readinessCheck через exec скрипта

тоже неплохая идея, только мне кажется что между окончанием работы скрипта инициализации и запуском апликейшна (php-fpm) теоритически возможен даунтайм

в итоге выясняется, что только обновления image перезапускают под :)

У меня helm.sh и номер релиза в аннотациях, так что при каждом деплое идет rolling update подов

У меня helm.sh и номер релиза в аннотациях, так что при каждом деплое идет rolling update подов

при каждом релизе все поды рестартите, даже если ничего не поменялось?

да, т.к. во-первых шанс что ничего не поменялось очень мал, если бы релиз, а во-вторых т.к. идет rolling-update на апликейшене это почти никак не сказывается

https://www.facebook.com/danikin2/posts/1576256925752703

Кто уже сетапил Кубер в Infra? ;)

вот да сегодня прочел

что за тема с infra

Аникина в тред плиз