с точки зрения кубера не очень то и надо)

Авитовцы вон вообще сетку куба приземлили на реальное сетевое оборудование, это тот ещё кейс о котором в книжках не пишут - Вот это. Что тут имеллос ввиду. Они замаршрутизировали контейнеры вне ipip туннелей?

и ты можешь жить без ip-ip туннелей например с calico и настоящим bgp

Ну вот видите, не такой простой кейс. Они же к нему как то пришли и реализовали. Я об этом

да у них там больше легаси, паппет и т.п. - я ба на них сильно не ориентировался при начале нового проекта

concurrent = 1 (у меня один раннер), check_interval по умолчанию

Ну, в общем, настройки есть. У меня на такое раннер не хотел запускаться, говорил что-то про то, где он наблюдал мою мать, когда разбирал неразбираемый toml. И в итоге после генерации получался сначала этот блок, потом сгенеренный строкой /entrypoint register. Возможно, это веселье новых версий

у нас на прошлой работе было по своей /24 на каждой кубе-ноде и анонсировалось в бгп

да у них там больше легаси, паппет и т.п. - я ба на них сильно не ориентировался при начале нового проекта

Это конечно оффтоп) там просто выше ребята стабильный kube хотят сделать. Я и сказал, что все кейсы только в процессе эксплуатации выйдут

закат солнца вручную, но когда начали это реализовывать - не было нормальных решений

сплошные фланнели

думаю что из русскоязычных компаний сейчас хороший ориентир это флант (из тех что я знаю). Они делают кучу проектов для разных клиентов и пробовали и так и этак

и им есть что рассказать

думаю что из русскоязычных компаний сейчас хороший ориентир это флант (из тех что я знаю). Они делают кучу проектов для разных клиентов и пробовали и так и этак

кстати да, на хабре часто их читаю, интересно и полезно пишут

они будут пытаться продавать свои услуги на каждый чих?

у авито легаси, свой один датацентр и т.п. - все кейсы весьма специфичны

у всех легаси :)

они будут пытаться продавать свои услуги на каждый чих?

не без того, но статьи на хабре пишут - можно почитать (понятно что на английском таких статей тьма)

Статьи - дело полезное, но не благодарное. У всех свои условия, свои костыли, сложности и легаси. Это доказывает само существование фланта

Dmytro кстати, если интересно, openebs взлетел, но подключится он не может, чет не понимаю где доступы прописать в кубике правильно. Так что почти все работает. :)

Ребята, такой вопрос: когда создаёшь Docker image для кубера, в RUN нужно прописывать перенаправление в stdout и stderr, или кубер это сам за меня сделает?

перенаправление чего?

кубер за тебя запустить контейнеры, как из них выводить логи - твоя забота

Окей, спасибо.

Как в деплойменте вызвать rolling restart контейнеров?

У меня деплоймент не меняется, но при старте контейнер цепляет актуальную конфигурацию (список неймспейсов, на основании которых генерится конфиг для софта). Есть событие, из которого хочется по очереди группу контейнеров деплоймента порестартить.

мы это костылём делаем с генерацией id деплоя

Понял

оно подставляется в некоторые места и провоцирует пересоздание подов

Я тоже чет получше варианта не нашел.

Ага

https://kubernetes.io/docs/tasks/run-application/rolling-update-replication-controller/

У меня деплоймент не меняется, но при старте контейнер цепляет актуальную конфигурацию (список неймспейсов, на основании которых генерится конфиг для софта). Есть событие, из которого хочется по очереди группу контейнеров деплоймента порестартить.

вот тут хелм и поможет

а он как это делает?

DEPLOYED_TS {{ now }} в env

Dmytro кстати, если интересно, openebs взлетел, но подключится он не может, чет не понимаю где доступы прописать в кубике правильно. Так что почти все работает. :)

я ж не настоящий сварщик, у меня в амазоне всё - за openebs ничего не могу сказать, но что взлетело звучит хорошо ?

DEPLOYED_TS {{ now }} в env

это ж то же самое

а он как это делает?

https://github.com/kubernetes/helm/blob/master/docs/charts_tips_and_tricks.md#automatically-roll-deployments-when-configmaps-or-secrets-change

Dmytro кстати, если интересно, openebs взлетел, но подключится он не может, чет не понимаю где доступы прописать в кубике правильно. Так что почти все работает. :)

А что не работает? У меня работает, жалуюсь только на отсутствие поддержки ReadWriteMany

ну у амазона тоже нету

а EBS амазоновский не умеет write many - это наверное by design

у гугла есть

плюч у хелма есть пост инстал пост апдейт хуки

А что не работает? У меня работает, жалуюсь только на отсутствие поддержки ReadWriteMany

Не может подключиться от пода, могу логи скинуть

А iscsi утилиты установлены?

Да, и запущены, но без isxsiadm

у гугла вроде нету write many, только read же?

Он падает с 21 кодом

Можно и логи в pastebin

rbac включен?

у гугла вроде нету write many, только read же?

только read, да

но лично мне это бы уже пригодилось

а так пришлось костылить со стейтфулсетом

Можно и логи в pastebin

https://prnt.sc/jg5in5 Да, включен

https://prnt.sc/jg5in5 Да, включен

Х.з. Ставил по инструкции с их сайта несколько раз и все работало из каробки.

Х.з. Ставил по инструкции с их сайта несколько раз и все работало из каробки.

с сайта openebs?

с сайта openebs?

Да

Хм, пойду еще раз перечитаю, может пропустил что-то

а на какую ось?

а на какую ось?

У меня Debian 9 . Деплоил кластер при помощи kubespray

У меня Debian 9 . Деплоил кластер при помощи kubespray

посмотрю что можно сделать для coreos :)

И ставь пакет open-iscsi

А разве не лучше репликацию для бд, не будет останова из-за миграций.

Это почему не будет? Они точно так же прилетят на реплику

Это почему не будет? Они точно так же прилетят на реплику

Это мне вопрос?)

Коллеги, а можете объяснить в чем плюсы и минусы RancherOS в сравнении с CoreOS? И если можно, то с кейсами, в каких случаях имеет смысл использовать одно вместо второго?

судя по картинке архитектуры лучше наверное не связываться https://github.com/rancher/os

судя по картинке архитектуры лучше наверное не связываться https://github.com/rancher/os

Нормально там с архитектурой)) другой подход только))

> System Docker then launches a container that runs the user Docker. aw yeah

Коллеги, а можете объяснить в чем плюсы и минусы RancherOS в сравнении с CoreOS? И если можно, то с кейсами, в каких случаях имеет смысл использовать одно вместо второго?

Слышал что еще не стабильна, хотя уже давно не ничего не слышал про ранчер

Слышал что еще не стабильна, хотя уже давно не ничего не слышал про ранчер

1я давно стабильна же, да и вообще, это обёртка больше, если про оркестратор. А ОС - голое ядро с системным докером PID 1 и пользовательским докером внутри

Ребята, такой вопрос: когда создаёшь Docker image для кубера, в RUN нужно прописывать перенаправление в stdout и stderr, или кубер это сам за меня сделает?

Надо перенаправлять все самому.

Всем привет. Есть миникуб на котором разворачиваются сервисы с помощью helm-а Images - берутся из удаленного регистри. Можно ли как нибудь взять image с локального регистри ?

Всем привет. Есть миникуб на котором разворачиваются сервисы с помощью helm-а Images - берутся из удаленного регистри. Можно ли как нибудь взять image с локального регистри ?

А в чем проблема?

А в чем проблема?

Да собственно хотелось бы оставить удаленный регистри как основной , а для нужн разработки - использовать локальный. Как такое можно сделать?

Да собственно хотелось бы оставить удаленный регистри как основной , а для нужн разработки - использовать локальный. Как такое можно сделать?

так регистри указывается в поле image, по дефолту кажись docker.io

Кстати, а в чем сакральный смысл registry-proxy что ставит kubespray? Там же просто nginx без всего, можно просто заменить сервисом, нет?

Да собственно хотелось бы оставить удаленный регистри как основной , а для нужн разработки - использовать локальный. Как такое можно сделать?

В кубспрей есть настройка , по умолчанию помоему закоментирона.

А ни у кого случаем нет манифестов/урла на кафку с aws elb? Не получается достучаться извне кластера ?

Добрый вечер, а как сделать чтоб kubectl exec -ti bash не отваливался? А то я там запускаю задачки на полчаса

nohup, screen, tmux...

То есть просто параметр с keepalive не передать :(

а зачем так запускать задачи?

нельзя ли через job?

Можно и через джоб

Но в жизни всякое бывает

Если через скрин то сессия все равно будет отваливаться при неактивности?

Пусти ее внутри в бэкграунд и потом собери результат

Ну мы иногда заходим в рельсовую консоль

Она грузится долго

И еще бывает поделаешь там что-то, отвернулся на 10 мин и все сначала

Грузи, делай запросы

Такого плана задачки

Надо перенаправлять все самому.

Спасибо. То есть в CMD или ENTRYPOINT перенаправление сделать, правильно я Вас понял?

сделать где-то внутри докерфайла, в зависимости от приложения это может быть сделано по разному

Да собственно хотелось бы оставить удаленный регистри как основной , а для нужн разработки - использовать локальный. Как такое можно сделать?

Все просто, делаешь два секрета для докер регистри, в ямликах хельма для приложения указываешь откуда катить (имя секрета). Можно в два разных нс-а катить и из values передавать, что в один нс из основного регистри, а в другой - из другого соответственно

А ни у кого случаем нет манифестов/урла на кафку с aws elb? Не получается достучаться извне кластера ?

Если у вас 3 кафка ноды(забыл как они называются в терминах Кафки), то делайте для каждой свой елб и экспозьте внешние ипы. Иначе вы не прикоснетесь. Кста, соединение между кафкой и клиентом не шифрованное, так что можете увидеть прям в трафике, что улетает клиенту при установке соединения.

Все просто, делаешь два секрета для докер регистри, в ямликах хельма для приложения указываешь откуда катить (имя секрета). Можно в два разных нс-а катить и из values передавать, что в один нс из основного регистри, а в другой - из другого соответственно

Спасибо , попробую так сделать

посмотрю что можно сделать для coreos :)

У меня iscsi на cores, работает отлично. Там нужно добавить параметры в kubelet чтобы все поднялось

У меня iscsi на cores, работает отлично. Там нужно добавить параметры в kubelet чтобы все поднялось

Хм, спасибо, посмотрю сегодня