а вот так из опыта, как бы стали делать , на baremetal ноды k8s раскатывать или виртуалками обкладывать
обычная практика засовывать мастер ноды в виртуалки, а "worker" (compute) ноды делать железными
bebebe
Andor
а etcd?
Andor
мне вот хочется извращений: lxd и внутри докеры
Andor
совсем извращения или средненько?
engelbart
Eduard
совсем извращения или средненько?
У меня гонялось, lxc-шка просто для изоляции в целях изучения одного бинаря
Andor
ну вот мне думается что lxd будет норм в качестве замены виртуалок
Eduard
proxmox глянь для общего
Andor
мне не хочется зоопарк
Eduard
Просто посмотри, для развития
Andor
готово
Huan
привет всем. подскажите плз можно ли указать в .kube/config неймспейс all-namespaces?
Anonymous
привет всем. подскажите плз можно ли указать в .kube/config неймспейс all-namespaces?
разве там указывается namespace?
Huan
можно конкретно указать, а вот как все указать - не могу найти
Anonymous
я думал, это настраивается ролями
Alexandr
Ребят кто нибудь гонял rancher/longhorn в k8s?
Андрей
а у кого работает openebs с авторизацией? куда секрет привязывать? примеров найти не могу :/
Ivas
что посоветуете использовать в качестве fs для stateful контейнеров на kubernates, кроме ceph ничего в голову не приходит, но ceph не хочется
bebebe
Sergey
Если нужна именно фс, а не блочные устройства, то выбор не велик гластер как вариант ещё
Sergey
Nfs - не отказоустойчивый
bebebe
Nfs - не отказоустойчивый
все зависит от юз-кейса, nfs можно накатить по быстренькому для домашнего кластера
Sergey
Гластер, как выше Вам писали
bebebe
но я бы все равно поглядел на https://rook.io/
встало без единой проблемы, пережило несколько ребутов и потерю нод
Sergey
Но он производительностью на запись с мелкими файлами не порадует
Sergey
в зависимости от задачи - я пришел к тому, что Ceph для проброса нескольких динамических томов нерационально использовать, на NFS остановился
Ivas
вот про рук читал, а есть у кого практический опыт использования
Sergey
но я бы все равно поглядел на https://rook.io/
встало без единой проблемы, пережило несколько ребутов и потерю нод
Это без проблем пока вам скраб мозг не сделает
bebebe
вот про рук читал, а есть у кого практический опыт использования
да, я выше писал, поищете в этом чате упоминание rook
Andor
а можно повторить вкратце?
bebebe
а можно повторить вкратце?
в лично моем юз-кейзе домашнего k8s кластера оно подошло хорошо, а главное разворачивается из helm чарта без единого лишнего движения, падают на каждую нуду, заводить osd/mon поды которые пирит между собой само и в результате получается кластер.
Переживает отключение и потерю нод и восстанавливается когда ноды приезжают обратно.
в ближайшем будущем меня ждет такая операция: из k8s кластера я уберу одну ноду и заменю другой
это видимо будет первый "стресс" тест для ceph внутри k8s
Stanislav
Лично я собрал образ nginx со статикой, когда задумался как сделать)
Если интересно я нашел способ. Если у тебя не много статики я копирую её в SharedDir:
volumes:
- name: nginx-config
configMap:
name: nginx
- name: static
emptyDir: {}
volumeMounts:
- name: static
mountPath: /mnt
lifecycle:
postStart:
exec:
command: ["/bin/cp", "-rf", "/cunt/static", "/mnt/static"]
Энто работает и нет необходимости собирать nginx со статикой отдельно
Andrei
Ребят, а где helm’у кол-во ревизий можно проставить?
Anonymous
helm init —help
Andrei
Такое уже не прокатит, только при первой инициализации?
helm init --upgrade --force-upgrade --history-max 7
Anonymous
Вроде можно TILLER_HISTORY_MAX поправить в окружении пода тиллера
Andrei
Да, спасибо! Поменял, но не помогло, не чистит(
Andrey
Если интересно я нашел способ. Если у тебя не много статики я копирую её в SharedDir:
volumes:
- name: nginx-config
configMap:
name: nginx
- name: static
emptyDir: {}
volumeMounts:
- name: static
mountPath: /mnt
lifecycle:
postStart:
exec:
command: ["/bin/cp", "-rf", "/cunt/static", "/mnt/static"]
Энто работает и нет необходимости собирать nginx со статикой отдельно
спс, я в эту сторону смотрел, но чот тогда до ума не довел. Это конечно тож напрашивалось. Статики немного, ага. Руки дойдут, доделаю
Andrei
Мда, а он подхватит свои старые деплои?
Leonid
Всем привет,
скажите куда копнуть.
не запускается 2 nginx-ingress-controller (DaemonSet) одновеременно.
Поды первого запустились, а у второго DESIRED = 0.
hostNetwork не используется, ресурсы есть, в евентах чисто, в логах шедулера все ок.
Leonid
Anonymous
ингресс контроллер без хостНетворк?
Anonymous
как сервис чтоле?
Anonymous
а как извне в контроллер заходить?
Leonid
а как извне в контроллер заходить?
keepalived в daemonSet с hostNetwork
https://github.com/kubernetes/contrib/tree/master/keepalived-vip
Rustam.T
Всем привет. Народ подскажите есть ли возможность удалить #label с пода скриптом из контейнера ?
Denis
Народ, кто нибуть юзал маилрушное облако для k8s?
Denis
Вообщем тут проводили поиск облачных провайдеров для нашего облака. И маилрушное облако оказалось самым дешевым и навороченным по фишкам из всех, кого смотрели
Anonymous
А какие фишки привлекли?
Denis
Так что брехня это все, кто говорит что не обоснованно дорогие цены.
Denis
А какие фишки привлекли?
Насколько понимаю есть все фишки OpenStack. Образы ОС, распределенные сети, балансеры нагрузки, плавающие айпишники, бесплатный гигабитный канал, возможно быстро маштабировать свою инфраструктуру. Тарификация гибкая
Denis
Еще k8s умеет работать со стораджами cinder. Можно вольюмы нарезать и отдавать в k8s. Очень удобно. Ну и свой s3 есть, относительно не дорогой
Dmytro
вроде бы мейлру был дороже ДО и vscale
Denis
vscale имеет ограниченное кол-во инстансов. да и создан вроде для других целей, если не ошибаюсь. Там быстренько развернуть и протестить удобно.
Denis
Я кстатт сразу скажу что Селектел, оказался нам в 1.5 раза дороже, чем мэйл
Dmitrii
На DO 2vCPU/4GB стоит $20, на мейлру $42 + на DO диск 80gb вместо 40gb у мейлрушечки.
Denis
Не буду показывать пальцем, но один довольно известный облачный интегратор прислал мне коммерческое предложение, где стоимость гигабитного канала была 100.000)
Denis
Из РФ естественно
Denis
В среднем за канал просят 50 кусков
Anonymous
Dmitrii
Оба виртуалки, откуда такое железо.
Anonymous
чёто пиздец дорого для виртуалок
Anonymous
извиняюсь за экспрессию
Dmytro
русский бизнес
Anonymous
а, понятно, к чему этот закон =) Заставить юзать простаивающие мощности втридорога
Denis
а, понятно, к чему этот закон =) Заставить юзать простаивающие мощности втридорога
Точняк. Мы бы уже давно в Ажуре были, за более меньшие деньги
Dmytro
скоро яндекс подтянется
Anonymous
и reg.ru
Anonymous
они ещё тем летом собирались