+

Хорошо, давайте я просто опишу как это вижу я, возможно я просто где то в чем то не до конца разобрался.

Смотрите, вот у меня есть 3 сервера, я хочу там кубер. Один из серверов будет мастером, два других - нодами. При этом мастер по железу ничем не отличается от нод. Есть подозрение что он такой не нужен если на нем не запускать контейнеры. Т.е. мастер надо вешать на какую нить ВПСку например. При этом - ансибл - вообще должен управляться с отдельного места. Т.е. со второй ВПСки. Я правильно всё понимаю? Или нет?

ансибл управляет откуда угодно. лишь бы доступ к серверам был. вообще не понял к чему ансибл до первой части про мастер и воркеры

ансибл управляет откуда угодно. лишь бы доступ к серверам был. вообще не понял к чему ансибл до первой части про мастер и воркеры

Потому что мне тут советовали смотреть на разворачивание кластера через kubespray, а там ансибл

ну это для того, чтобы быстрее куб развернуть

для лабы - откуда угодно

хоть со своей рабочей станции

не для лабы

ну с такими вопросами не надо куб в продуктив

лучше начать с лабы

и без спрея а ручками

прочувствовать все лишения и тяготы

прочувствовать все лишения и тяготы

уже, не запускается. а на вопрос что с этим делать как раз и советовали пробовать спрей)

и ошибка тоже непонятная, всмысле не понятно что не так, просто контейнеры с dns не стартуют.

и ошибка тоже непонятная, всмысле не понятно что не так, просто контейнеры с dns не стартуют.

Анатолий, у вас винда, питон установлен, какой версии?

Анатолий, у вас винда, питон установлен, какой версии?

на серверах у меня линукс, и я могу подключаться если надо оттуда, просто здесь именно момент что не понятно как правильно. пусть там не настолкьо все критично если упадет, но со временем я надеюсь развернуть там и продакшн, а значит лучше сразу хотя бы понять что да как

на серверах у меня линукс, и я могу подключаться если надо оттуда, просто здесь именно момент что не понятно как правильно. пусть там не настолкьо все критично если упадет, но со временем я надеюсь развернуть там и продакшн, а значит лучше сразу хотя бы понять что да как

правильно - хранить конфигурацию кластера в гит репозитории

еще более прваильно при начальном сетапе понимать - как дальше буде апгрейдится

а ключи? а если этот репозиторий развернут внутри кластера?

и самое правильное - завернуть это в CI/CD - можно в дженкинс

это правильно

да, но этот самый дженкинс тоже внутри кластера разворачивают, так?

а ключи? а если этот репозиторий развернут внутри кластера?

это абстрактный вопрос - пробуйте

да, но этот самый дженкинс тоже внутри кластера разворачивают, так?

у вас винда локально?

это абстрактный вопрос - пробуйте

это вообще не абстрактный вопрос, ключи - это доступ к серверам, причем полный. они не могут быть "абстрактными"

у вас винда локально?

у вас винда локально?

да

ок

питон стоит?

питон стоит?

bash on ubuntu стоит, там по умолчанию питона нет, но проблемы поставить тоже нет

ну ставьте

версия не важна?

я не настоящий пожарник и ансибл не юзаю, но под второй веткой питона ансибл точно работает

Привет! Ребята, насколько хорошо/плохо использовать traefik в проде? Те кто этим занимались, поделитесь, пожалуйста, впечатлениями

Nginx как то сердцу ближе....

А это какой то новый зверь....не понятный.

Ну относительно nginx у него явно функционал скуднее

Привет! Ребята, насколько хорошо/плохо использовать traefik в проде? Те кто этим занимались, поделитесь, пожалуйста, впечатлениями

я использую как раз трафик. Вполне неплох, но вам надо понимать, что это предельно примитивный балансировщик нагрузки, умеет он минимум. Того же rewrite там по сути нет

использовали сначала траефик, потом переползли на нжинкс. В основном из-за удобства и фич. Через аннотации можно задать кучу всего. Плюс активно поддерживается вендором ( https://github.com/kubernetes/ingress-nginx )

коллеги, вот кстати в каком формате логи с ингрес контролера отправляете? json или по дефолту?

и без спрея а ручками

coreos + matchbox + bootkube. Все это завернул в простенький ansible для поднятия headnode с matchbox. Кластер получается намного удобнее, проще и под полным контролем. Так что не сказал бы, что это тяготы. Но я еще не закончил, может быть наступлю во что-нибудь и поменяю мнение :)

Всем привет! Народ, поделитесь опытом, как и на чём вы поднимаете ETCD для кубера? Кто нибудь хостит етцд в самом кубере?

Всем привет! Народ, поделитесь опытом, как и на чём вы поднимаете ETCD для кубера? Кто нибудь хостит етцд в самом кубере?

это достаточно распостраненный вариант. Особенно для небольших кластеров.

это достаточно распостраненный вариант. Особенно для небольших кластеров.

какой вариант? етцд в кубере? а какой бест-практис по запуску? Меня очень интересует момент миграции с стартового етцд в тот, который в кубере (и переключение на него траффика)

etcd в кубере

так, небольшой отчетик вчера попробовали loghouse - оно даже работает. только есть много вопросов к helm чарту

k8s установился на 3 bm машины запровиженные maas'ом

через kubespray

В кластере есть две машины с публичными IP. Хочу чтобы ингресс-контроллер биндился на порты только на них. Как сделать правильно?

labels -> selector?

а такое порно как maas in k8s кто-нибудь хотел/видел/делал?

а такое порно как maas in k8s кто-нибудь хотел/видел/делал?

Пробовал, делал, работает ...

а артефакты остались?

Пробовал, делал, работает ...

^^^^

helm чарты/подводные камни/etc?

Надо глянуть ... у меня в лабе было ... завтра погляжу ... сча на мобиле

кто недавно ставил heketi?

или вообще glusterfs на кубер?

Народ, что посоветуете по сетке при 5к+ сервисов? Сейчас стоит канал, из-за iptables загруженного сервис в нат добавляется по 30 минут. В данный момент видел что kube-proxy в альфе поддерживает ipvs вместо iptables, собираюсь тестить. Есть у кого похожий опыт и как вы решали проблему ?

Надо глянуть ... у меня в лабе было ... завтра погляжу ... сча на мобиле

Напоминаю

или вообще glusterfs на кубер?

Активно юзаю гластер в кубе

Активно юзаю гластер в кубе

А давно ставил? И как?

Только я не юзаю хекети, просто гластер. На 3 серверах гластер развернул, и помойму на годах просто гластер клиента, и добавил ендпоинт и сервис в куб

или вообще glusterfs на кубер?

сторадж можно как внутри кластера так и снаружи (пробовали и так и так), но снаружи надежнее, на том и порешили. Правда, судя по истории этого чата и чата ceph, лучше не использовать glusterfs.

сторадж можно как внутри кластера так и снаружи (пробовали и так и так), но снаружи надежнее, на том и порешили. Правда, судя по истории этого чата и чата ceph, лучше не использовать glusterfs.

а что лучше?

поиском можно найти много душещипательных историй. Вроде как ceph. Но лично я его не юзал.

дай ссыль на чат с ceph

в гугле 3я ссылка. (telegram ceph)

дай ссыль на чат с ceph

https://t.me/ceph_ru

Интересно когда люди разучились читать, и научились писать..наверно это было самое страшное

сторадж можно как внутри кластера так и снаружи (пробовали и так и так), но снаружи надежнее, на том и порешили. Правда, судя по истории этого чата и чата ceph, лучше не использовать glusterfs.

2 года глист и полет норм

сколько нод в кластере? эндпоинты из кубера не отваливались случаем?

у нас он не в кубере, а так 2 дц, где-то по 10 нод было в каждом

сумарный объем рав места петабайт

сейчас не скажу что и как, год как та мне работаю

сколько нод в кластере? эндпоинты из кубера не отваливались случаем?

Постоянно отваливаются. Неделю уже пытаюсь понять, в чём дело. Причём, отваливаются после рестарта кубелета, который не понятно, почему, рестартует при деплое из CI...

кто пробрасывал клиентский айпишник в GKE через nginx ingress, там какую мульку для этого надо дернуть?

а, вроде нашел

кто пробрасывал клиентский айпишник в GKE через nginx ingress, там какую мульку для этого надо дернуть?

externalTrafficPolicy: Local