George

все начинает бешено тормозить и глючить и в последний момент пролюбливаются все данные клиентов

George

стартап закрывается, занавес

Alex

т.к. нужно делать шифрование-туннель между нодами или бешАный оверлей типа weave

всегда так делаю 😂

Денис

я ни разу не ставил, просто пробую )

George

чтобы попробовать надо взять 300 кредитов в гуглоклауде и попробовать

Денис

вроде поднял, запилил traefik, а вот с ИП адресами беда какая-то

George

кредитов - в смысле по сути ТРИАЛ бесплатный для тебя

George

ну, фишка в том, что у тебя LB нет

Andrey

это будет опыт в облаках, а не опыт с bm

George

и не будет

George

MetalLB ставил?

Alexander

чтоб попробовать достаточно virtualbox

Andrey

metallb в хецнер клауд бесполезен

Alex

ну, фишка в том, что у тебя LB нет

в принципе LB не особо и нужен

George

это будет опыт в облаках, а не опыт с bm

никто не мешает взять виртуалбокс, или компьют энджины, а не менеджед куб

Alex

как мне кажется

George

нужен

George

вы еще поспорьте

George

смотри

George

у тебя есть приложуха в кубере

George

кубер на 5 нодах с адресами A.A.A.A, B.B.B.B .... E.E.E.E.

George

как пропишешь ДНСы?

Andrey

т.к. нужно делать шифрование-туннель между нодами или бешАный оверлей типа weave

шифровать шифрованные соединения?) я про компоненты k8s

Alex

поставлю HA-Proxy на внешнем серваке

George

поставлю HA-Proxy на внешнем серваке

смищной. А зачем? если куб умеет все сам?

George

добавль только вип и лоад балансер

Alex

вот, всё равно же нужен балансер

George

шифровать шифрованные соединения?) я про компоненты k8s

а я не про компоненты

George

ну просто с HA Proxy ты интегрировать куб нативно не сможешь. Т.е. это БУДЕТ работать

Денис

ясно, понятно )

George

но среда... кхм... гетерогенная получается

George

а ты почти наверняка хочешь, чтобы не было доп. узлов )

Vadim

нормально хапрокси интегрируется в куб, даже ингресс контроллер на нем есть

Alex

ну просто с HA Proxy ты интегрировать куб нативно не сможешь. Т.е. это БУДЕТ работать

а с metallb - у меня же всё равно надо будет DNS завязывать на конкретный ip?

Denis

ну просто с HA Proxy ты интегрировать куб нативно не сможешь. Т.е. это БУДЕТ работать

Это почему?

George

нормально хапрокси интегрируется в куб, даже ингресс контроллер на нем есть

это другая история

George

влез, даже не читая текст

George

а с metallb - у меня же всё равно надо будет DNS завязывать на конкретный ip?

ясен красен

George

Это почему?

потому что мы не про ингресс

Alex

а с metallb - у меня же всё равно надо будет DNS завязывать на конкретный ip?

и если я не могу нормально прокидывать IP с сервера на сервер – то всё-равно нужно будет ковыряться руками?

Denis

Вроде прочитал

Denis

кубер на 5 нодах с адресами A.A.A.A, B.B.B.B .... E.E.E.E.

Denis

как пропишешь ДНСы?

Denis

поставлю HA-Proxy на внешнем серваке

George

и если я не могу нормально прокидывать IP с сервера на сервер – то всё-равно нужно будет ковыряться руками?

ну, можешь сделать внешний балансировщик, как ты и предлагал

Vadim

у нас poor man's LB делается на отдельном хапрокси, нормально он интегрируется

George

но это действительно "poor man's LB"

Alex

ну, можешь сделать внешний балансировщик, как ты и предлагал

ну вот поэтому я и говорю, что на hetzner bare-metal нет смысла особого в metallb, как мне кажется

George

ну вот поэтому я и говорю, что на hetzner bare-metal нет смысла особого в metallb, как мне кажется

проблема в хетцнере, кмк, а не в metallb

Alex

проблема в хетцнере, кмк, а не в metallb

согласен, но зато нищебродски

George

повторюсь, для лабы можно брать не БМ, а те же VM/Compute Engine etc. и экспериментировать на них. Разницы нет

Andrey

ну вот поэтому я и говорю, что на hetzner bare-metal нет смысла особого в metallb, как мне кажется

да он не будет там работать, если нет виртуального коммутатора с выделенной сеткой на этот коммутатор

George

если совсем нет денег, то виртуалбокс на локальной машине

George

на тачку с 16ГиБ ОЗУ, в принципе, три мастера можно упихать

Andrey

2 ядра (можно даже виртуальных) 2 гига = мастер

Alex

да он не будет там работать, если нет виртуального коммутатора с выделенной сеткой на этот коммутатор

с этим немного игрался (у них есть такая возможность) – но как-то не очень всё хорошо работало с перекидыванием ip (для этого у них вообще нормальных способов нет, но есть скрипт, который стучится по ip и меняет).

Alex

2 ядра (можно даже виртуальных) 2 гига = мастер

еще про IO надо не забывать

Andrey

это другое. это floating ip у них. с ним схема немного иная будет на BM

Денис

2 ядра (можно даже виртуальных) 2 гига = мастер

можно и на локалке, но тут мои 5 нод в разных ДЦ за 8 часов сожрали 3 евроцентра

Andrey

берешь floating ip, haproxy + notify script для переключения по api этого ip между нодами. на этот ip завязываешь kubelet, который будет стучаться в хапрокси и балансировать запросы между мастерами, на второй такой же завязываешь haproxy который балансирует между ingress controller. как то так

Денис

похоже можно их дропать )

Andrey

бич-вариант, рабочий 🙂

Alex

берешь floating ip, haproxy + notify script для переключения по api этого ip между нодами. на этот ip завязываешь kubelet, который будет стучаться в хапрокси и балансировать запросы между мастерами, на второй такой же завязываешь haproxy который балансирует между ingress controller. как то так

я через keepalived пытался заюзать его – в итоге раз в пару падений ip не переключался и всё падало =/

Andrey

да, keepalived тоже нужно уметь готовить

Alex

это другое. это floating ip у них. с ним схема немного иная будет на BM

а так я вообще имел в виду vSwitches