Dmi3y
Собственно, там какие-то интересные гуи. Насколько по вашему вообще пригождаются все дополнительные наслоения поверх Kubernetes, к которым относятся Origin и Tectonic?
Anonymous
deis мне ок, остальное или не привлекло или не пробовал )
Anonymous
а кстати, вот по deis есть какая инфа нормальная? я вот поставил, задеплоил пару приложений - вроде работает
но вот он ставит графану с телеграфом... че-то нигде не нашел как до него достучаться и правильно юзать :)
кто где читает про него?
Anonymous
собрал чарт эластиксерча под кубернетес на стейтфулсетах: ругайте :)
https://github.com/afoninsky/helm-charts/tree/master/elasticsearch
Anonymous
Ну вроде норм
Logan
@ga_rus, по-моему ты интересовался лимитами куба: https://kubernetes.io/docs/admin/cluster-large/
At v1.5.1, Kubernetes supports clusters with up to 1000 nodes. More specifically, we support configurations that meet all of the following criteria:
No more than 2000 nodes
No more than 60000 total pods
No more than 120000 total containers
No more than 100 pods per node
откуда растут эти лимиты – не знаю
Gleb
Не помню чтобы интересовался, но почитаю про это. Спасибо!
Denis
Мы интересовались :) Спасибо, Паш!
Denis
( суббота, вечер, кубернафты не спят :) )
Logan
так самое время же инфраструктуру курочить :)
Anonymous
Это наоборот плюс, и в вроде изначально было не так
да, там более жесткие условия trial были
B7W
@ga_rus, по-моему ты интересовался лимитами куба: https://kubernetes.io/docs/admin/cluster-large/
At v1.5.1, Kubernetes supports clusters with up to 1000 nodes. More specifically, we support configurations that meet all of the following criteria:
No more than 2000 nodes
No more than 60000 total pods
No more than 120000 total containers
No more than 100 pods per node
откуда растут эти лимиты – не знаю
1000 нод держит etcd. Последняя версия на grpc держит 2k. Судя по примерно таким же ограничениям в zookeeper and consule это уже физические ограничения.
Aleksey [MSK+4]
2k rps?
Aleksey [MSK+4]
get/set?
B7W
2к нод
Aleksey [MSK+4]
2k нод может создавать разную нагрузку
Logan
1000 нод держит etcd. Последняя версия на grpc держит 2k. Судя по примерно таким же ограничениям в zookeeper and consule это уже физические ограничения.
а что, разве воркеры имеют прямой доступ к ETCD?
B7W
Что за воркеры?
Logan
kubelet. Он же нода
B7W
Хех, не могу найти подтверждения. Но по логике на каждом worker дожна быть client нода etcd, что бы поддеживать консенсус в кластере.
Logan
Хех, не могу найти подтверждения. Но по логике на каждом worker дожна быть client нода etcd, что бы поддеживать консенсус в кластере.
нет, зачем? воркеры работают через аписервер
Logan
вот апи-серверам нужны etcd
B7W
Что бы когда worker отвалился, кластер узнал об этом. Я могу ошибаться. И в k8s другая архитектура.
Logan
воркер постоянно общается с апи-сервером. По-моему pub-sub, но я не уверен, может просто таймаут. Если воркер перестал присылать i-am-alive пакеты - он отвалился
Logan
все просто
Etki
у тебя все равно любой конфигурационный запрос превращается в запрос к etcd
Etki
Простор для масштабирования там едва ли не бесконечный, если отказаться от единого мастера и обрабатывать каждый ключ своим подкластером. Но такое умеет только кассандра из того, что пробовал.
Sash
Есть кто ресазил PV с рабочими данными? (интерисует gcloud, но можно и нет). Я рейсайзил сам pv-диск в gcloud console и на ноде, но не понятно что делать с конфигурацией PV на кластере, ее можно/нужно как-то поменять, чтобы отображался корректный новый размер?
Ivan
воркер постоянно общается с апи-сервером. По-моему pub-sub, но я не уверен, может просто таймаут. Если воркер перестал присылать i-am-alive пакеты - он отвалился
kubelet по http(s) шлёт status updates. Как только задержка между этими status updates становится слишком долгой (насколько - настраивается), kube-controller-manager делает ноду NotReady и у всех pod'ов на этой ноде Condition Ready становится false, так что сервисы от них отваливаются.
Ivan
т.е. за исключением pub/sub в целом верно
Михаил
А чего у вас информация по митапу не запинена?
Dmitry
И неясно как вход туда? Регаться обязательно ли?
Alex
https://www.meetup.com/Moscow-Kubernetes-Meetup/events/237164023/
Alex
1. Удостовериться, что у вас в профиле указаны имя и фамилия.
2. Просьба взять с собой документ, удостоверяющий личность
Alex
Будет проходить у нас в офисе (Ingram Micro)
Alex
можно будет поесть пиццы и посмотреть в какой обстановке мы работаем
Alex
трансляция будет - на той неделе опробовали :)
Alex
https://www.google.com/maps/search/%D0%9B%D0%B5%D0%BD%D0%B8%D0%BD%D0%B3%D1%80%D0%B0%D0%B4%D1%81%D0%BA%D0%B8%D0%B9+%D0%BF%D1%80%D0%BE%D1%81%D0%BF%D0%B5%D0%BA%D1%82,+15%D1%8118,+Moscow,+ru/data=!4m2!2m1!4b1?hl=en&dg=dbrw&newdg=1
Denis
Друзья, по требования площадки, просьба ко всем, кто идёт:
1. Обновить у себя в профайлах на Meetup.com имя и фамилию, чтобы не было профайлов вида "Иван" или "G D".
2. Взять с собой документ, удостоверяющий личность, чтобы не стрессовать службу безопасности в бизнес-центре. :)
Ребята из Ingram Micro обещают пиццу. Будет ещё пара сюрпризов. Всё должно быть хорошо. До встречи на митапе!
Denis
И неясно как вход туда? Регаться обязательно ли?
Регистрироваться по ссылке:
+ https://www.meetup.com/Moscow-Kubernetes-Meetup/events/237164023/
Обязательно указать свои имя и фамилию
Denis
Можно :) Приходи в среду!
Roman
а что вы используете для сеточки в кубернетес?
Roman
calico?
Logan
вив (weave-networks)
Sn00part
weave это про докер
Sn00part
калико или фланель
Sn00part
flannel простая как три рубля, калико посложнее и умеет BGP
Sergei
а есть чо, что работает поверх v6?
Sn00part
Ipv6?
Sergei
yep
Sn00part
фланель раньше не умело (полгода) , сейчас могли научить уже
Sn00part
калико умеет все
Sn00part
http://docs.projectcalico.org/v1.6/usage/ipv6
Sn00part
weave это оверлей докера.
Sergei
фланель раньше не умело (полгода) , сейчас могли научить уже
тикет во фланнеле открыт. впрочем там не выглядит каким-то непостижимым написание патча, который добавит поддержку, если ядро уже умеет.
Sn00part
ну юскейс такой, нераспррстраненный
Sn00part
серые сети у большинства все же ipv4
Sn00part
flannel многим не подходит
Sn00part
там тупо vxlan и тунели
Sergei
я понимаю. это-то и печально, у v6 есть восхитительные преимущества (сеть на порт), с которыми оверлейные сети становятся нафиг не нужны.
Sn00part
это надо все переделывать с основ)
Sergei
а калико - не серебряная пуля, если у вас уже L3-фабрика, которая при этом не хочет с вами по iBGP пириться.
Sergei
поэтому в калико (sic!) впиливают ipip.
Sergei
это надо все переделывать с основ)
если у меня уже все переделано с основ, то натягивание совы с ipv4 на чудесный ipv6-глобус - то еще извращение :)
Sn00part
тут дело то в том, что если даже и вышла, то альтернатив нет. и дофигища всего все ещё в альфе все равно
Sergei
тут дело то в том, что если даже и вышла, то альтернатив нет. и дофигища всего все ещё в альфе все равно
если без оверлеев - то фактически нет
Sn00part
мне кажется это надо идти м писать посонам в кореос
Sergei
что именно?
Sn00part
что пора убирать оверлей и все написать нативно под ipv6
Sn00part
последние разы когда такой разговор был, сошлись на том, что идея ок
Sn00part
но пока таких пользователей мало
Sn00part
у кого ipv6
yolkov
https://github.com/cilium/cilium
Sn00part
там голову поломать
Sn00part
6to4
Sn00part
6in4
Sn00part
туда сюда крутить этот трафик