Anonymous
Может, я что-то не понимаю. Но логика использования кластера предполагает задачи для которых требуется отказоустойчивость и масштабируемость. Что определяется, в первую очередь, архитектурой инфраструктуры. Если инфраструктура не гарантирует доступность своих компонентов в любой нужный момент времени, то зачем, вообще, использовать именно кластер K8s. Вообще, Kubernetes, это не "серебряная пуля". Сейчас использование K8s на волне хайпа стало неким трендом. Но в большинстве случаев он совсем не нужен. Тем более при использовании того же AWS. Достаточно использовать автоскейлинг с ECS. И правильно организованные архитектуру и CI/CD
Марат
С первого дня эти проекты на спотах )
если в таких же количествах и конфигах ondemand было бы, просто посчитать если)
Марат
путь для примера это один из кластерков, самый маленький
Yury
если в таких же количествах и конфигах ondemand было бы, просто посчитать если)
обычно как я туда захожу цена стабильно на 50% от ондеманда.
Марат
ну норм)
Марат
Вот об этом я и говорю! ECS, а не EKS
а какая существенная разница, "виртуалковая" архитектура разве не требует от инфры отказоустойчивость и масштабируемость?
Марат
если там тот же автоскейлинг ECS
Anonymous
Марат, конечно требует. Но у кластера несколько иные задачи. Очень сильно отличающиеся от простого использования отдельных инстансов. И управление кластером K8s несколько усложняется, когда у вас нет гарантированно предоставленных worker nodes. Кластер не предполагает такой ситуации, по крайней мере без костылей и ручного управления, что ему не на чем запускать поды какого-либо деплоймента.
Марат
и вот это еще спорно "Потому спотовые инстансы имеет смысл использовать под какие-то асинхронные задачи, которые можно отложить." у меня есть кейс, где асинхронные задачи длятся от часов до суток, получается еще одну мысль вам зарубил, извините)
Gleb
А там же версию не обновляют...
так надо с процессами в команде разбираться, а не с кубом
Anonymous
Точно так же как нельзя везде и всюду внедрять Kubernetes. У него есть своё поле задач, где он нужен. И есть множество задач, где ему не место.
Anonymous
Это прекрасно! Рад за вас )))
Anonymous
Коллеги, мы реально не знаем какие именно задачи изначально были у человека, когда руководство отправило его поднимать кластер K8s в AWS на спотовых инстансах, с которым он лично не знаком. Я лишь дал ему какую-то информацию и указал на некоторые ограничения. Не более того ))) Всем доброго дня!
Марат
может надо было спросить?))
Марат
Спасибо
зачем вам кубер?)
Nikolay
Есть чуваки из https://spotinst.com/ Менеджмент спотов за деньги продают. Как-то со сциллой у них статья была.
Ivan
всем привет! я тут обновляю куб. выяснилось что у кублета задепрекейтили кучу опций: https://kubernetes.io/docs/reference/command-line-tools-reference/kubelet/ пишут настраивать их через конфиг. а формат всех опций для конфига я никак не могу найти. Нашёл на эту тему одну куцую страничку с одним параметром: https://kubernetes.io/docs/tasks/administer-cluster/kubelet-config-file/ кто нибудь знает как остальные параметры писать в конфиг-файле? по аналогии с ключами(из первой ссылки) - не работает.
Andrey
Так удобнее, возможно, читать будет. https://godoc.org/k8s.io/kubelet/config/v1beta1#KubeletConfiguration
Виктор
разворачиваю вот этот чарт в миникубе https://github.com/helm/charts/tree/master/stable/mariadb получаю: Back-off restarting failed container
Виктор
в логе пода ошибок нет
Виктор
Виктор
stoping mariadb и все
Alex
stoping mariadb и все
Storage classes provision
Ivan
https://github.com/kubernetes/kubelet/blob/master/config/v1beta1/types.go
да, я это находил, но не понял. вот например у меня был ключ --eviction-hard=memory.available<256Miя не понимаю, как его указать в конфиге
Виктор
Storage classes provision
а можно подробнее?
Andrey
https://github.com/kubernetes/kubelet/blob/master/config/v1beta1/types.go#L544-L554
Victor
Всем привет! Коллеги, помогите, пожалуйста, очень туплю. 10 раз уже по кругу прочитал доку и замучал. Хочу чтобы у меня поды из одного деплоймента размазывались по разным стойкам. Как этого добиться?
Alex
а можно подробнее?
При деплое ищет storage class, а его нет. Нужны с поддержкой провизионинга
Виктор
Claim в статусе Bound или это тут ни причем?
Ivan
evictionHard: memory.available: "<256Mi"
ну в общем не очевидно нифига. ок, спасибо, буду курить эту шнягу 👍
Andrey
ну в общем не очевидно нифига. ок, спасибо, буду курить эту шнягу 👍
Вот тебе прямой маппинг commandline опций на структуру конфига: https://github.com/kubernetes/kubernetes/blob/master/cmd/kubelet/app/options/options.go#L423-L563 Например, KubeAPIQPS отсюда: https://github.com/kubernetes/kubernetes/blob/master/cmd/kubelet/app/options/options.go#L544 Равен конфигу отсюда: https://github.com/kubernetes/kubelet/blob/master/config/v1beta1/types.go#L521-L527
Victor
Вам надо и раскидать и по одной штуке на ноду что б?
ага. но на сколько я понял, failure-domain - только для клаудов работает
Andrey
ага. но на сколько я понял, failure-domain - только для клаудов работает
Можно вручную поставить лейблы на ноды, если у тебя baremetal.
Victor
Можно вручную поставить лейблы на ноды, если у тебя baremetal.
это да. но как написать правило, чтобы внутри одного деплоймента оно размазывало по этим лэйблам - непонятно. Только если кастомный scheduler делать
Victor
daemonset || podAntiAffinity
чорт! оно самое ) спасибо! )
Andrey Zakharov 🐝
всем привет , подскажите плз кто пользовался https://github.com/coreos/kube-prometheus сталкивались ли с тем что прометеус не может собрать метрики с системных нодэксопртеров(которые при дефолтной установке ставятся hostNetwork: true) ?
Daniil
Привет! подскажите значния metadata.name для Storage classes в доке https://kubernetes.io/docs/concepts/storage/storage-classes/#provisioner даны просто для сравнеия, то есть slow медленно работающее решение? gold - круто туда можно что угодно вписать?
Daniil
а доке оно просто отражет скорость работы решения по мнению составителя документации?
Daniil
похоже на правду...
D
зачем вам кубер?)
мне вообще ничего не нужно))) просто работа есть работа) нужен людям кубер - я изучаю и использую) тем более, я не компенентен пока что в вопросах кубера чтобы думать хорош он или плох))
Lucky SB
а доке оно просто отражет скорость работы решения по мнению составителя документации?
почитал — это смешно. там такой стеб надо амазоном... диски типа io1 - это slow сторадж класс )
Just a baka
Lucky SB
эм. берем самый быстрый диск и ограничиваем иопсы. а народ бездумно копирует из доки. а потом плюется и говорит, что в амазоне куб дорого и медленно. профит
Just a baka
эм. берем самый быстрый диск и ограничиваем иопсы. а народ бездумно копирует из доки. а потом плюется и говорит, что в амазоне куб дорого и медленно. профит
Ну, это надо быть совсем ССЗБ, чтобы не прочесть про полторы опции и копирнуть как есть. Плюс к тому, в EKS уже есть sc типа gp2 по дефолту, можно не копипастить. Главное, размерчик сильно мелкий не указывать, и оно даже будет как-то ехать 🤔
Alexander
почитал — это смешно. там такой стеб надо амазоном... диски типа io1 - это slow сторадж класс )
Совсем наоборот IO1 это цитирую "Highest-performance SSD volume for mission-critical low-latency or high-throughput workloads"
Alexander
что именно наоборот ?
Не slow сторадж класс.
Lucky SB
Не slow сторадж класс.
я не понимаю твой ограниченный набор слов.
Just a baka
Не slow сторадж класс.
https://kubernetes.io/docs/concepts/storage/storage-classes/#aws-ebs прописываем читать сниппет до полного просветления
Alexander
я не понимаю твой ограниченный набор слов.
Ну я добавил НЕ к цитате тебя )
Lucky SB
находим шутки за 200 в доке куба )
Старый
Alexander
вся дока шутки за 200
У Куба хорошие доки.
Старый
У Куба хорошие доки.
😅найди как заставить фланнель пропустить 10 гбит нормально при vxlan
Alexander
😅найди как заставить фланнель пропустить 10 гбит нормально при vxlan
А причем тут доки Кубера? Это к докам Фланнели вопрос/претензия
Старый
А причем тут доки Кубера? Это к докам Фланнели вопрос/претензия
а потом к докам крио. а потом к докам etcd а потом к докам glusterfs
Старый
и что тогда потом кубер?
Старый
istio тоже отдельно
Lucky SB
а потом к докам крио. а потом к докам etcd а потом к докам glusterfs
тоньше надо, тоньше. сразу к доке на go посылай. а в код куба сегодня уже посылали )
Старый
и кубер всегда не приделах
Alexander
и кубер всегда не приделах
В этом чатике много вопросов, ответы на которые в доке Куба. Люди не знали или лень или привыкли к плохим докам
Zhan
коллеги, посоветуйте хорошей литературы и курсов по куберу, плиз
Марат
привыкли к хорошим ответам, искать лень)
Старый
В этом чатике много вопросов, ответы на которые в доке Куба. Люди не знали или лень или привыкли к плохим докам
у кубера она тоже так себе, знаешь сколько секса нужно с кубером провести, чтобы заставивть кубер нормалаально сеть обрабатывать, и чтобы оом не приходил, если контейнер по 2 гб оперативы в сек набирает