Egor
что поможет мне развернуть куб 3/3 за 15-20 мин
Sergey
что поможет мне развернуть куб 3/3 за 15-20 мин
https://github.com/kelseyhightower/kubernetes-the-hard-way
Andrey
@const_bon @oZZyTOP ребята, там вроде по правилам пунктуации утверждение а не вопрос :)
Konstantin
😂 и правда)
Sergey
он ощущается как вопрос
Andrey
ну да, чат не читай, сразу отвечай :)
Konstantin
https://github.com/kelseyhightower/kubernetes-the-hard-way
За 15-20 мин, если всё делать оочень быстро. Даже kubespray займёт часика пол.
Sergey
За 15-20 мин, если всё делать оочень быстро. Даже kubespray займёт часика пол.
ну так автомат за 20 секунд тоже не с первой попытки разберают
Andrey
сборка разборка кластера на скорость
G72K
тоже обнаружил несколько нод с такой ошибкой
Странно, что не на всех. Судя по коментам багу runc только-только закрыли
George
за 20 минут уложишься
George
главное, чтобы были готовые ноды с доцкером и разложенными файлами ключей ссш
რად
За 15-20 мин, если всё делать оочень быстро. Даже kubespray займёт часика пол.
Потому что сраный kubeadm это не хард вей. Вот пилить все под системд, и через openssl генерить серты это хард вэй.
რად
В общем если стоит задача понять как кластер работает изнутри, то келси хайтауэровский гайд не оч
Anonymous
Сталкивался ли кто с тем, что кубер неверно считает оставшуюся память на хосте? kubectls top и напрямую метрики памяти хоста отличаются почти в 2 раза.
Anonymous
кластер в gke
George
пока разговор ни о чем. Допускаю, что ты смотришь не ту память попросту
Anonymous
а ты дай метрики сюда
NAME CPU(cores) CPU% MEMORY(bytes) MEMORY% gke-node1 149m 15% 2386Mi 90% gke-node2 163m 17% 2575Mi 97% gke-node3 149m 15% 2370Mi 89% n1 total used free shared buff/cache available Mem: 3698 1379 153 506 2165 1567 n2 total used free shared buff/cache available Mem: 3698 1537 126 736 2034 1188 n3 total used free shared buff/cache available Mem: 3698 985 189 895 2523 1580
George
второе - это выхлоп free -m? первое, кк я понял - это из свойств самого кубелета?
Egor
зашел на esx время пошло
Egor
на текущий момент укладываюсь в 25 мин, из за того что приходиться на машинах руками менять ip? а потом вязать куб
George
т.е. правильно ли я понимаю, что вопрос в том, почему 2370Mi, а не 3698 ?
Anonymous
Конечно там кублет под себя что-то резервирует.
George
В общем да.
первый выхлоп какой командой поулчил?
Egor
Anonymous
Но то что у меня памяти половина свободно, а куб пишет что ее нет совсем эт странно
G72K
зашел на esx время пошло
А к чему такая спешка?
George
kubectl top node
он все правильно пишет
George
у тебя память в выхлопе kubectl top примерно равна buff/cache + free
Egor
А к чему такая спешка?
у нас вся производительность мериться в микросекундах, и выхода 1й ноды встает в хорошые задержки, чем быстрее тем меньшее время будут задержки
Egor
потребность специфическая, но всеже =)
Anton
Привет. Пара вопрос кто использует Harbor: 1) Если подписывает образы с использованием Notary(который встроенный), а подписанный образ не дает удалить удалить, пока не будет удалена подпись тега в Notary, будет ли работать Tag Retention, где хотелось бы держать у себя 10 последних образов, а другие удалять?? Может костылики настройки есть? 2) есть закрытая сеть с докером, харбором+notary и есть такая же закрытая сеть с харбором+notary и докером. Между харборами репликация. В первой сети образы подписываются и складываются в харбор, их подпись падает в нотари. Но вот после репликации образов во вторую сеть образа, его же подпись не реплицируется же во второй нотари?? А доступа у докера из сети 2 в нотари сети 1 быть не может. Есть выход как меду нотари еще подписи передавать??
Roman
Никто не сталкивался, что если хельму указать несуществующий тег докер образа при upgrage, он ни на что не ругается
Rustam
Это не его задача, он просто создаёт сущности
Artem
всем привет) есть вопрос по поводу обновления кафки - не подскажите в какой чат обратится?
Nurlan
Как сократить память контейнера? Один докер контейнер у меня жрет 800Мб памяти, а у нас таких контейнеров будет сотни. RAM сервера 64Гб. Поставил лимит на уровне кубер деплоймента, под перестал стартовать. Как управлять лимитом памяти докер контейнера внутри которого запускается томкат 9, java 8? Сколько весят ваши контейнеры?
G72K
у нас вся производительность мериться в микросекундах, и выхода 1й ноды встает в хорошые задержки, чем быстрее тем меньшее время будут задержки
Хм, вы спрашивали про время подъёма кластера, когда вопрос про ноду. Я б мерил и оптимизировал следующее: - время срабатывания ватчдогов на вымирание ноды - время срабатывания fencing - время подъёма новой ноды и вступления в кластер - время старта подов на новой ноде
G72K
потребность специфическая, но всеже =)
Ну а вообще религия этого десятилетия в том,что б не париться иза вылетов скажем 1/3 всех нод. Мне кажется это пройдет, но сейчас так
Alexander
Но имей в виду что полный размер памяти JVM будет больше mx. Там кроме кучи еще есть области памяти
Artem
@proKafka ?
большое спасибо 🙂
G72K
Но имей в виду что полный размер памяти JVM будет больше mx. Там кроме кучи еще есть области памяти
Это вообще боль. MALLOC_ARENA_MAX=1 будет мне ещё долго сниться в кошмарах
Alexander
Как раз стоит в очереди доклад https://vimeo.com/364039638
Vadim
Это вообще боль. MALLOC_ARENA_MAX=1 будет мне ещё долго сниться в кошмарах
проблема что их слишком много было и память расходовалась? или в 1 арене и конкуренции?
G72K
проблема что их слишком много было и память расходовалась? или в 1 арене и конкуренции?
В том что дефолт по количеству ядер :) Ява стартовала и жрала как не в себя , разработчики по jmx снимали метрики и такие "вот видишь, наша память в порядке, это докер виноват". А я снимаю /proc/$pid/smaps и говорю "ваш процесс жрет вот столько, ищите у себя где , как и почему" . Вообщем перекидывали проблему друг другу, как горячую картошку, потом надел девопс шляпу, говорю давайте разбираться ну и докопались до libc аллокатора :) решение - поставить этот MALLOC_ARENA_MAX в 1, но крови попило оно много
Vadim
но еще нигде не пробовали уменьшать
Vadim
MALLOC_ARENA_MAX=1 не слишком мало?
Vadim
хотя б поменьше но парочку 2-4 оставлять может
Vadim
https://github.com/prestodb/presto/issues/8993
Igor
Утро доброе. Я не настоящий девопс и пока только учусь. Вопрос: я собрал кластер при помощи kops на aws, пока мы ещё туда ничего не запихнули вообще, там крутятся три мастера и ни одного слейва. Я могу по ссш зайти на мастера, могу сделать kops edit и так далее, но kubectl говорит, что не может достучаться до сервера
Igor
Это пушо нет ни одного слейва или пушо я где-то натупил?
Yaroslav
нужно настроить kubeconfig и aws auth
Yaroslav
нужно настроить kubeconfig и aws auth
для запуска с локалхоста
Igor
нужно настроить kubeconfig и aws auth
Это настроено. Ну по крайней мере есть соответствующие записи в конфиге
Yaroslav
что пишет kubectl ?
Igor
Unable to connect to server: EOF
Igor
Так. А что в итоге должно быть поднято на серверах? Я щас быстро почекал, что в консоли амазона - в лоад балансере все три мастера out of service
Igor
На серверах крутится только protokube докер образ
Igorь
Всем привет! А как через kubectl посмотреть, кто открыл nodeport?
Sergey
kubectl get services
Yaroslav