Alexey
надеюсь, что про хост вольюмы ты в курсе
а можно тут больше подробностей? цеф тут хочу прокидывать через ceph-csi. в тесте всё работает, а как будет на проде пока хз.
inqfen
Вышел язык одного фреймворка
JyBvciAxID0gMSAtLQo=
Переименуйте в Kubernetes -диванные аналитики
Роман
Друзья, всем привет. Может кто подсказать куда копать ? Начала недеавно изучать кубернетес. Сделал свое приложение на ангуляре. Написал деплоймент на основе контейнера, в который просто вссе исходники подклаадываюся (знаю, что так не нужно делать, но вопрос в другом). В контейнере запускается ангуляр на localhost:4200. В логах пода эта инфа есть. Потом экспозом делаю сервис, который мапит на нужные порты. Как положено делать в кубе так, чтобы заставить под отдавать ресурсы ? index.html (и другое)? Прикладываю описание пода и сервиса. Нджинкс не использую, но и не хочется. Если он нужен будет то добавлю. Всем заранее спасибо
Роман
George
и что мы тут должны увидеть?
George
пока могу предложить начать с конфигурации - nginx и node.js в одном поде. вольюм общий - там исходники. По идее будет работать
Sn00part
да, без nginx или ченить подобного будет сложновато
Андрей А
будет достаточно чего-то одного
Андрей А
а так как конфиг для nginx уже есть в офф. документации, то проще заюзать именно его
Андрей А
для express нужно будет немного допилить, но тоже можно
Sn00part
у кого кубер 1.16, там пофиксили или нет удаление ресурсов, которые остаются висеть в terminating state из-за финалайзера?
Tuntsov
У меня в 1.15 такое было, но из-за ядра, вроде как
Sn00part
из-за ядра?
Sn00part
это баг в кубере )
Daniil
Добрый вечер! решая вопрос развертывания кластера k8s (1.16) с doker (19.03) на серверах под управлением Debian stretch Из коробки дистрибутив идет с ядром 4.9.0-8-amd64 знаю что некоторые баги работы docker'a правится только в новых версия ядра Вопрос какое ядро выбрать рассчитывая на максимальную стабильность и совместимость (минимальное количество багов которые могу выстрелить при максимальной совместимости с docker/k8s)? По возможности LTS что бы как можно дольше поддерживалось После успешного тестирования проверенная конфигурация уйдет в большой прод, поэтому хочется услышать советы по конфигурации от тех кто имеет опыт k8s/docker в большом проде на своем железе и уже прошлись многим граблям
George
здесь не подгадаешь с ядром
Daniil
а опыт?
Sn00part
19 не рекомендуется. он с багами. плюс они не тестили сами The list of validated docker versions remains unchanged. The current list is 1.13.1, 17.03, 17.06, 17.09, 18.06, 18.09. (#72823, #72831)
Daniil
этот путь явно уже мнге прошли
Daniil
у кого то прод уже едет на чем то на свое железе
Daniil
уже с чем то сталкивались
George
дебиан плохо
Sn00part
Дебиан я бы тоже не стал брать, там могут быть регрессии как раз про докер. Центос
George
внезапно, но кажется, что или центос, или убунту
Sn00part
чот мы в унисон! )
George
если ты смелый-ловкий и умелый, то атомик-кореос
George
коллега с дебиан говна поел. Порекомендовал на убунту лтс - like a charm
Sn00part
убунта тоже так себе, на самом деле
George
судя по всему дело в популярности связки
Sn00part
они пару раз так ломали докер жостка, обновлением лтс ядра на лтс ядро ))
George
а всякие ранчеры вообще по умолчанию не дадут поставить несовместимый комплект, но там может забомбить, если есть особые требования. К модулям ядра, например
Petr
Кстати, если центос, то какое ядро: 3.10 или из елрепо?
Sn00part
пролюбили какойто патч для aufs
George
ауфс уже никто не юзает
Sn00part
ну щас не юзает, я про раньше )
George
раньше и убунту была 14 )))) с текущими це-группами
Sn00part
центос - ядра. зависит от железа. Надо смотреть, у нас несколько ядер в проде, ML, epel, base, custom, у всех свои приколюхи, но у нас серваки в основном деллы, в этой связке приходится смотреть, что работает, что нет.
Sn00part
на трехе, например, нет консоли, когда подключаешь моник. на ML странные проблемы с VXLAN
Sn00part
по фотографии сложно такие вещи советовать
Sn00part
а в дебиане я вот позавчера опять регрессию видил, про unregister net device, waiting for lo to be free
George
похоже на проблему с нетворкменеджер, не?
Sn00part
не помню какая версия была дебиана, но чтото со стора GCE, я просто ее убил и все ))
Sn00part
не, это древний баг, его фиксили раз 20 уже
Sn00part
ядро!
George
жуть
Sn00part
я бы для смелых вообще рекомндовал Fedora atomic
Sn00part
или просто федору )
Sn00part
а атомик то они закопали епт
Sn00part
во дела
Sn00part
он теперь называется https://getfedora.org/coreos/
Sn00part
https://bugs.debian.org/cgi-bin/pkgreport.cgi?dist=stable;package=docker.io ну не сказал бы, что проблем нет )
Grigorii
Кто знает, вот у меня есть container_memory_usage_bytes{namespace="kube-system", pod_name="calico-node-cwkq5"}
Привет, кто-нибудь понял как это работает? Сейчас тоже сижу смотрю, в Прометее написано, что Под использует 36Mib, а docker stats на хосте показывает 14Mib(учитывая все контейнеры в Поде). Кому верить? ¯\_(ツ)_/¯
George
никому
George
у тебя есть разные метрики оперативной памяти
George
RSS, Shared, Virtual memory size etc
George
самое точное - мерять це-группами
George
каждый под - это отдельная це-группа, если мне память не изменяет
Grigorii
у тебя есть разные метрики оперативной памяти
Мне нужно знать сколько физически юзает памяти контейнер, т.е res
George
ну, ищи тогда RES
George
и внимательно смотри по доке соответствует ли оно
Grigorii
А, понял
Sn00part
https://bugs.debian.org/cgi-bin/bugreport.cgi?bug=925115 вот этот пофиксили в марте в апстриме, щас декабрь через 45 минут, а маинтейнеры дебиана до сих пор свитер снять не могут, постирать! я был маинтейнером и я там не смог, они там настолько все заплесневелые, с иллюзией хваленой стабильности, что пакет протянуть в стейбл - это надо трехгодовалый ритуал пройти по пингпонгу письмами. А тут не по полиси, а тут мы брать не будем этот пакет, а вот тут исправить пробел лишний и прочая херня
Grigorii
и внимательно смотри по доке соответствует ли оно
Я просто заюзал готовый дашборд в графане, который с kubernetes app идет, а он какую-то лажу по потреблению ресурсов показывает. Это норма, или я что-то не так делаю?)
George
я думаю, что просто никто не верифицировал и глубоко не копал
George
ты же в курсе, что дашборды студенты за еду делают
George
😄😱😂
Grigorii
я думаю, что просто никто не верифицировал и глубоко не копал
Т.е в каждой конторе нужно сперва полностью освоить Пром, а потом уже свои дашборды пилить, ибо только так можно быть уверенным, что они не будут врать?
George
))))
Sn00part
там дашбордов под тыщу уже, какой из них ты заюзал?) там есть кривые вообще, а есть рабочие вполне