Dmitriy
Всем привет! А есть кто мучался с троттлингом даже с cpumanager: static, но потом поставил ядро с целебным патчем и все стало как дОлжно? Пропал ли троттлинг полностью (У меня редко все еще вылезает, но пока не пойму отчего)? А то пара приложений гонятся за низким латенси, ищу где ещё покрутить ручек. Выключаете ли лимиты полностью? Может cpushares и пр. крутили? Спасибо!
Dmitriy
а как троттлинг идентифицируется?
Родные метрики прометея, так не скажу какие, не у консоли пока. Ну и корреляция со временем ответа сразу
Vadim
что за целебный патч?
Andrey
я через nice разруливаю. шедулер ядра куда умнее кубового.
>я через nice разруливаю А CPU requests чем не угодили?
Konstantin
>я через nice разруливаю А CPU requests чем не угодили?
тем, что квотирование через cgroups - это совсем не то, что я хочу. если железка свободна - пусть её жрёт кто угодно. но в порядке очереди.
Dmitriy
(причем докер инспект говорит что все контейнеры честно рассажены по своим ядрам, да)
Andrey
тем, что квотирование через cgroups - это совсем не то, что я хочу. если железка свободна - пусть её жрёт кто угодно. но в порядке очереди.
Хорошее желание. Хорошо, что requests без limits это и делает, т.к. настраивает относительные CPU shares в cgroups.
Konstantin
Хорошее желание. Хорошо, что requests без limits это и делает, т.к. настраивает относительные CPU shares в cgroups.
совсем не то оно делает. это просто чтоб выбрать на какой хост закинуть под. что с ним потом будет - кубику пофиг.
Andrey
совсем не то оно делает. это просто чтоб выбрать на какой хост закинуть под. что с ним потом будет - кубику пофиг.
Хорошая история. Жаль, что не соответствует реальности. https://github.com/kubernetes/kubernetes/blob/d24fe8a801748953a5c34fd34faa8005c6ad1770/pkg/kubelet/kuberuntime/kuberuntime_container_linux.go#L61
Andrey
соответствует. там всё ещё cgroups.
Отлично. Хороший инструмент для управления приоритетами. Хорошо, что они не догадались использовать nice.
Konstantin
Andrey
они задачи по изоляции процессов решали. а я про resource utilization говорю.
CPU shares для приоритезации, CFS quota для изоляции и лимитирования. Всё, что нужно, и ничего лишнего.
G72K
никто не помнит видео доклада, кажется на русском, где рассказывали о боли кафки поверх куба?
Konstantin
CPU shares для приоритезации, CFS quota для изоляции и лимитирования. Всё, что нужно, и ничего лишнего.
CFS не у всех. ваши поинты я одобряю, мне просто кажется что мы разные задачи решали в разных условиях.
Andrey
CFS не у всех. ваши поинты я одобряю, мне просто кажется что мы разные задачи решали в разных условиях.
Просто эти shares относительно всех процессов в системе будут работать. Поэтому я не понимаю причин использования nice, когда из коробки всё есть.
Andrey
Было бы интересно услышать кейс.
Dmitriy
что за целебный патч?
https://git.kernel.org/pub/scm/linux/kernel/git/tip/tip.git/commit/?id=de53fd7aedb100f03e5d2231cfce0e4993282425
G72K
знаю один неплохой, но без куба там
может я путаю и там про куб не было, но точно было про боль
Dmitriy
Dmitriy
даже так
Vadim
https://git.kernel.org/pub/scm/linux/kernel/git/tip/tip.git/commit/?id=de53fd7aedb100f03e5d2231cfce0e4993282425
а есть какая статья человечекая поему его ставить?
Konstantin
Просто эти shares относительно всех процессов в системе будут работать. Поэтому я не понимаю причин использования nice, когда из коробки всё есть.
по стресс-тестам банальный nice вышел победителем. но у меня и кейс специфичный - я примерно знаю, в какое окружение приземлится под, но не знаю, что там с ядрами и прочим.
Vadim
это версии куда он вошел? надо посмотреть, ну в убунте он в 18.04 он доехал наверно
Vadim
ну то есть достаточно обновиться
Andrey
ниче не сказано там
Ты скриншот выше не видишь?
Vadim
но я даже cpumanager: static не использовал, стоит значит?
Dmitriy
но на rhelовском 3.10 мы огребли какую то багу с xfs, отчего нода наглухо уходила, поэтому сидим пока на 5.4+
Роман
Всем привет. Друзья, гуглил, читал доку и все такое, пришел с вопросом, т.к. уже отчаялся. Подскажите, как можно соединить фронтенд и бэкенд ?
Роман
Кубы только начал щупать, так что возможно просто не понимаю каких-то вещей
Vadim
без куба ты как отделил?
Роман
У меня в композе все сделано
Роман
Там через днс в рамках одной сети, по имени сервиса работает
Роман
без куба ты как отделил?
через композ по имени сервиса запросы делаю
Tadeusz
ну так же
Vadim
через композ по имени сервиса запросы делаю
В кубе тоже по имени сервиса делай запросв
Роман
В кубе тоже по имени сервиса делай запросв
Я вот не уверен, что на все слои приложения должен быть 1 сервис
Роман
В кубе тоже по имени сервиса делай запросв
Я думал, что например для фронта один сервис, между фронтом и бэком должен быть другой сервис
Роман
В кубе тоже по имени сервиса делай запросв
Или работать через 1 сервис - это мастхэв?
Vadim
У тебя сколько сейчас сервисов с ними и работай
Роман
У тебя сколько сейчас сервисов с ними и работай
в композе у меня 14 сервисов (бд, кафки и прочее)
Роман
Как положено делать правильно?
Роман
Я, например, хочу чтобы у меня только фронт через сервис наружу торчал
Vadim
Я бы рсубд на отдельный сервак все остальное в куб
Роман
Я бы рсубд на отдельный сервак все остальное в куб
Ну т.е. все через один сервис юзать это норм ?
Vadim
Я, например, хочу чтобы у меня только фронт через сервис наружу торчал
Наружу балансировщик дальше внутрь куба на ingress controller он на фронт
Vadim
Ну т.е. все через один сервис юзать это норм ?
Я не понимаю ты сказал у тя 14 сервисов
Vadim
может там 5 запросов в час
Админить сложнее может быть субд в кубере
Роман
Вот мой композ https://github.com/greenfield0000/deliveryfood/blob/master/docker-compose.yaml
Роман
Как мне всю эту штуку засунуть в куб правильно ?
Роман
Бд на отденый сервак, это само собой
Роман
Есть какие-то мастхев рекомендации ?
Роман
Ладно, поставлю вопрос по другому. Есть ли возможность (если вообще так кто-то делает) из сервиса куба (например NodePort сервис) постучаться в другой сервис куба ?
Vadim
можно ссылку? )
https://youtu.be/BtmYjTO1EpI
Vadim
Я тут подумал cpu manager. static на виртуалках на шаренных ядрах смысла не имеет наверно
Tadeusz
/report
George
Кратко - объект типа service clusterip это по сути внутренний балансировщик между однотипными подами
George
Бекенд - один сервис, Фронт - второй. И соединяешь. Ингресс смотрит во фронт. Ничего сложного
NM
Бекенд - один сервис, Фронт - второй. И соединяешь. Ингресс смотрит во фронт. Ничего сложного
Ага, но только в GKE нормально работает external service, это если захочет чел пустить внутрь трафик на фронт по tcp