Dmytro
С моделями ML конечно беда как и с картами, размер докер контейнера 5гб в случае докер хаба
Egor
а может таки приложение - это приложение, а конфиг - это конфиг?
Op
привет, присматриваюсь к курсам https://slurm.io , кто-то проходил? какие впечатления?
Egor
и генератилка конфигов идёт отдельно? тем же чартом или ещё иным методом?
Dmytro
Если кастомный реджистри и быстрая сеть то ещё можно но ещё есть вопрос диска на нодах(
Alex
Alex
Dmytro
Иначе тут читаем тут рыбу заворачиваем
Egor
Egor
особенно в микросервисе, мы не чарты описываем с зависимостями, а храним 100500 контейнеров с предефайнеными настройками
Egor
плюс при каждом реюзе что-то меняем постоянно
Dmytro
Dmytro
А не судорожных поисков где что поменялось и кем
Egor
ну ролбеки при нормальном IaC тоже без вопросв делаются
Egor
просто переходом на предыдущий коммит
Egor
и декларировании нового конфига
Egor
не?
Aleksandr
а как узнать на какой ноде создался PVC
George
George
зачастую это скомпиленный код
George
я уж не говорю о том, что у тебя есть четкая зависимость между версией твоего питон кода и обученной моделью
Konstantin
https://github.com/kubernetes/kubernetes/issues/83477
George
Dmytro
не?
Не, никто не застрахует от умника отредактировавшего конфигмап или бага в конфигмапе которую на CI можно было поймать в случае конфига внутри образа. В-общем, если вы так хотите то делайте но я лучше по старинке
Stanislav
Vadim
I1004 12:00:26.803671 6 controller.go:133] Configuration changes detected, backend reload required.
E1004 12:00:26.998795 6 controller.go:145] Unexpected failure reloading the backend:
-------------------------------------------------------------------------------
Error: signal: illegal instruction (core dumped)
Vadim
подскажите ingress-nginx из-за этого хпадать может?
Vadim
Stanislav
Stanislav
но я бы для начала версию поменял
Vadim
версию нжинкса?
Vadim
0.25.1 из чарта стейбл
Alexander
Как раз такой норм стоит:
$ helm list | grep nginx-ingress
nginx-ingress 1 Tue Sep 3 15:27:32 2019 DEPLOYED nginx-ingress-1.17.1 0.25.1 ingress
Dmitry
уважаемые куберитяне а стандартной деплойкой нельзя в под два контейнера описать? или нужно отдельно под описывать?
G72K
Вадим
это в @devops_jobs
Stanislav
Stanislav
обнови чарты ж)
Stanislav
Solyar
Кто подскажет если я в kube-apiserver.yaml поменяю IP на другой я же не сломаю кластер?
Solyar
(учитывая что он однонодовый)
Solyar
Просто у нас DHCP нет и на статике нужно IP сменить
Alexander
как понять почему падает?
Погугли-ка illegal instruction (core dumped)
Это получается неверная инструкция процессора чтоли? Вероятно железо повреждено или баг на уровне системных компонент
G72K
Vadim
что то совсем это уже
Alex Sharov
а подскажите плиз как подкрутить horizontal-pod-autoscaler-sync-period в gke? читал, что это невозможно. Если это так, то как мне еще можно ускорить скейлер? Мой кейс в том, что за 30 секунд иногда приходит слишком большая нагрузка и приложение начинает захлебываться
Alexey
Коллеги, столкнулся со странным: добавил новую ноду в кластер, поды на ней недоступны по icmp/tcp с других нод (сами проблемные поды при этом доступ в сеть имеют). kubectl exec/logs с мастера на поды этой ноды проходит.
kub 1.15.3, развернут кубспреем.
Подскажите, пожалуйста, в какую сторону смотреть?
Dmytro
Dmytro
Будет конечно оверпровижн
Alex Sharov
CPU utilization уже 60
Dmytro
Но зато больше запас
Dmytro
А реплик сколько?
Dmytro
И какой приходит пик?
Alex Sharov
От 3 до 30 нод
Dmytro
Короче играя тремя параметрами количество реплик, количество цпу на под и порог скейлинга можно подобрать вариант где будет больше запас
Dmytro
Если приходит пик в 2х больше траффика за минуту то тут hpa бессилен
Alex Sharov
Ну как понимаю - единственный вариант это оверпровижининг, да?
Dmytro
Ну да, магии нет
Dmytro
Кому-то же нужно обрабатывать запросы
Alex Sharov
Да, трафик может прилететь в 1.5-2 раза больше
Dmytro
Ну тут только оверпровижн
Dmytro
Даже если подкрутить hpa есть ещё время на шедудинг пода на ноду и старт пода
Dmytro
Всё это не происходит мгновенно
Alex Sharov
Ну да, старт это ещё 30-40с
Dmytro
Тем более
George
George
не вижу проблемы
Dmytro
Если есть возможность как-то определить что будет пик то можно избежать оверпровижн кастомной метрикой или опратором
George
Alexey
Dmitry
можно
спасибо просто ошибка была какая-то поэтому я подумал что нельзя)