Dmytro
С моделями ML конечно беда как и с картами, размер докер контейнера 5гб в случае докер хаба
Egor
а может таки приложение - это приложение, а конфиг - это конфиг?
Op
привет, присматриваюсь к курсам https://slurm.io , кто-то проходил? какие впечатления?
Egor
и генератилка конфигов идёт отдельно? тем же чартом или ещё иным методом?
Dmytro
Если кастомный реджистри и быстрая сеть то ещё можно но ещё есть вопрос диска на нодах(
Dmytro
а может таки приложение - это приложение, а конфиг - это конфиг?
Может, но deployment artifact это всё вместе чтобы получить build reproducibility
Dmytro
Иначе тут читаем тут рыбу заворачиваем
Egor
Может, но deployment artifact это всё вместе чтобы получить build reproducibility
добавляя себе кучу уровней сопроводжения при разных версиях ПО
Egor
особенно в микросервисе, мы не чарты описываем с зависимостями, а храним 100500 контейнеров с предефайнеными настройками
Egor
плюс при каждом реюзе что-то меняем постоянно
Dmytro
Так все же свой регистри подымают обычно, нет?
Смотря какая компания, если допустим реджистри заведуют безопасники и это артефакторики с чекерами и тд то лимиты могут быть как в докер хабе а то и ниже
Dmytro
А не судорожных поисков где что поменялось и кем
Egor
ну ролбеки при нормальном IaC тоже без вопросв делаются
Egor
просто переходом на предыдущий коммит
Egor
и декларировании нового конфига
Egor
не?
Aleksandr
а как узнать на какой ноде создался PVC
George
зачастую это скомпиленный код
George
я уж не говорю о том, что у тебя есть четкая зависимость между версией твоего питон кода и обученной моделью
Konstantin
https://github.com/kubernetes/kubernetes/issues/83477
Dmytro
не?
Не, никто не застрахует от умника отредактировавшего конфигмап или бага в конфигмапе которую на CI можно было поймать в случае конфига внутри образа. В-общем, если вы так хотите то делайте но я лучше по старинке
Valentin
https://rebrainme.com/devops/
Качественно но не быстро, как вообще может быть быстро и качественно вопрос)
Игорь
посоны, поясните за canal (calico + flannel) vs kube-router. пользовался последним в приватной сети и был рад! поверх публичной сети - без flannel, я так понимаю, не обойтись...
У куброутера есть --enable-overlay для создания ipip-туннелей. Другое дело, что поверх публичной сети надо бы еще и шифрование (если на уровне приложений или сервис-меша его нет).
Stanislav
У куброутера есть --enable-overlay для создания ipip-туннелей. Другое дело, что поверх публичной сети надо бы еще и шифрование (если на уровне приложений или сервис-меша его нет).
Спасибо, то что-надо! оно еще и по умолчанию в kubespray включено! ж) Еще вот что нашел: https://raw.githubusercontent.com/coreos/flannel/master/dist/extension-wireguard
Vadim
I1004 12:00:26.803671 6 controller.go:133] Configuration changes detected, backend reload required. E1004 12:00:26.998795 6 controller.go:145] Unexpected failure reloading the backend: ------------------------------------------------------------------------------- Error: signal: illegal instruction (core dumped)
Vadim
подскажите ingress-nginx из-за этого хпадать может?
Stanislav
подскажите ingress-nginx из-за этого хпадать может?
ага из-за этого и падает, ключивое слово man signal
Stanislav
Stanislav
но я бы для начала версию поменял
Vadim
версию нжинкса?
Vadim
0.25.1 из чарта стейбл
Alexander
Как раз такой норм стоит: $ helm list | grep nginx-ingress nginx-ingress 1 Tue Sep 3 15:27:32 2019 DEPLOYED nginx-ingress-1.17.1 0.25.1 ingress
Dmitry
уважаемые куберитяне а стандартной деплойкой нельзя в под два контейнера описать? или нужно отдельно под описывать?
Vadim
смотреть coredump
где коредампы найти эти?
Вадим
это в @devops_jobs
Stanislav
обнови чарты ж)
Vadim
nginx-ingress-1.22.1 0.25.1
чарт как влияет на то что падает нжиск, у меня почти такой же 1.22.0
Solyar
Кто подскажет если я в kube-apiserver.yaml поменяю IP на другой я же не сломаю кластер?
Solyar
(учитывая что он однонодовый)
Stanislav
чарт как влияет на то что падает нжиск, у меня почти такой же 1.22.0
https://github.com/helm/charts/commit/1e5f46ff495470aef680edc382ddc8a70fad1ede#diff-3c4c24cdeddce972b1247cf4427dbf75
Solyar
Просто у нас DHCP нет и на статике нужно IP сменить
Alexander
как понять почему падает?
Погугли-ка illegal instruction (core dumped) Это получается неверная инструкция процессора чтоли? Вероятно железо повреждено или баг на уровне системных компонент
G72K
Погугли-ка illegal instruction (core dumped) Это получается неверная инструкция процессора чтоли? Вероятно железо повреждено или баг на уровне системных компонент
Такое бывает когда компилируют под свежие процессоры ,а запускают на старых. Когда встречается не поддерживается инструкция, скажем из SSE свежих
Vadim
что то совсем это уже
Alex Sharov
а подскажите плиз как подкрутить horizontal-pod-autoscaler-sync-period в gke? читал, что это невозможно. Если это так, то как мне еще можно ускорить скейлер? Мой кейс в том, что за 30 секунд иногда приходит слишком большая нагрузка и приложение начинает захлебываться
Alexey
Коллеги, столкнулся со странным: добавил новую ноду в кластер, поды на ней недоступны по icmp/tcp с других нод (сами проблемные поды при этом доступ в сеть имеют). kubectl exec/logs с мастера на поды этой ноды проходит. kub 1.15.3, развернут кубспреем. Подскажите, пожалуйста, в какую сторону смотреть?
Dmytro
Будет конечно оверпровижн
Alex Sharov
CPU utilization уже 60
Dmytro
Но зато больше запас
Dmytro
А реплик сколько?
Dmytro
И какой приходит пик?
Alex Sharov
От 3 до 30 нод
Dmytro
Короче играя тремя параметрами количество реплик, количество цпу на под и порог скейлинга можно подобрать вариант где будет больше запас
Dmytro
Если приходит пик в 2х больше траффика за минуту то тут hpa бессилен
Alex Sharov
Ну как понимаю - единственный вариант это оверпровижининг, да?
Dmytro
Ну да, магии нет
Dmytro
Кому-то же нужно обрабатывать запросы
Alex Sharov
Да, трафик может прилететь в 1.5-2 раза больше
Dmytro
Ну тут только оверпровижн
Dmytro
Даже если подкрутить hpa есть ещё время на шедудинг пода на ноду и старт пода
Dmytro
Всё это не происходит мгновенно
Alex Sharov
Ну да, старт это ещё 30-40с
Dmytro
Тем более
Lucky SB
токсичные чатики такие токсичные
Там товаришь с хелмом и опеншифтом еще не показал свою красоту ?
George
не вижу проблемы
Dmytro
Если есть возможность как-то определить что будет пик то можно избежать оверпровижн кастомной метрикой или опратором
Dmitry
можно
спасибо просто ошибка была какая-то поэтому я подумал что нельзя)