Dmitry
helm сборка nginx-ingress-1.25.0 0.26.1
https://github.com/helm/charts/tree/master/stable/nginx-ingress - вот этот?
Dmitry
https://github.com/helm/charts/tree/master/stable/nginx-ingress - вот этот?
если этот. Там ничего не нужно делать для настройки веб-сокетов. Оно просто работает
Dmitry
да он, понял спасибо
https://kubernetes.github.io/ingress-nginx/user-guide/miscellaneous/#websockets Вот на всякий случай дока Но там написано, что для работы вебсокетов ничего не нужно настраивать, и это правда =). Таймауты поправь кстати, как правило они нужны большие, договорись с прогером
Dmytro
Ага, и мастерлесс кубернетИс
тогда уже сразу номад или вообще докер композом деплоить
Dmitry
тогда уже сразу номад или вообще докер композом деплоить
что опять нас возвращает к изначально описанной проблеме: Связь плохая, и человек запускает плейбук в бесконечном цикле на ночь, чтобы все раскаталось
Dmitry
Дичь же
да и docker-compose тут никак не поможет
Dmytro
что опять нас возвращает к изначально описанной проблеме: Связь плохая, и человек запускает плейбук в бесконечном цикле на ночь, чтобы все раскаталось
ну это agentless, в таком случае наверное лучше на каждом сервере поставить агента puppet/chef/etc. и чтобы они сами пулили
Vadim
Для подготовки к CKA какие ресурсы можете посоветовать?
RE
ок спасибо
Hankey
Той же версии, что и в кластере
Вадим
какая java на iot?
https://github.com/blynkkk говорят, 500 тыщ юзеров и все на джаве
Вадим
но джава там, судя по их статьям, не из-за того, что она очень хороша для iot, а "так исторически сложилось"
Cholovik
Всем привет Я постарался оформить все что смог нарыть в ходе своего исследования по CPU ресурсам в Kubernetes в пост, чтобы люди которые будут в поисках знаний могли немного меньше страдать Буду рад всем замечаниям! https://medium.com/targetprocess/настройка-потребления-cpu-в-kubernetes-как-научить-микросервисы-дышать-полной-грудью-45f70d3f262
Victor
Всем привет Я постарался оформить все что смог нарыть в ходе своего исследования по CPU ресурсам в Kubernetes в пост, чтобы люди которые будут в поисках знаний могли немного меньше страдать Буду рад всем замечаниям! https://medium.com/targetprocess/настройка-потребления-cpu-в-kubernetes-как-научить-микросервисы-дышать-полной-грудью-45f70d3f262
Привет! Довольно хорошая статья, но не описывает resourcequotas для нэймспейсов, где можно выставлять автоматическое выставление limits/requests на контейнеры, если оно не задано, а также ограничить максимумом на mamespace (см. team-operator). Также можно упомянуть что кубовый шедулер уже умеет шедулить процессы на одни и те же ядра, что положительно сказывается на NUMA-зависомом софте. А в целом - отличная статья, читал с удовольствием.
Victor
У нас есть команда дата-сатанистов, у которых троттлинг 70% это норма и они не против, ибо если их не ограничивать, от ресурсов всего кластера ничего не останется :)
Cholovik
У нас есть команда дата-сатанистов, у которых троттлинг 70% это норма и они не против, ибо если их не ограничивать, от ресурсов всего кластера ничего не останется :)
Да, согласен что есть штуки для которых это ок, но когда на монге был неожиданный троттлинг без причины по 2s за секунду при адекватных лимитах, тут то и пришлось покопаться))
Cholovik
клапнул подпиской)
Ничего не обещаю)
Victor
А про NUMA советую почитать. Проблемы с ней приходят именно к тем, кто их обычно не ждёт. ) в общих словах: дорого ходить в память по «длинному пути» не к своей numa ноде. Сейчас у всех почти включена NUMA на серверах и мало об этом кто догадывается. А это сильно замедляет тот же Постгрес на голом железе
Cholovik
Хорошо копнули, чего про фикс фикса не рассказали? https://github.com/kubernetes/kubernetes/issues/67577#issuecomment-519527965
Эх, я кажется на него натыкался но в итоге потерял. Спасибо большое, посмотрю завтра и может дополню
G72K
А вы пробовали?
Не успел, ушёл
A
шаhttps://webinars.huawei.ru/campusswitchesinfo/materials/CampusSwitchesInfo.pdf
Cholovik
Не успел, ушёл
Я в ходе тестов обновлялся на бэкпорт фикса, может там и этот был включён, не уверен
G72K
Я в ходе тестов обновлялся на бэкпорт фикса, может там и этот был включён, не уверен
Там в lkml репродюсер на С автор патча кидал, можно проверить включен или нет
Alexander
Спасибо! Хотелось не выходить за рамки проблемы, а то слишком усложняется, и так приходилось нырять то в квоты, то смотреть как работает CFS с мультиядерностью. Ну и искали как разобраться с троттлингом и не проиграть. А с NUMA не работал, так что гадать тоже не хотелось.
Троттлинг - неизбежность при выборе пропускной способности в классическом трейдоффе throughput-latency. Если задача требует низкой latency, то можно выставить лимиты по пикам+запас, чтобы обслуживать пиковые нагрузки максимально быстро (но при этом, разумеется, отказаться от более-менее полной утилизации ресурсов из-за необхохимости держать резерв).
Roman
всем привет посоветуйте годный туториал по openebs в rancher, чет пытался настроить стор для мускуля не оч получается
Roman
в самой доке вроде всё элементарно, но не пойму как сцепить мускуль с этим стораджом, создаю указываю его, и все мускуль не поднимается(
Roman
https://docs.openebs.io/v060/docs/next/rancher.html
Roman
вроде как указываю использовать persistance storage jiva default, ну и на этом всё
Roman
Roman
хотя поды под данные создаются
Roman
Konstantine
/report
Konstantine
/report
Tadeusz
/report
Dmytro
@kvaps @SinTeZoiD ^
Aleksei
Нужно больше репортов. У кого мозгов нет - тот и так пройдёт по рекламе, а остальные просто проигнорят. Не надо писать по 4 раза репорты))
Nikesh
Привет
Nikesh
Как дела
Fedor
Ку
Fedor
Нот бэд, но бывает и лучше
Victor
Про тротлинг и лимиты. Еще бывает интересный эффект, что выставлено в лимитах 300 миллицпу, использование показывает 100, но при этом троттлинг под 50%. Почему это происходит - пока только догадки. Лень код изучать.
Victor
Еще у сигрупп явно сломан аккаунтинг памяти - использование памятт постгресом показывает погоду на марсе. Правильно считать суммированием Pss, но сигруппы считают одни и те же странички памяти, которые пачкают много раз разные воркеры одного и того же постгреса, из-за чего в постгрес необоснованно приходит OOM. Но это не 100% точно, так как код ядра не смотрел
Victor
Тот самый баг в cpu сигруппах? https://github.com/kubernetes/kubernetes/issues/67577
Возможно и оно, думал об этом. Но еще использование цпу и cfs quotas слишком разными формулами считается
Nikita
здравствуйте, господа. вобщем такая проблема: есть пайтон-приложение на базе фласка (веб-шмеб) и у него есть микробаза в виде sqlite db. А так же из особенностей - мультитрейдинг если это приложение в контейнере (тупо всё собрать в кучу монолитом), то оно работает а вот если разворачивать на кубере.... то сыпятся ошибки из разряда - "Трейд не нашёл таблицу такую то..." собственно сам деплой.ямл: apiVersion: apps/v1 kind: Deployment metadata: name: miner-monitor namespace: testapp labels: app: miner-monitor spec: progressDeadlineSeconds: 600 replicas: 1 revisionHistoryLimit: 10 selector: matchLabels: app: miner-monitor strategy: type: Recreate template: metadata: labels: app: miner-monitor spec: imagePullSecrets: - name: gitlab-registry containers: - name: miner-monitor image: registry.gitlab.com/slastikhin.nikita/miner-monitor:_VERSION_ imagePullPolicy: Always ports: - containerPort: 5000 restartPolicy: Always terminationGracePeriodSeconds: 30 volumes: - name: gitlab-registry secret: secretName: gitlab-registry и кусочек лога: [2020-02-06 17:49:08 +0000] [1] [INFO] Starting gunicorn 20.0.4 [2020-02-06 17:49:08 +0000] [1] [INFO] Listening at: http://0.0.0.0:5000 (1) [2020-02-06 17:49:08 +0000] [1] [INFO] Using worker: sync [2020-02-06 17:49:08 +0000] [7] [INFO] Booting worker with pid: 7 Exception in thread Thread-2: Traceback (most recent call last): File "/home/microserv/venv/lib/python3.6/site-packages/sqlalchemy/engine/base.py", line 1246, in _execute_context cursor, statement, parameters, context File "/home/microserv/venv/lib/python3.6/site-packages/sqlalchemy/engine/default.py", line 588, in do_execute cursor.execute(statement, parameters) sqlite3.OperationalError: no such table: main_miners_table
Dmytro
Тот самый баг в cpu сигруппах? https://github.com/kubernetes/kubernetes/issues/67577
Ух, читается как детектив. И оказывается уже по «книге» этой сняли «фильм» https://www.youtube.com/watch?v=UE7QX98-kO0 😀
Dmytro
здравствуйте, господа. вобщем такая проблема: есть пайтон-приложение на базе фласка (веб-шмеб) и у него есть микробаза в виде sqlite db. А так же из особенностей - мультитрейдинг если это приложение в контейнере (тупо всё собрать в кучу монолитом), то оно работает а вот если разворачивать на кубере.... то сыпятся ошибки из разряда - "Трейд не нашёл таблицу такую то..." собственно сам деплой.ямл: apiVersion: apps/v1 kind: Deployment metadata: name: miner-monitor namespace: testapp labels: app: miner-monitor spec: progressDeadlineSeconds: 600 replicas: 1 revisionHistoryLimit: 10 selector: matchLabels: app: miner-monitor strategy: type: Recreate template: metadata: labels: app: miner-monitor spec: imagePullSecrets: - name: gitlab-registry containers: - name: miner-monitor image: registry.gitlab.com/slastikhin.nikita/miner-monitor:_VERSION_ imagePullPolicy: Always ports: - containerPort: 5000 restartPolicy: Always terminationGracePeriodSeconds: 30 volumes: - name: gitlab-registry secret: secretName: gitlab-registry и кусочек лога: [2020-02-06 17:49:08 +0000] [1] [INFO] Starting gunicorn 20.0.4 [2020-02-06 17:49:08 +0000] [1] [INFO] Listening at: http://0.0.0.0:5000 (1) [2020-02-06 17:49:08 +0000] [1] [INFO] Using worker: sync [2020-02-06 17:49:08 +0000] [7] [INFO] Booting worker with pid: 7 Exception in thread Thread-2: Traceback (most recent call last): File "/home/microserv/venv/lib/python3.6/site-packages/sqlalchemy/engine/base.py", line 1246, in _execute_context cursor, statement, parameters, context File "/home/microserv/venv/lib/python3.6/site-packages/sqlalchemy/engine/default.py", line 588, in do_execute cursor.execute(statement, parameters) sqlite3.OperationalError: no such table: main_miners_table
Так а где тут в манифесте RW вольюм на котором sqlite сможет создать файл базы?
Nikita
Так а где тут в манифесте RW вольюм на котором sqlite сможет создать файл базы?
файл уже создан он в контейнере уже есть редактировать не надо особо ибо это демо
Dmytro
Может файл битый тогда? Из sqlite cli в это же контейнере этот же запрос работает?
Nikita
Может файл битый тогда? Из sqlite cli в это же контейнере этот же запрос работает?
та не, если локально собираю контейнер, то всё запускается и работает нормально
Nikita
незнаю что с этим связано
Alexey
Привет! Ставлю на куб 1.17.2 rancher ( вот так helm install --generate-name rancher-stable/rancher --version 2.3.5 ) и получаю Error: unable to build kubernetes objects from release manifest: error validating "": error validating data: ValidationError(Ingress.spec.tls[0].hosts): unknown object type "nil" in Ingress.spec.tls[0].hosts[0] Подскажите, в чём может быть ошибка? Видимо какие то подготовительные действия не выполнил...
Alexey
Ingress у меня нету.
Alex
ранчер по руководству rke ставите?
Alexey
ранчер по руководству rke ставите?
Спасибо! Видимо нет, зашел сюда: https://rancher.com/docs/rancher/v2.x/en/installation/ и далее: High-availability Kubernetes Install: We recommend using Helm, a Kubernetes package manager, to install Rancher on a dedicated Kubernetes cluster. We recommend using three nodes in the cluster because increased availability is achieved by running Rancher on multiple nodes.
George
У ранчера достаточно приличное запаздывание от апстрима
George
ранчер по руководству rke ставите?
Я не уверен, что рке сможет раскатать 1.17
Alexey
Вероятно, куб слишком свежий
Спасибо большое ( в очередной раз :) ) Попробую куб постарее поставить.