Евгений
Точнее даже не так — нельзя ЯВНО задавать гарантии, можно выселить всё кроме X в лимиты и ожидать, что остаток будет гарантирован X. Но, на самом деле, условный kswapd может сожрать весь CPU
Andrey
ну так-то да. сам шедулер может cpu съесть :)
Andrey
но обычно ядерные процессы держат себя в рамках и на это можно рассчитывать
Евгений
kswapd, например, не держит. cgroups-zombie + memmory pressure практически гарантируют, что kswapd начнёт есть cpu
Cholovik
George
Еще оверкоммит отключить, ога
George
И получить франкенлинукс
Cholovik
Да, зато сразу system OOM потом, а не какие-то скрытые скачки нагрузок))
Alexander
На самом деле, можно повесить процессу rt-приоритет. Но там тоже полно подводных камней
KrivdaTheTriewe
пробую добавить цеф драйфер в ранчер последний
KrivdaTheTriewe
подскажите, что не так, добавил кучу каталогов
KrivdaTheTriewe
но в сторадж классах цеф не появляется
Alexander
KrivdaTheTriewe
нашёл, нужно фичуред драйвера включить было
Alexander
Особенно забавно, когда люди, наслушавшись "как там в яндексе", но имея при этом стек на питонорубях, выключают себе своп совсем, а потом удивляются, почему при нехватке памяти система все равно тормозит об диск.
George
Cholovik
Отделение Bereke Bank
есть какая нибудь метрика, с помощью которой можно вытащить деплойменты без requests/limits?
Alexander
Все так. Лучше было б, чтоб падало по оом
Тут дело не столько в ООМ, сколько в том, что люди не учитывают соотношение потребностей своей системы в анонимной и файловой памяти и бездумно отдают приоритет анонимной, отключая своп.
Alexander
Хотя у них запросто могут быть гигабайты inactive(anon).
Pavel
кто нибудь пользуется меилрушным кубером. у них есть чат саппорта?
Cholovik
есть какая нибудь метрика, с помощью которой можно вытащить деплойменты без requests/limits?
У меня есть такая, сможете по лейблам отсортировать как вам надо
Без CPU requests:
(max(kube_pod_container_info) by (exported_namespace, exported_pod, container)) unless (max(kube_pod_container_resource_requests_cpu_cores) by (exported_namespace, exported_pod, container))
Без СPU limits:
(max(kube_pod_container_info) by (exported_namespace, exported_pod, container)) unless (max(kube_pod_container_resource_limits_cpu_cores) by (exported_namespace, exported_pod, container))
George
George
Ну, что толку от того что у тебя своп - продлить агонию системы, когда озу перестанет хватать ?
George
Но насчёт анонимной согласен
Отделение Bereke Bank
Alexander
Своп не нужен (с)
В яндекс.поиске, где почти все на плюсах, данные в основном в памяти — возможно. Вполне валидная альтернатива тому, чтобы развешивать на все memlock. Но в более типичных сценариях — сомнительно.
George
Все равно не звучит убедительно
George
Убедительно звучит, что аллокация памяти в линуксе будто сломана. Решение? Да хз. Но джависты вроде не страдают
Alexander
Про откладывание вряд ли будет плавать, оно больше от приложений зависит.
Alexander
Про уменьшение тупняка в ситуации ООМ у меня у самого есть сомнения относительно гипотезы и я хотел бы ее проверить, но пока не доходят руки.
Alexander
Но то, что система, в которой много active(file) памяти и inactive(anon), тупила бы меньше об диск на выгрузке/загрузке file-backed memory при ООМ, если своп включен, я вполне уверен. Но это частный случай.
George
Евгений
Dmytro
RE
наверное. но смысл тогда с второго плагина, если можно все сделать с withAWS
Dmytro
Чтобы было читабельно вместо башнянки? Можно аналогично и withAWS переписать на баше, зачем то плагин
Oleg
всем привет. кто юзает istio envoy-proxy сайдкаром, подскажите. я вот создаю кастомнную конфигурацию для прокси как тут https://github.com/istio/istio/tree/master/samples/custom-bootstrap
передеплоиваю
вижу что через istioctl proxy-config bootstrap изменения есть
а вот в сайдкаре istio-proxy в /etc/istio/proxy/envoy-rev0.json все без изменений. чему верить ?
KrivdaTheTriewe
Как в rancher 2.3 править extra_bindings
KrivdaTheTriewe
Kubelet непонятно
Yuriy
KrivdaTheTriewe
в этом проблема, я что ли в глаза долблюсь
KrivdaTheTriewe
cluster.yaml в помощь+rke
я docker run -d --restart=unless-stopped -p 80:80 -p 443:443 rancher/rancher развернул кластер, добавил rbd sc , терь выяснилось, что не маунтятся по-умолчанию модули ядра нужные, нужно поправить
KrivdaTheTriewe
но Edit Yaml по кластеру нет
Alexander
С чего это? Как это выгрузка file-backed memeory связана со свопом?
Никак. Но эффект выгрузки активной файловой памяти от выгрузки в своп активной анонимной памяти под нагрузкой при ООМ мало чем отличается. Но при отключении свопа (или выствлении swappiness в 0) не выгружается inactive(anon), и вместо нее система выстеняет сначала inactive(file), а затем и active(file) в ущерб производительности системы.
Yuriy
Евгений
KrivdaTheTriewe
KrivdaTheTriewe
KrivdaTheTriewe
с двумя мастерами
Solyar
Yuriy
Yuriy
Ранчер то на одной стоит
Mikhail [azalio]
@kvaps а линстор умеет утащить копию данных на другой диск автоматически, если сервер где был его ресурс сгорел?
Artem
/report
Sergey
@kvaps
Igorь
Я там вчера спрашивал про vault и sed... В общем, я немного допилил vault-template, чтобы gotemplate всюду было без седа. Есть на гитхабе, есть на докерхабе: https://github.com/aido93/vault-template
Сразу пример использования:
# command
CUSTOMER=myCustomer STAGE=test vault-template -o rendered.yaml -t ~/template.yaml -v "https://vault.example.com" -f token
# template
{{- $stage := .STAGE}}
{{- $customer := .CUSTOMER}}
{{- $path := print "kv/data/" $customer "/" $stage "/project/postgres"}}
{{- $map := vaultMap $path }}
postgresql:
{{- range $name, $secret := $map.data }}
{{ $name }}: {{ $secret }}
{{- end }}
# result
postgresql:
db: postgres
host: 127.0.0.1
password: postgres
port: 5432
user: postgres
Я понимаю, что это гораздо менее безопасно, чем официальный вариант использования волта, но зато предельно просто и для небольших компаний и кучи проектов при наличии CI - самое то.
Но может кому-то пригодится...
𝚔𝚟𝚊𝚙𝚜
𝚔𝚟𝚊𝚙𝚜
ух, как жаль
Нужно вручную спавнить ресурс, но в принципе можно наговнокодить скриптик который это будет делать вместо тебя
Mikhail [azalio]
Yuriy
Yuriy
KrivdaTheTriewe
Ещё вопрос, с ранчером, он нормально удаляет все за собой , я просто планирую тогда все снести и rke
KrivdaTheTriewe
KrivdaTheTriewe
Оч странно , что они так сделали , что завязка такая , на ейдж ноду
Yuriy
Если в кластере особо ничего нет, проще грохнуть и рке катнуть
KrivdaTheTriewe
KrivdaTheTriewe
Вообще ничего нет