Anonymous
Подскажите куда посмотреть чтобы понять
Anonymous
Я пока не понимаю
Lucky SB
в районе 8гигов свободно на диске. а уже удаляет
в том что ты писал было сказано freed 800мб
Vadim
да а на диске 8 гигов
Lucky SB
да а на диске 8 гигов
ну посмотри /var/log/kubernetes.log там кублет при запуске пишет значения всех своих ключей. ищи в них. он может часть места под систему заначить. может у тебя так какой бекап делался или рсинк место покушал. мониторинг свободного места что показвыает ? ;) сколько диск размером всего ?
Vadim
50гигов диск, 8 свободно, кубер начинает имейджы зачищать и эвиктить поды
Lucky SB
evictionHard: imagefs.available: 15% memory.available: 100Mi nodefs.available: 10% nodefs.inodesFree: 5%
Это ж из конфига кублета ? попробуй поправить. да.
Vadim
попробовал, не помогло
Alexander
X Y: Народ, а кто как мониторит ingress-nginx в kubernetes? Пишут что vts модуль уже не катит. Help! Andor: Там же openresty года два как
Я от community ingress-nginx из чарта с вкл метриками ставлю. Ну и ServiceMonitor для ПромОпа. Вроде метрики для HTTP ошибок пропали в последнее время
Lucky SB
попробовал, не помогло
а точно поды по нехватке места на диске эвакуируются ? в логах кублета что сказано ?
Ereshkigal
кто-нибудь пробовал redis cluster в k8s? как впечатления?
Solyar
8 машин, редис сентинель + хапрокси
Nick
8 машин, редис сентинель + хапрокси
5 машин + сентинель (helm/stable/redis-ha), все ок.
Solyar
Solyar
5 машин + сентинель (helm/stable/redis-ha), все ок.
Вы без хапрокси используете?
Lucky SB
А вы его шатать пробовали ?
Solyar
Я да
Solyar
Убивал 6 реплик из 8
Solyar
Всё норм живёт себе
Solyar
мастеров убивал
Nick
Вы без хапрокси используете?
без, у нас софт сам поддерживает остальное. реплики убиваются постоянно, просто имеем в голове что 2-3 хорошо бы оставлять живыми. процесс не контролируем особо, всегда оживает ок. пару лет
Alexander
Был недавно на митапе про Stateful в Кубере и там докладчик не осилил Редиску в Кубе ) Но без сентинела
Alexander
без сентинела софт запаришься переписывать
Но они в итоге вне Кубера задеплоили, но его про Сентинел спрашивали и он не знал что это
Solyar
Он наверное раундробин всегда использовал
Nick
в джаве это примерно так там примерно такая строка коннекта redis.useSentinel=true redis.sentinelMaster=webmaster redis.sentinels=redis-web-redis-ha-announce-0.databases:26379,redis-web-redis-ha-announce-1.databases:26379,redis-web-redis-ha-announce-2.databases:26379...
Alexander
Вы без хапрокси используете?
А в кубе он нужен? Service ведь типа сам себе ha proxy?
Solyar
А в кубе он нужен? Service ведь типа сам себе ha proxy?
Ну мы для консистентности используем
Nick
А в кубе он нужен? Service ведь типа сам себе ha proxy?
там headlles для сентинел. там нет общего сервиса. или ха прокси с проврокой. иначе будете на readonly атыкаться периодически
Ereshkigal
Был недавно на митапе про Stateful в Кубере и там докладчик не осилил Редиску в Кубе ) Но без сентинела
ага, тоже была на нем, а тут коллеге дали такую задачу, и я такая хм... собственного опыта деплоя такого кластера нет, вот и решила поспрашивать
NM
мастеров убивал
Мастеров 8 или нод 8 ?
Alexander
да
Мир тесен
Solyar
Мастеров 8 или нод 8 ?
нод 5 мастера 3
Vadim
на какие точки место стоит выделать, в /var/lib/docker получается образы хранятся, в /var/lib/etcd - база
Alexander
Там на митапе еще такой лулз был. Чуваки не знают про nodeSelector и у них инит контейнер определял туда зашедулили или нет. И ошибку бросал если не туда.
Ereshkigal
а первый доклад вообще ни о чем
Ereshkigal
аля рандомная статья с хабра о том как что-то запихали в докер сворм
Ereshkigal
ну пиццы поели и ладно)
Дима Сис. Админ
Подскажите пожалуйста минимальные требования для k8s ноды
Alexander
аля рандомная статья с хабра о том как что-то запихали в докер сворм
Ну молодым падаванам там был урок. Что не все подходит для стандартного быстрого деплоя в прод. Биллинг они долго тестят и не по кадому коммиту в прод
Alexander
А часто ли нужно прибивать конт к определенной ноде?
Ну если диски локальные то приходится
Дима Сис. Админ
Для потестить
Дима Сис. Админ
Just a baka
А часто ли нужно прибивать конт к определенной ноде?
да в целом неплохо хотя бы изолировать прод от всего остального, особенно когда нагрузочное тестирование херачит по стейджингу или что-то в этом роде
Дима Сис. Админ
1 нода? И мастер и воркер на одной?
1 мастер и 2 ноды воркер на 2-х нодах
Dmitry
Ну если диски локальные то приходится
А, точно. У меня же у самого редис так робит nodeSelectorTerms: - matchExpressions: - key: kubernetes.io/hostname operator: In values: - docker1
Dmitry
1 мастер и 2 ноды воркер на 2-х нодах
Для мастера конфа подохлее, для воркеров пожирнее)
Дима Сис. Админ
Be more specific please. Можете в цифрах пожалуйста
Alexander
Ну вот миникуб он однонодовый - 2Г хочет по умолчанию. На один проект хватает
Dmitry
Be more specific please. Можете в цифрах пожалуйста
Мой тестовый кластер: мастер 2 ядра, 2 гига, 10гигов. Воркеры 4 ядра, 4 гига, 20 гигов
Дима Сис. Админ
Ок спасиб
Dmitry
Ну вот миникуб он однонодовый - 2Г хочет по умолчанию. На один проект хватает
Зачем миникуб, если можно 1-нодовый кластер, мастер является и воркером. И получаешь полноценное окружение без всяких там миникубовских лишних абстракций
Dmitry
Ты еще сколько проектов скажи
Много мелких. Так что хватит ещё более скромной конфигурации вполне
Dmitry
Коллеги, насколька глупа идея запихать софт для работы с ФИДО (помните такое?) в конт? Я мыслю запилить автоматическую сборку всего нужного софта, запихивания в конт, чтобы каждый желающий мог скачать только контейнер, подсунуть конфиг и юзать. Разумеется, работать придется внутри конта, веб-интерфейс и прочее я писать не планирую. Софт живет вот тут, требует телодвижений. https://sourceforge.net/projects/fidoip/files/
Just a baka
шел 2019й...
Alexander
ФИДОшные админы суровые бородатые мужики им просто запустить контейнер не понравится - сильно мало телодвижений )
Just a baka
да и без бзди не то удовольствие
Dmitry
Там мне это, для юзать. А для страдашек есть LFS и Beyond LFS (я собирал)
Dmitry
И Дарк Солс проходил не раз)))
Alex
Подскажите пожалуйста минимальные требования для k8s ноды
Я недавно развернул воркер на впс за 5 евро у хецнера - пока полёт нормальный)
Alex
что это?
Убийца кор ос )
Alex
Локально развернул - вроде работает
Dmitry
что это?
https://habr.com/ru/company/flant/blog/440810/
George
спасибо
Vadim
как думаете для ингресса хост по маске servicename.namespace.svc.host.domain.ru норм svc стоит указывать или без него лучше