Igor
один мастер на 50 нод это слишком ужасно ? (в кластере только Job выполняются)
Alexander
один мастер на 50 нод это слишком ужасно ? (в кластере только Job выполняются)
Ненадежно получается. Jobs же же куберовские? Значит мастер нужен всегда живой. А 1 это русское авось
Anton
Один мастер на 1к нод уже надо крутить и делать по другому
Igor
Igor
А если они долгоиграющие?
потеря джоба не страшное дело (в моем случае) . Плюс наверное докеры досчитаются (даже без мастера ?) и с них можно будет вытащить инфу .
Igor
Ну если хочется пуленепробиваемый то 5 etcd 5 мастеров
5 мастеров и 5 etcd через kubeadm это на иззи делается ?
Отделение Bereke Bank
HA через hard way быстрее имхо
Anton
5 мастеров и 5 etcd через kubeadm это на иззи делается ?
kops, kubespray, rke, kubeadm, kthw вопрос чем умеете тем и делайте
Denis
5 мастеров и 5 etcd через kubeadm это на иззи делается ?
Ну вообще мне показалось изи. В последних версиях kubeadm multimaster кластер легко развертывается. Воркеры в кластер добавлять всегда была не сложная процедура.
Ievgen
Всем. Привет Как установить helm chart как daemon set ?
вам сюда https://github.com/fluent/fluentd-kubernetes-daemonset
Lucky SB
5 мастеров и 5 etcd через kubeadm это на иззи делается ?
да. с 1.14 что ли кубадм умеет ха без проблем
Ievgen
ставь fluent-bit
флуент бит это ж для других целей, не?
Ievgen
это для каких других ?
слать метрики/логи из IoT-устройств, например
Lucky SB
слать метрики/логи из IoT-устройств, например
а где там написано слово метрики ?
Lucky SB
что мешает мне использовать быстрый и мелкий fluentbit на серверах, а не только на iot ?
Ievgen
что мешает мне использовать быстрый и мелкий fluentbit на серверах, а не только на iot ?
ниче не мешает :) разве что immaturity экосистемы fluentbit может стать припятствием
Sn00part
Fluentd пости ничего не вывозит, особенно если нахерачить регулярок
Ievgen
Fluentd пости ничего не вывозит, особенно если нахерачить регулярок
а fluentbit вывозит? мне правда интересно, я им никогда не пользовался
Sn00part
Fluentd stuck/hangs because of infinity regexp (99.9%) please improve detection/validation · Issue #2464 · fluent/fluentd · GitHub https://github.com/fluent/fluentd/issues/2464
Sn00part
Правда пофиксили
Sn00part
Но мозги поело знатно
DjinN
Подскажите, если я скопирую все конфиги в кубере и просто поменяю namespace это будет полностью изолированный конфиг? (не сломаю я чего нибудь, кроме своей песочницы?)
Ievgen
кстати, о такой штуке узнал недавно https://github.com/timberio/vector/. надеюсь когда-то попробовать
George
учитывая, что оба продукта идут в параллель
George
спроси в @ru_logs
George
а fluentbit вывозит? мне правда интересно, я им никогда не пользовался
понимаешь... это как сравнивать, условно, logstash и metricbeat / filebeat
Anton
только на расте :((((
George
первое - комбайн. Мощный. регулярки. Всякое такое. Но жрет как не в себя. А у тебя в кубе узкая задача - собрать логи (не метрики) и послать в условный центр. Без обработки
George
а обработка в центре
Sn00part
Да на сокет повешаться
Sn00part
И дуть в сислог
Sn00part
))
UglyKoyote
ну он не то что жрет, он ещё и тупить начинает по поводу и без повода
UglyKoyote
последний раз было, 4 часа пахал.. потом без изменения нагрузки просто встал и всё, начал буфер копить
UglyKoyote
"не могу скинуть данные".. через минут 10 слил все логи и дальше заработал. чего было.. почему было.. нигде ошибок, ничего
George
застрелиться, очевидно
Anton
Что делать?
Разделять компоненты на разные машины, тюнить qps в сервисах, особенно в кублете
Anton
Профайлить, находить шумные сервисы, изменять их если возможно
Alexey
всем привет. подскажите а можно ли через калико сделать, чтобы исходящий трафик с пода уходил через определенный интерфейс хоста?
George
думаю, что да
Alexey
вариант навскидку - прописать правило в айпитейблз
пока хочется нативно. в анонсах калико нашел как будто возможности такие про исходящий трафик но как запустить примеров не вижу
Dmytro
Привет. Подскажите, влияет ли CNI на то, что pod не может стучаться в Интернет?
Dmytro
pod перестал слать в Интернет, до сегодня — проблем не было.
Ivan
Привет. Подскажите, влияет ли CNI на то, что pod не может стучаться в Интернет?
элементарно может влиять, в calico например за это отвечает параметр natOutgoing: true в IPPool, плюс ещё есть egress NetworkPolicy. но если вы задаёте такие вопросы про CNI то вы вряд ли трогали эти параметры
Ivan
так что лезьте в под через exec и начинайте диагностику обычными средствами вроде traceroute, там же никакой магии
Dmytro
так что лезьте в под через exec и начинайте диагностику обычными средствами вроде traceroute, там же никакой магии
А подскажите, pod когда хочет обратиться в Интернет, не использует service и прочее, а с себя шлет, правильно?
Ivan
ну как сказать «себя» — он идёт с тем IP, который ему выдал ipam-демон вашего CNI плагина
Ivan
тем, что будет в выводе kubectl get pods -o wide
Alexey
egress не вариант?
насколько я пока понял egress запрешает/разрешает ход исходящего трафика и не имеет опций для направления через конкретный интерфейс. или не так?
Andrei
я конвертирую свой docker-compose в k8s локальный на mac . Вопрос есть ли замена host.docker.internal в k8s
George
есть идея
George
всем привет. подскажите а можно ли через калико сделать, чтобы исходящий трафик с пода уходил через определенный интерфейс хоста?
если совсем труба - разбей по нодам. И сделай ноды, которые могут в интернет и которые не могут
Lucky SB
если совсем труба - разбей по нодам. И сделай ноды, которые могут в интернет и которые не могут
зачем так извращаться то ? сетевые политики как раз специально для ограничения по подам и неймпейсам
Andrei
нет
хм ок как можно дать контейнеру свой ip который динамический?
Alexey
если совсем труба - разбей по нодам. И сделай ноды, которые могут в интернет и которые не могут
ну я помню твой совет привязывать адреса подов к нодам, но нет, пока не хочу) это прям труба труба) я уж тогда с роутингом вышестояшего маршрутизатора поработаю
George
egress + трафик через конкретный интерфейс
George
правда, я не совсем понимаю кейса, но может он опишет почему так ему надо ))))
Andrei
не надо давать контейнеру ничего.
он должен подключиться к базе которая на моем ip работает
Lucky SB
он должен подключиться к базе которая на моем ip работает
а этот ip случайный по dhcp ? потому что это дев. и база на макбуке ? делайте девопс. во время деплоя приложухи узнавайте текущий адрес базы и вставляйте его как переменную окружения в ваш контейнер.
Alexey
кубер на виртуалках или баре металле?
баре металл. а кейс — форвардпрокси в подах и каждая со своим адресом в качестве исходящего. на хосте два интерфейса — хостовый основной и интерфейс с вланами, каликой дал на под адрес вланового интерфейса и отключил нат, но под делает исходящий трафик через основной хостовый интерфейс а не через влановый. ну понятно что так калико устроено отправлять трафик. вот хочу понять можно ли через калико сделать или придется работать с вышестоящими роутерами
Lucky SB
@andragen ну или можно сделать хреноту. Указать hostNetwork: true в деплойменте для контейнера, получить внутри контейнера сетевой стек макбука и ходить к базе по 127.0.0.1 но окружающие будут считать вас альтернативно мыслящим и будут тихо ненавидеть, когда начнут в прод совать то, что вы наваяли
Andrei
а этот ip случайный по dhcp ? потому что это дев. и база на макбуке ? делайте девопс. во время деплоя приложухи узнавайте текущий адрес базы и вставляйте его как переменную окружения в ваш контейнер.
по dhcp база на mac приложение тоже с docker-compose на k8s пробуем перенести. В docker-compose я вставл]л через переменную с значением host.docker.internal думал может есть что то подобное в кубере