George
vrrp - очень критичен к инфре (свитчи, арп - вот это вот все)
Anonymous
конфа какая? на чем развернут куб?
виртуалки считай, что bare metal
George
виртуалки - могут быть проблемы с vrrp
George
в случае с баре метал - там нюанс с коммутаторами
George
типа port security и прочая дрянь
Anonymous
да хрен с vrrp вопрос - почему не работает metallb внешне всё ок arp-запросы приходят на хост, но metallb не отвечает на них
Anonymous
разве что обновить metallb и кубер но это такое себе упражнение
George
ну, очевидно - что тут та же история ? нет?
𝚔𝚟𝚊𝚙𝚜
А metallb на baremetal в режиме L2 нормально работает ? У меня он почему-то даёт доступ только к адресам, которые есть на интерфейсах серверов, пример - 93.x.y.68 а адреса, которые виртуальные не появляются в arp - например 93.x.y.140 в чём может быть проблема ? Конфиги тут: https://gist.github.com/bazzilio/87fd367309e8452f8f05aa0c8b95060a
Смотрите arping, логи спикеров и интерфейсы которые он слушает, у них не должны быть слева и какого-либо другого девайса и не должны иметь флаг NOARP. В идеале сначала проверить что arp-запросы вообще доходят на ноду где запущен endpoint, затем смотреть логи спикера
Anonymous
ну, очевидно - что тут та же история ? нет?
ок, смотри я оставляю один инстанс speaker, чтобы было проще ловить баги смотрю на хосте на tcpdump - arp запросы приходят но ответов нет. почему так я не понимаю.
George
т.е. спикер не генерирует арп-ответы?
𝚔𝚟𝚊𝚙𝚜
keepalived просто выкинет из балансировки real-server который на его ноде и будет балансить на остальные
То есть это какая-то отдельная проверка в keepalived? Обычный VRRP такого точно не умеет
Timur
т.е еще там же и балансированные запросов
George
lvs можно не юзать
Timur
причем и rr и wrr
George
к тому же мы юзали ipvs (модуль в ядре)
Timur
lvs можно не юзать
угу... но я про кейс когда можно
𝚔𝚟𝚊𝚙𝚜
да не.. keelaived - это vrrp+lvs
Я писал гайд как настроить связку VRRP(keepalived) + haproxy, с lvs можно и без haproxy обойтись наверное
George
да, скорее всего
George
НО!
George
у меня текло ядро - и именно из-за кипэлайв + ipvs
George
плюс там подзалипало переключение. HAProxy как будто проще и надежнее
𝚔𝚟𝚊𝚙𝚜
плюс там подзалипало переключение. HAProxy как будто проще и надежнее
Кстати haproxy умеет коннекты держать, а не тупо роутить
Timur
у меня текло ядро - и именно из-за кипэлайв + ipvs
интересно.. на centos такого не замечал
George
ubuntu 14/16
Anonymous
т.е. спикер не генерирует арп-ответы?
да, спикер не генерирует ответы
Anonymous
Спикер запущен на том же хосте где и endpoint pod?
нет, сейчас на разных могу на один перенести
𝚔𝚟𝚊𝚙𝚜
нет, сейчас на разных могу на один перенести
Metallb в режиме L2 всегда анонсит айпишник с той ноды, где запущен и работает workload, fyi
Anonymous
но у меня не работало и тогда, когда спикеры были на всех нодах (
𝚔𝚟𝚊𝚙𝚜
но у меня не работало и тогда, когда спикеры были на всех нодах (
Это у вас ipvs скорее всего работал или что-то ещё
Anonymous
но я попробую и отпишусь
Timur
@vrutkovs скинь плз еще раз линк на книгу по куберу и разработке на Golang. Чет не нашел :(
Vadim
@vrutkovs скинь плз еще раз линк на книгу по куберу и разработке на Golang. Чет не нашел :(
посмотри в файлах канала, я не знаю что за книгу ты имеешь в виду
Timur
что-то триально-бесплатное было. смотрел, но не нашел.. поищем..
Timur
вот это
Timur
Хорошая книжка - https://programming-kubernetes.info/ - 10 дней триала
Alexey
))))
Alexey
а как продлить куда звонить ?
Timur
я не пробовал еще.. когда-то был платный акк на сафари
Nariman
Всем привет кто может пояснить на реальном примере зачем нужны анотации а обектах k8s ? Одним предложением
George
дополнительная полезная информация
Nariman
annotations
Даня
коллеги, кто нибудь может поделиться линкой на решение для импорта ивентов кубера в виде логов?
Даня
нашел gcp exporter, но по всей видимости он уже в legacy
dzmitry
Привет, подскажите куда копать по такому вопросу: есть парсер pdf на сайте(.net core) который задеплоен в GKE. Использую ingress, выставил параметры : nginx.ingress.kubernetes.io/proxy-body-size: 300m nginx.org/client-max-body-size: 500m . Когда паршу одну пдф отрабатывает, но если попытаться распрсить например 2-3 от разных юзеров, происходит зависание и парсит почти бесконечно. Может у кого есть такой опыт?
George
у тебя парсер как работает?
George
через луа?
George
коннекшенов сколько? ноды какого размера кубовские? нищебродские типа 1 цпу 2 гига озу?
dzmitry
у меня 2 реплики, ноды базовые 3 шт : 3 core, 11 memory. Парсер на .net core разбивает файлы локально, а потом отправляет в гугл сторедж. Что за луа? не понял)
George
вопрос был в чем. У тебя ингрес во что смотрит?
George
сколько сервисов?
George
lua - это язык программирования, которые в том числе используется внутри nginx для упрощения его расширения
dzmitry
2 сервиса моего приложения (NodePort), ingress как LoadBalancer
Роман
Ребят, привет. Кто может с кубером помочь? :)
George
пока похоже, что как будто у тебя твое приложение может сервить максимум 2 запроса одновременно )
George
(по 1 на каждую реплику)
George
смотри логи ингресса - почему там отбивка происходит
Роман
админ в отпуске, в кластере выпала одна нода из-за того что место закончилось, остальные ноды напряглись, место почистил, ноду вернул, но другие ноды пришлось рестартить - никак не отлипали, после этого всё вроде заработало, но внутри подов сломался dns
Роман
ping: yandex.ru: Temporary failure in name resolution
Роман
на хостовых машинах пингуется всё нормально, захожу в под - такая ошибка
George
ну, эм, проверяй наличие днс. Логи днс. Может быть перезапустить его
Konstantin
cat /etc/resolv.conf в поде
George
явно какая-то очевидная проблема )
Роман
cat /etc/resolv.conf nameserver 10.244.0.3