Vadim
хм, а он же только определенные порты внутрь подов ждет
Vadim
значит trace не показывает поведение на порту
Dmitry
raceroute to 10.111.9.253 (10.111.9.253), 30 hops max, 60 byte packets 1 _gateway (10.20.0.1) 0.386 ms 0.348 ms 0.328 ms 2 srx240.diasoft.ru (10.7.9.6) 1.653 ms 1.638 ms 0.884 ms 3 m10-sw1-vlan300.msk.corbina.net (83.102.131.33) 4.056 ms 4.027 ms 4.009 ms 4 fiord.corbina.net (89.179.176.62) 3.892 ms 2.468 ms 3.789 ms 5 gw.corbina.net (89.179.176.61) 3.911 ms 3.879 ms 3.871 ms 6 85.21.224.194 (85.21.224.194) 8.490 ms^C
Так, а ты можешь теперь с пода для дебага трасировку просто до 10.244.179.84 Если норм, то видимо у тебя что-то с сервисной сеткой. По идее он тебе сразу должен для сервиса один хоп вернуть
Vadim
Так, а ты можешь теперь с пода для дебага трасировку просто до 10.244.179.84 Если норм, то видимо у тебя что-то с сервисной сеткой. По идее он тебе сразу должен для сервиса один хоп вернуть
Selected device eth0, address 10.244.163.34, port 55345 for outgoing packets Tracing the path to 10.244.179.84 on TCP port 80 (http), 30 hops max 1 10.20.6.246 0.086 ms 0.038 ms 0.061 ms 2 10.244.179.64 0.291 ms 0.265 ms 0.286 ms 3 10.244.179.84 [closed] 0.391 ms 0.320 ms 0.267 ms
Vadim
сразу видимо, через хост
Vadim
да в инет лезет
Dmitry
да в инет лезет
На ноде че выдает? ipvsadm -L -n | grep 10.111.9.253
Vadim
На ноде че выдает? ipvsadm -L -n | grep 10.111.9.253
Can't initialize ipvs: No space left on device Are you sure that IP Virtual Server is built in the kernel or as module?
Vadim
только что установил ее
Dmitry
только что установил ее
у тебя iptables вероятно что-то сломало
Отделение Bereke Bank
Ребутни)
Dmitry
только что установил ее
Хотя стоп. В случае iptables трасировка же вроде не должна вообще работать? Я же прав вроде? Она же тупо на порт перенаправляет
Vadim
да ребутал уже, кластер чистый по идее никто не работает на нем
Dmitry
только что установил ее
кароче, если обращаться по порту норм работает?
Dmitry
тут нет? в каждом правиле -dport указан
ну значит оно будет работать только для трафика где этот dest port существует. Остальные идут лесом. Собственно тебе трасировка это и показывает. А я затупил, исходя из того, что у тебя ipvs для служб (а на деле iptables)
Vadim
укажи тут порт зукипера
не нашел способа
Dmitry
не нашел способа
tcptraceroute service-name port
Dmitry
Usage: tcptraceroute [-nNFSAE] [-i <interface>] [-f <first ttl>] [-l <packet length>] [-q <number of queries>] [-t <tos>] [-m <max ttl>] [-pP] <source port>] [-s <source address>] [-w <wait time>] <host> [destination port] [packet length]
Vadim
а да, так норм
Vadim
Selected device eth0, address 10.244.163.34, port 49175 for outgoing packets Tracing the path to zookeeper-persistent.logging.svc.cluster.local (10.111.9.253) on TCP port 2181, 30 hops max 1 10.111.9.253 0.118 ms 0.069 ms 0.069 ms 2 10.111.9.253 0.336 ms 0.342 ms 0.261 ms 3 10.111.9.253 [open] 0.287 ms 0.349 ms 0.267 ms
Dmitry
а да, так норм
Ну кипешь на ровном месте получился. А все потому что ты не все данные изначально дал
Vadim
ну вот, по незнанию , а проблемы то типо и нет, а че сервис не видит другой сервис, эластик доступен, а кибана пишет таймаут подключения
Vadim
видимо проблема в другом
Vadim
да, извините ребята, спасибо
Отделение Bereke Bank
Dmitry
такс. теперь нужен чел который из этого поймет почему твой трафик до IP сервиса идет через default gw)
да все там понятно. Тебе просто во времена админства не зажимали деньги на Cisco)))
Отделение Bereke Bank
да все там понятно. Тебе просто во времена админства не зажимали деньги на Cisco)))
про циску не понял) ну у меня так себе отношения с сетями
Vadim
да, чет я раньше смотрел эти маршруты в иптейблс но не замечал там порт, не отложилось в голове
Dmitry
про циску не понял) ну у меня так себе отношения с сетями
ну типо вместо cisco, у тебя банка бывшего сотрудника, которая как маршрутизатор для офиса работает. И стоит на шкафах над бухгалтерией =)
Отделение Bereke Bank
ааа)
Vadim
но я помню сервиснеймы где-то пингуются, а где-то нет
Отделение Bereke Bank
ну значит оно будет работать только для трафика где этот dest port существует. Остальные идут лесом. Собственно тебе трасировка это и показывает. А я затупил, исходя из того, что у тебя ipvs для служб (а на деле iptables)
И правда без порта через дефолт идет traceroute 10.4.0.1 traceroute to 10.4.0.1 (10.4.0.1), 30 hops max, 60 byte packets 1 167.99.32.254 (167.99.32.254) 1.094 ms 167.99.32.253 (167.99.32.253) 0.946 ms 0.936 ms 2 138.197.250.120 (138.197.250.120) 1.340 ms 138.197.250.104 (138.197.250.104) 1.248 ms 138.197.250.98 (138.197.250.98) 1.193 ms 3 * * * 4 * * *
Vadim
может калико с недавней версии начала по портам роутить, а на 3.3 было без портов допустим не помните?
Vadim
помню раньше пинговал спокойно сервиснейм
Dmitry
может калико с недавней версии начала по портам роутить, а на 3.3 было без портов допустим не помните?
нет. Это решается не calico. Маршруты другой уровень. Службы либо через ipvs работают либо через iptables. Маршруты не причем
Alexey
всем привет. пара вопросов про цеф и кубер — удалось мне вот подключить через имейдж из пула цефа через claim к нужному приложению, и пишу я данные туда. но понадобилось мне кластер передеплоить по быстрому. и вопрос такой - как мне в следующий раз в тому же приложению тот же имейдж подключить? я верно понимаю что где-то прописано имя claim соответствующее имени имейджа и надо мне это сохранять?
Vadim
или это kube-proxy прописывает значит?
Dmitry
так эти маршруты в Iptables calico же прописывает
ну не маршруты это, щас сетевики тебя тут побьют если они здесь есть =) И это делает не calico а kube-proxy
Dmitry
так эти маршруты в Iptables calico же прописывает
calico как раз поднимает маршруты (в ip r ты их видел) А за сервисы отвечает kube-proxy
Alex Sharov
а подскажите пожалуйста кто какие имена использует для кластеров? хотим формализовать gke кластера по именам, но пока досаточно плохо получается. Не хочется пихать в имя регион, либо имя gcp проекта
George
а снаружи классификатор - по региону, по проекту
George
)
Alex Sharov
ну пока идея такая: gke-<тип данных>-<суффикс><индекс>
Alex Sharov
а проект/регион можно из метадаты получить
George
все равно будет индекс
George
хм
George
смотри, просто я уже наелся с наименованием - когда нет идей - рандомные uid не выглядят идиотским предложением, потому что любая статическая схема наименования рано или поздно ломается
George
а условный cluster-west-00153 ничем не лучше, чем cluster—c081c5fc-7c41-4d53-b366-682997fb573b
Alex Sharov
ну да, тебе уже все-равно какие там циферки
Alex Sharov
они ведь по факту ничего и не говорят
Anonymous
Вот мой конфиш мап REDIS_PORT=26976' AMQP_PORT="26978" REDIS_HOST='46.dad.70' POSTGRES_HOST="46.4asd.70" DB_URL="mongodb://46.adasd0:26977/" Но мой под не вытягивает эти переменные Как только добавляю env: # - name: REDIS_HOST # value: '46.4.116.70' # - name: REDIS_PORT # value: '26976' и вот это говно раскоментирую все ок
Etki
они ведь по факту ничего и не говорят
поэтому проще именовать ничего не значащами словами/фразами, их проще запоминать и передавать, если что-то сломалось. "вась, посмотри что там у драной кобылы упало" - и вася не полезет ненароком не в ту степень
Etki
что такое тип данных?
Alex Sharov
pci/pii
Etki
крч, то место, откуда я это почерпнул (и с которым я согласен), рекомендовало два наименования - полная иерархическая цепь, e.g. vs-01.k8s-01.finland.staging.<project-name>.<organization>.<tld> - просто одно рандомное слово для любого узла, кластера и т.п., minttu.<organization>.<tld>, boulevardier.<organization>.tld, на которое указывает PTR (если это хост) - для простоты коммуникации я не уверен, что pci/pii здесь вообще имеет какое-то отношение, но если хочешь - можешь впихнуть в иерархию
George
Ибо первое можно регекспами парсить
Etki
опять мою жопу будем ставить?
Etki
второе позволяет быструю и уникальную идентификацию
George
ага, только она не имеет ценность, когда у тебя количество категорий >3 и в каждой категории более >3 объектов
George
поясню. Мы эти грабли проходили. В некоей хостинговой компании
George
изначально называли хосты по женским именам по алфавиту
George
красиво, но не юзабельно
George
потом передоговорились, что чтобы удобно писать манифесты паппета - хосты имееются по принципу <роль (или категория>-<некий порядковый номер>
George
зато регекспы красиво можно писать - типа фильтрануть все хосты с ролью виртуальный хостинг
Etki
оба вышеописанных принципа подразумевают одновременное использование