Anton

на рабочем кластере с руком тоже не вижу никаких секций кроме admin и mon

Aleksey

ты у осд посмотри ключ сходится, вот у осд точно должне быть свой

Anton

сходится с чем?

Aleksey

в ceph auth list должно быть что-то вроде: osd.31 key: AQCbLc5WgOjzNBAA+nbswt9xRBLRT1aRPaRC0Q== caps: [mon] allow profile osd caps: [osd] allow *

Aleksey

вот в файле, который использует твой процесс осд должен быть такой же ключ как в ceph auth list

Zhyhanov

кто может посдказать, если мы пробрасываем порт на деплойментс то он будет доступен с любого ip ноды, в независимости на какой ноде запущен под ?

Anton

вот в файле, который использует твой процесс осд должен быть такой же ключ как в ceph auth list

совпадают (по крайней мере на одном osd)

Aleksey

ок, ну тогда я хз почему она в down

Maksim

кто может посдказать, если мы пробрасываем порт на деплойментс то он будет доступен с любого ip ноды, в независимости на какой ноде запущен под ?

не понял. Если ты про сервис типа NodePort то да на всех нодах

Zhyhanov

не понял. Если ты про сервис типа NodePort то да на всех нодах

да NodePort, тогда может сможете помочь, на одной из нод перестал отвечать по порту, а именно с мастер ноды, куда можно копнуть или на что обратить внимания что бы возможно понять в чем проблема

Anton

ок, ну тогда я хз почему она в down

спасибо за помощь, я узнал много нового

Maksim

А как перестал отвечать?

Zhyhanov

А как перестал отвечать?

в дейломенте запущено приложение которое отвечает на curl с API

Zhyhanov

так вот перестал отвечать на на этот курл

Maksim

всмысле что за ответ time out/refused

Maksim

или что-то еще

Maksim

Перестаю отвечать по разному

Zhyhanov

No route to host

Maksim

А у тебя фланнел?

Zhyhanov

не вейв

Rainbow

не вейв

Maksim

а kube-proxy в режиме iptables ?

Maksim

херн редьки не слаще

Rainbow

И ещё не мешает ли ему фаервол или docker (вейву)

Zhyhanov

да дело в том что до этого работало без проблем

Maksim

докер не должен. cni все же

Zhyhanov

нет фаервол выключен, сеть плоская

Rainbow

да дело в том что до этого работало без проблем

чем кластер раскатан?

Rainbow

докер не должен. cni все же

докеру нужно iptables отключать

Zhyhanov

кубеадм

Narek

да дело в том что до этого работало без проблем

иногда weave залипает вот так. Я на практике решал это ребутом проблемной ноды

Zhyhanov

и что самое тупо что нечего не делал, на серверах

Zhyhanov

иногда weave залипает вот так. Я на практике решал это ребутом проблемной ноды

это мастер и уже бутал :(

Maksim

скорее farewalld -) iptables в чистом виде отключить всех нельзя-)

Zhyhanov

скорее farewalld -) iptables в чистом виде отключить всех нельзя-)

именно его, сорри не то написал

Maksim

вообщем первое убедись что есть правило в таблице nat

Rainbow

скорее farewalld -) iptables в чистом виде отключить всех нельзя-)

ну да, ufw и тп

Zhyhanov

вообщем первое убедись что есть правило в таблице nat

есть

Maksim

можно попробывать так iptables -t nat -L |grep <имя сервиса>

Maksim

тогда копай свой вейв(

Maksim

ну и то что оно не реджектит а днатит на под

Zhyhanov

-A KUBE-NODEPORTS -p tcp -m comment --comment "default/frontend-service:" -m tcp --dport 30005 -j KUBE-MARK-MASQ -A KUBE-NODEPORTS -p tcp -m comment --comment "default/frontend-service:" -m tcp --dport 30005 -j KUBE-SVC-F75FO42ZTGQVOSCN

Maksim

глянь цепочку KUBE-SVC-F75FO42ZTGQVOSCN

Maksim

это iptables-save что ли?)

Zhyhanov

да

Zhyhanov

Так для начинающего лучше все таки fluent сеть использовать ?

Maksim

ну я когда-то начинал с нее

Maksim

сейчас у меня ovs и калико в разных местах