@kubernetes_ru
Dmytro05.06.2018
22:22:34
22:22:34
так и живем
Dmitry05.06.2018
22:28:07
22:28:07
Всем привет! Никак не могу понять как решить одну задачу (( Надо стартовать несколько инстансов postgresql внутри kubernetes, каждый под своим специфичным DNS именем (по корпоративной конвенции).
Ingress не подходит, так как надо подключаться под портом 5432, а Ingress поддерживает только 80 и 443
В сильно крайнем случае, хотя бы сделать так, чтобы под этими доменными именами инстансы постгреса были доступны внутри кластера, но Service нельзя назначить кастомные DNS.
Кластер развернут на bare metal, coreos и tectonic
Помогите, что и где я не понимаю? )
Направить днс записи на прокси, который будет перенаправлять на NodePort для каждого отдельного сервиса(поверх отдельного деплоймента) постгри в кубере?
Andor05.06.2018
22:28:55
22:28:55
какой прокси?
Dmitry05.06.2018
22:28:58
22:28:58
Это не решает проблему dns внутри кубера, но это же «в сильно крайнем случае»
GoogleAndor05.06.2018
22:29:04
22:29:04
pgbouncer что ли?
о, я придумал самый костыльный (на текущий момент) способ!
iptables'ами перенаправлять подключения к оригинальному хосту на тот сервис который хочется!
Михаил05.06.2018
22:30:35
22:30:35
я три раза перечитал пост и не понимаю проблему внутри кубера
если доступ к пг нужен только из кубера
а
у них у всех одно имя должно быть?
Andor05.06.2018
22:31:53
22:31:53
ага
Михаил05.06.2018
22:32:13
22:32:13
но при этом они разные?
Andor05.06.2018
22:32:22
22:32:22
ага
Dmitry05.06.2018
22:33:27
22:33:27
GoogleDmytro05.06.2018
22:33:30
22:33:30
ну легаси, а что вы хотели
Andor05.06.2018
22:33:32
22:33:32
ну я думаю там тупо в разных неймспейсах каждый тест будет запускаться
и потом весь нс грохаться
Михаил05.06.2018
22:35:53
22:35:53
ну если в том же NS то средствами RBAC запретить за выход из NS
и вписать в DNS все postgres сервера
раунд робином мы упремся только в один живой
который будет в нашем NS
да, не эффективно, но и задача так себе)
Amir06.06.2018
03:42:02
03:42:02
гайз а кто-то может подсказать по rancher + ssl?
Andor06.06.2018
04:37:59
04:37:59
Кто с калико работал? Как ему задать размер подсетей на ноду?
Mikhail06.06.2018
05:41:43
05:41:43
Чо, в ямле нет да? /24 подходит всем? :)
Maksim06.06.2018
07:02:01
07:02:01
24 это 253 адреса. Учитывая что больше 100 подов на ноде не гуд /25 то же хватит
Maksim06.06.2018
07:03:07
07:03:07
Дык там в конфиг мапе есть POD CIDR
Andor06.06.2018
07:03:21
07:03:21
продолжай
Maksim06.06.2018
07:09:57
07:09:57
Хе а конечный пул реально нельзя задать.
GoogleAndor06.06.2018
07:10:42
07:10:42
ну то есть ответ "задать нельзя, кушайте /24" - тоже ответ
Maksim06.06.2018
07:11:27
07:11:27
Нет можно-)
https://docs.projectcalico.org/v3.1/usage/configuration/node
ТОлько надо ли оно-)
Михаил06.06.2018
07:14:50
07:14:50
Михаил06.06.2018
07:15:47
07:15:47
Andrey06.06.2018
07:15:53
07:15:53
@Andorka эээ а разве не 26 https://github.com/projectcalico/libcalico-go/issues/761
Andor06.06.2018
07:17:15
07:17:15
ну вот у нас почвему-то /24 вылезло
ладно, щас коллега дойдёт и перепроверит
Roman06.06.2018
08:26:05
08:26:05
Я тоже вижу в исходниках /26, но по факту
/etc/calico/confd/config/bird_aggr.cfg: # Block 10.20.27.0/24 is confirmed
это на quay.io/calico/node:v3.1.1
Andrey06.06.2018
08:29:02
08:29:02
у меня 2.6.8
Andor06.06.2018
08:29:34
08:29:34
покажи шаблон бёрда на 2.6
Roman06.06.2018
08:29:55
08:29:55
https://github.com/projectcalico/libcalico-go/blob/master/lib/ipam/ipam_block.go#L44
я тоже вижу тут
> BlockPrefixLength: 26,
шаблон только выгребает из api блок, в нем самом нет логики
Andrey06.06.2018
08:32:37
08:32:37
@Andorka https://github.com/projectcalico/felix/tree/2.6.7/etc/bird
GoogleAndor06.06.2018
08:42:32
08:42:32
не, с живых нод можешь показать какая маска в конфиге получается?
@inish777 можешь на реальной ноде калико посмотреть в конфиг бёрда?
Andrey06.06.2018
08:50:12
08:50:12
вот зараза
function calico_aggr ()
{
if ( net = 10.233.79.64/26 ) then { accept; }
if ( net ~ 10.233.79.64/26 ) then { reject; }
}Andor06.06.2018
09:00:28
09:00:28
ну короче у тебя в шаблон уже приходит нормальное /26
Anton06.06.2018
09:50:49
09:50:49
Имеет смысл postfix закинуть в кубер (внешний volume ceph)?
Михаил06.06.2018
09:55:05
09:55:05
ну если тебе хочется, то почему нет?
Anton06.06.2018
09:56:58
09:56:58
просто придется делать net=host - толку от этого?
Михаил06.06.2018
09:59:11
09:59:11
выставить наружу?
Anton06.06.2018
09:59:52
09:59:52
ну да
Anton06.06.2018
10:01:13
10:01:13
кубер просто как демон сет
Михаил06.06.2018
10:02:03
10:02:03
я про сеть
Anton06.06.2018
10:04:13
10:04:13
Кстати про external ип, не понял что происходит если extrnal ip c 3 разных нод назначить?
Михаил06.06.2018
10:05:45
10:05:45
еще раз, зависит от твоего конфига сети
GoogleМихаил06.06.2018
10:06:44
10:06:44
если у тебя какой-нибудь flanel, то я бы повесил external IP на ноде с апи и не парился ну или на любой ноде где запущен kube-proxy
Михаил06.06.2018
10:08:46
10:08:46
ну повесь айпишник да попробуй
Anton06.06.2018
10:09:31
10:09:31
ну надо какой нить сервис замутить, на живую боязно =)
Yu06.06.2018
10:19:02
10:19:02
проблема не в этом, проблема в том, что у меня есть сотня компонент, которые ожидают постргрес инстансы по доменам at1.example.com и порту 5432
В качестве идеи: поменять имя кластера (не проверял). Тогда сервисы будут видны под dns записями вида servicename.namespace.svc.clustername.comНу и посмотреть в сторону /etc/resolv.conf в поля search
Andrey06.06.2018
10:21:12
10:21:12
Кстати про external ип, не понял что происходит если extrnal ip c 3 разных нод назначить?
Все в порядке. У меня calico, все работает. По паре floating ip, хотя сами поды на других нодахAnton06.06.2018
10:22:18
10:22:18
Maksim06.06.2018
10:22:19
10:22:19
Ну и посмотреть в сторону /etc/resolv.conf в поля search
Да же смотреть не надо. изначально ставить короткое dns имя типа art1. Кубер сам добавить всё необходимое в resolv.conf что бы шёл резолв. В проде нужно озаботиться о правильной search записи.Михаил06.06.2018
10:22:20
10:22:20
ну надо какой нить сервис замутить, на живую боязно =)
возьми busybox или что-то с ssh да выстави наружуAndrey06.06.2018
10:23:35
10:23:35
Там у виртуалок плавающий ip дешевый, в отличие от железных нод
Maksim06.06.2018
10:24:30
10:24:30
Anton06.06.2018
10:24:32
10:24:32
а дц собственный?
Аналогично, просто я немного не доганяю ip / подсеть привязана к серваку, как он у вас плавает?Maksim06.06.2018
10:24:44
10:24:44
у него должен быть LB интеграция для Кудера
Открыть в Telegram