inqfen
Ну и IaC в том числе емнип
inqfen
Надо поискать, где-то в буржуинских гайдах встречал, что развертывание - описание взаимодействия с инфраструктурой и следуя IaC - нужно в одном репе описать инфраструктуру, а в репе приложения - его взаимодейтсвие с ней, деплой в том числе
inqfen
Но могу за давностью времени чтения помнить хреново
Dmitry
Привет. Помогите советом. Нужно поднять Kubernetes кластер на своей инфраструктуре. Как решение рассматриваю kubespray. Есть у вас какие-то отзывы о нем ?
inqfen
проще юзай kubeadm/rke
inqfen
Если не хочешь чего-то странного, что есть только в кубспрее
Kane
либо да rke
Kane
Зачем отдельный реп?
типа все деплои в одном месте, кажется удобно
Kane
но я понял, идея с ансиблом мне подходит вполне, попробую и так и ждак )))
Dmitry
Я планировал 2 мастера и 5 нод. Но прочитал что для etcd необходимо нечетное кол-во машин. Можно ли одну реплику etcd поднять не на мастере? Или нужно 3 мастер?
Kane
Не совсем
а в чем подводные камни?
inqfen
Деплой напрямую связан с кодом, зачем его куда-то убирать
Михаил
Не совсем
Мне кажется это опционально
George
просто имей в виду, что он кушает диск. Нормально так
inqfen
а в чем подводные камни?
Например для деплоя нужно собрать по в докер, где докерфайл должен быть?
George
поэтому мешать етсд и другую нагрузку... ну, можно очень больно выстрелить себе в ногу
inqfen
поэтому мешать етсд и другую нагрузку... ну, можно очень больно выстрелить себе в ногу
Ну обычно etcd на мастерах, минимальное время доступа и не нагрузок
Kane
Например для деплоя нужно собрать по в докер, где докерфайл должен быть?
да согласен, докерфайл с кодом, тогда проще из этого же репа деплоймент запустить
Vadim
Например для деплоя нужно собрать по в докер, где докерфайл должен быть?
сборка приложения - в нем самом, а вот конфигурация деплоя отдельно ящитаю - на стейдже и проде разное кол-во реплик, HPA и другие конфигмапы
Kane
что такое HPA?
Dmitry
просто имей в виду, что он кушает диск. Нормально так
Кушает в плане дискового пространства или I/O?
inqfen
Ну и те же конфигмап-странно, если у тебя staging и production сильно отличаются, иначе ты тестируешь одно а на прод льешь уже нечто другое
Vadim
Это все прекрасно шаблонизируется / выносится в переменные деплоя
если вы один девопс в компании - то да, можно и так конечно
Vadim
что такое HPA?
Horizontal Pod Autoscaler
inqfen
Я не один и у нас все прекрасно так живёт
Pavel
коллегие, при джойне ноды получаю следующее [discovery] Failed to request cluster info, will try again: [the server has asked for the client to provide credentials (get configmaps cluster-info)]
Pavel
помогите, кто чем может
Pavel
идеи уже просто кончились
George
Кластер сам рабочий ? Какова его конфигурация?
UglyKoyote
где поднимаешь? я тут по незнанию хлебнул проблем поднимая кластер на базе ВМок поднятых через вагрант+виртуалбокс
Pavel
Кластер сам рабочий ? Какова его конфигурация?
надо еще уточнить что просрочились сертификаты, я их обновил kubadm, кластер взлетел, но две ноды выпали, одну ноду удалил и решил заджойнить снова
Stefan
а в каких случаях становится необходимым использовать istio/maesh и тд?
Andrey
ну вот пример {% for host in groups['worker'] %} - address: "{{ hostvars[host]['external_address'] }}" internal_address: "{{ hostvars[host]['internal_address'] }}" role: [worker] user: "{{ ssh_user }}" hostname_override: "{{ hostvars[host]['name_tag'] }}" labels: {{ worker_labels }} {% endfor %} что тут неудобного
неудобно структурированный объект делать в виде текстового файла. Если делать сам объект, то возможные ошибки поймаются в build time или даже подсветятся в ide. Текстовый файл будет процессится уже в runtime
⌬ Дмитрий ⌬
Коллеги возник вопрос интересный: есть достаточное количество jobs в кластере, и наблюдается интересная картрина: задача стартует по расписанию, но спустя время прилетает алерт что задача выполняется более часа, и спустя еще алерт что таска зафейлилась. И постоянно в канал идут алерты. Далее такая же таска выполняется в другое время и все проходит нормально. Так вот как можно присечь такое поведение, чтоб алерты от "древних тасок" не алертили, если после нее уже все работает? У кого то такое было? и как такое решить?
Андрей
Какие есть готовые имаджи с kubectl для gitlab-ci?
VolanDeVovan
С хелмом вроде есть
Vadim
Обожаю когда очередной принципал девопс просыпается и давай нас учить как правильно деплоить
inqfen
Какие есть готовые имаджи с kubectl для gitlab-ci?
А тебе только kubectl надо или ещё что-то? Если ещё что-то, проще свой сделать
Андрей
Только kubectl
Anton
привет всем. Стоит ингресс контроллер Траефик. скажите, как можно прокинуть TCP порт? например порт бази данних
Anton
нод порт не канает немного( либо внутри как то что бы в кубере был доступен порт 3306 на всё
Andrey
Только kubectl
В гугол ходил?
Андрей
Да,один нашёл даже но он не официальный
Andrey
Да,один нашёл даже но он не официальный
Вот например. Выглядит достаточно официально) https://hub.docker.com/r/bitnami/kubectl/
Андрей
2 года ему
Андрей
У нас сейчас самый последний кластер
Solyar
Указать тип TCP
Anton
Ну банально порт/таргетпорт
в сервисах ? а тип сервиса какой ?
Solyar
в сервисах ? а тип сервиса какой ?
Обычный сервис. Вы же в него через ingress будете ходить?
Anton
суть в чем. нужно что бы порт 2511 был доступен ко всем подам кластера.
Anton
не через ингресс
Anton
но если есть вариант пробросить его наружу как то то тоже пойдет
Terry
У нас сейчас самый последний кластер
а что мешает скачать бинарник или самому собрать?
Anton
что бы коннектились так tcp://service-name:2511
Anton
я чё то не пойму как так сделать. в поде порт 2511 а как дать доступ этому порту ко всему кластеру
Solyar
суть в чем. нужно что бы порт 2511 был доступен ко всем подам кластера.
Ну банально создаете сервис с типом кластерип с порт/таргетпорт. Поды смогут ходить только внутри кластера на этот порт а сервис если надо будет перенаправлять трафик на таргетпорт в деплоймент (или не будет)
Anton
что собственно не так ??
Anton
понял. старый нужно было грохнуть
Alexander
что собственно не так ??
targetPort: 2551 убрать?
Solyar
Хотя если он одинаков то тоже можно
Anton
Убрать type
сделал так spec: ports: - name: dataport port: 2551 targetPort: 2551 protocol: TCP \ ClusterIP 10.106.110.120 <none> 2551/TCP
Anton
но другие поды на 2551 не попадают