Ставил же

Уже помнил по вашей наводке про свой аккаунт на GKE)) поднял виртуалку 7 редхата и всё настроил

Привет всем! Хочется настроить GlusterFS/NFS хранилище на bare-metal кластере кубернетес с 2-3 нодами. Довольно много информации, и честно говоря не очень понимаю, с чего начать. Можете что-нибудь посоветовать на почитать в эту тему?

я бы не советовал глючстер

Да, уже увидел, что оно не отказоустойчиво. Думал о том, чтобы Gluster по протоколу NFS юзать, но, видимо, тоже не очень

Энивей, хочется какую-нибудь стартовую точку увидеть

с чего начать?)

NFS тоже такое себе

Иных вариантов нет, к сожалению

Уже помнил по вашей наводке про свой аккаунт на GKE)) поднял виртуалку 7 редхата и всё настроил

Велкам

Работает же?

Велкам

Спасибо большое за помощь!

"динамика"

:D

Иных вариантов нет, к сожалению

самбу, хех.

Господа, кому не сложно, поделитесь личным опытом, как деплоите микросевисное приложение в кубернейтс. Монорепа/разные репы, как сам деплой проходит (по одному/сразу все), с помощью чего, где собирается, откуда деплоится, деплоится по пушу, мёрджу, ручками и всё такое. Пытаюсь собрать немного статистики

по тегу, CI - drone. по конкретному сервису (с сохранением старой версии, пока все сервисы не переедут на новую версию апи)

1) Разные репы 2) По одному 3) envsubst | kubectl apply -f 4) Тимсити на каждый коммит собирает образ, по сборке образа в ветке мастер заливает на stage окружение, на прод кнопкой из тимсити.

Jenkins, develop-master, deploy on push

Да, уже увидел, что оно не отказоустойчиво. Думал о том, чтобы Gluster по протоколу NFS юзать, но, видимо, тоже не очень

почему не отказоустойчиво. нормально работает, без проблем

Он правда чувствителен к скорости сети, геораспределённый кластер на неём лучше не делать

почему не отказоустойчиво. нормально работает, без проблем

https://habr.com/post/140031/

Я вот на такую статью наткнулся

коменты интересны :)

12 год, серьёзно?

да хрен его знает =)

Проверяли ли подобный кейс?)

года 4 назад пробовал на нём держать виртуалки kvm и тогда он себя плохо показывал. Сейчас думаю ситуация иная всётаки его редхат выкупил.

У меня в кубере крутится года 2 нарверное без проблем

и монга там и постгресс и статика

хы А по каким мануалам настраивали?

У меня +- тоже самое планируется. Я бы покрутил

ничего сверх того что описано в родных глустеровских мануалах не делал

хм, ок

Кстати, а какую нагрузку на проде оно держит? Какая нагруженность у вас?

Если не секрет, конечно

Ну там обычные диски, не ssd. Какая статистика нужна?

Интересно, какой объем данных гоняется по сетке в секунду/минуту, как минимум. У нас просто хайлоад, и приходится дико извращаться из-за невозможности нормальную, физическую хранилку сделать

есть некие опасения что сетка ляжет тупо

NFS у нас крутится, но не справляется. По этому вот. пробуем Gluster

у меня сейчас там процесс миграции и если включить процесс profile он ничего не даст, потому что нагрузка снята.

NFS у нас крутится, но не справляется. По этому вот. пробуем Gluster

реплекацию какого уровня планируете?

Сейчас пока, демонстрации ради, поставили "Replicated Glusterfs Volume" на двух нодах

Бета-версию продукта на него пересадим, посмотрим как пойдет

Сейчас пока, демонстрации ради, поставили "Replicated Glusterfs Volume" на двух нодах

вам нужен именно nfs или всё равно что маунтить на хост?

Мне нужно то, выдержит нагрузку и будет достаточно отказоустойчивым х) Пока что на нее только статика ляжет. В перспективе постгря/монга

Пока что смотрю в сторону родного протокола гластера, раз кубернетес с ним работает адекватно

Пока что смотрю в сторону родного протокола гластера, раз кубернетес с ним работает адекватно

https://docs.gluster.org/en/v3/Administrator%20Guide/NFS-Ganesha%20GlusterFS%20Integration/#using-highly-available-active-active-nfs-ganesha-and-glusterfs-cli

О! Спасибо.

Это конечно не исилон, который на каждый запрос раундробином меняет айпишник nfs сервера, но HA позволяет строить и привязка к виртуальному ip

Шик, буду копать. Спасибо за направление

Я бы подождал gluster 4.1

Ктото глустер в проде катает? 0_о

говорят да

0_о

говорят даже есть большие инсталяции

Маньяки)

правда с платной тех поддержкой

ERROR: S client not available

глустер хорош когда нужно быстро поднять кластер для теста или дева

Он очень простой в конфигурировании и управлении, тем и подкупает

и архитектура у него интересная

Раньше он был очень чувствителен к скорости сети. Сейчас не зна, но думаю что всё равно не стоит его собирать на гео разнесённых нодах.

У нас сейчас серваки в одной подсетки и проблем не возникает, даже при многократном падении ноды, с отключением питания и т.д. Данные не теряются

и да, версия у нас 3.10

Добрый день. В добровольно-принудительном порядке, пытаюсь начать осваивать кубер. Может кто-то подсказать по Racher и поднятием класстера на AWS EC2?

Добрый день. В добровольно-принудительном порядке, пытаюсь начать осваивать кубер. Может кто-то подсказать по Racher и поднятием класстера на AWS EC2?

https://t.me/rancher_ru

?

Пихают пацана из чатика в чатик)

))

Да блиин

Сорян)

Dmitry @volarenege спасибо!

Да блиин

Я думаю тебе проще сразу сформировать вопрос)

Dmitry @volarenege спасибо!

За?

Да блиин

Но что-то там народу мало, наверное лучше тут спрашивать)

скажите - по google cloud есть еще чатик или тут есть знающие люди?

Суть. Есть rancher поднятый в docker. При помощи него пытаюсь создать кластер на AWS EC2. Делаю шаблон. Создаю класстер из одно машины, туда ставится RancherOS. Тачка в AWS поднимается, создается Sec.group-а, но сам rancher далее класстер не видит и висит в начальном этапе рагется на API

Может у кого то есть какая интсрукция актуальная

Ребтяки , а ктото может посоветовать бест практис для деплоя в куб юзая женкинс?

а чо даёт ранчер вообще по сравнению с голым кубером?

в контексте aws + kops

Ребтяки , а ктото может посоветовать бест практис для деплоя в куб юзая женкинс?

Присоединяюсь к вопросу

Мне не очень понятно, что вы подразумеваете под бест практис. Есть обязательная часть, которая кончается kubectl/helm/etc и отправляет конфу в куб, всё остальное сильно зависит от ваших задач. О чем вы хотите услышать?

завожу под из такого yaml: apiVersion: v1 kind: Pod metadata: name: envs spec: containers: - name: gogo image: golang:1.10.3-alpine3.7 ports: - containerPort: 9999 env: - name: SIMPLE_SERVICE_VERSION value: "1.0" после старта все идет ок а потом почему то в перезапуск Normal SuccessfulMountVolume 3m kubelet, gke-cluster-1-default-pool-2e3a27e6-4wpv-1 MountVolume.SetUp succeeded for volume "default-token-ljhf6" Normal Pulling 3m kubelet, gke-cluster-1-default-pool-2e3a27e6-4wpv-1 pulling image "golang:1.10.3-alpine3.7" Normal Pulled 2m kubelet, gke-cluster-1-default-pool-2e3a27e6-4wpv-1 Successfully pulled image "golang:1.10.3-alpine3.7" Normal Created 1m (x4 over 2m) kubelet, gke-cluster-1-default-pool-2e3a27e6-4wpv-1 Created container Normal Started 1m (x4 over 2m) kubelet, gke-cluster-1-default-pool-2e3a27e6-4wpv-1 Started container Normal Pulled 1m (x3 over 2m) kubelet, gke-cluster-1-default-pool-2e3a27e6-4wpv-1 Container image "golang:1.10.3-alpine3.7" already present on machine Warning BackOff 1m (x5 over 2m) kubelet, gke-cluster-1-default-pool-2e3a27e6-4wpv-1 Back-off restarting failed container Warning FailedSync 1m (x6 over 2m) kubelet, gke-cluster-1-default-pool-2e3a27e6-4wpv-1 Error syncing pod

как понять куда копать?

как понять куда копать?

какой там entry point у контейнера? мб дело в этом?

какой там entry point у контейнера? мб дело в этом?

ммм а можно чуть подробнее ? я не указал его, не знал что нужен. мне просто нужна linux + golang