В Kubernetes можно подключать 1 persistent volume к несколькоим подам?

(в качестве хранилща используется CephFS)

В Kubernetes можно подключать 1 persistent volume к несколькоим подам?

Должно уметь, просто используется не RWO, RWM или как оно зовётся

В Kubernetes можно подключать 1 persistent volume к несколькоим подам?

ReadWriteMany

При добавлении реплик (горизонтальном масштабировании), насколько я понимаю, новые контейнеры создаются на рандомных подах (или, в зависимости от нагруженности под)

При добавлении реплик (горизонтальном масштабировании), насколько я понимаю, новые контейнеры создаются на рандомных подах (или, в зависимости от нагруженности под)

++

Вот, и мне нужно, чтобы все реплики использовали одно хранилище Cepg

*ceph

Вот, и мне нужно, чтобы все реплики использовали одно хранилище Cepg

Pv с readwritemany

Или cephfs

Я как раз CephFS хочу использовать с ReadWriteMany

Потому как с RBD это не имеет смысла

Я как раз CephFS хочу использовать с ReadWriteMany

Тогда просто один маунт)

Т.е. мне сначала нужно создать StorageClass, где я укажу, куда у меня примонтирован CephFS на серверах, потом создать PVC и при создании контейнеров приложения в секцци volumes указать этот PVC?

Т.е. мне сначала нужно создать StorageClass, где я укажу, куда у меня примонтирован CephFS на серверах, потом создать PVC и при создании контейнеров приложения в секцци volumes указать этот PVC?

На память вроде cephfs напрямую деплойменту скармливаешь

Сча проверю

Сразу указывать при создании пода?

Сорян, в дороге

Сразу указывать при создании пода?

Да

@Asgoret

@Asgoret

;)

;)

Thx)

Можно ли разворачивать CephFS на DO чисто для тестов?

У них там сеть 100 mbit/s между нодами

Можно ли разворачивать CephFS на DO чисто для тестов?

Тесты - да

(в качестве хранилща используется CephFS)

Если ceph то да

У них там сеть 100 mbit/s между нодами

Очень мало для ceph

У них там сеть 100 mbit/s между нодами

Там в лучшем случае гигабит нужен или fibre сhannel

Там в лучшем случае гигабит нужен или fibre сhannel

Я думаю, 100 мбит хватит, т.к. скорость соединения между сервером и клиентом точно меньше

20-30 мбит/с, ну 70 максимум

Или я неправ?

Цефу 10г надо, лучше 40. Хотя смотря что ожидать. Со 100 мбит можно с малыми объёмами тестить и с никакой нагрузкой

Цефу 10г надо, лучше 40. Хотя смотря что ожидать. Со 100 мбит можно с малыми объёмами тестить и с никакой нагрузкой

Я 40 г на vds не найду. Тут надо уже железку покупать

Или я неправ?

Ага. Если у тебя Ceph как минимум 1гигабит, а как советуют выше 10 будет в самый раз. Иначе писец у тебя будет. такова архитектура цефа

Смотря что ждать и какой объем данных. Если там пара иопс и 100кб/сек нагрузка, то потянет

Смотря что ждать и какой объем данных. Если там пара иопс и 100кб/сек нагрузка, то потянет

+

Мне пару сайтов для тестов захостить надо

Блог на wp

у меня 10г только на ребилдах загружались, и то не всегда даже и половину

Мне пару сайтов для тестов захостить надо

А зачем там цеф тогда?

И сайтиу на джанге

Дак да, вся жопа начинается при бэкфиле. И оперативки там надо море и канал хороший

Но опять таки от объёмов зависит. Может и не будет жопы :)

А зачем там цеф тогда?

А ceph затем, что потом я буду хостить интернет-магазин, и мне нужна отказоустойчивость. Вот упадет у меня единственная нода, и магазин накроется.

ИМ буду хостить уже на barr metal

А это пока для тестов

А ceph затем, что потом я буду хостить интернет-магазин, и мне нужна отказоустойчивость. Вот упадет у меня единственная нода, и магазин накроется.

Омг. Цеф быстрее упадёт чем интернет магазин ??

А ceph затем, что потом я буду хостить интернет-магазин, и мне нужна отказоустойчивость. Вот упадет у меня единственная нода, и магазин накроется.

Две ноды с репликацией и балансировщиком

С хелсчеками, естессна

Или iscsi двухпортовый. На две ноды самое то (bare metal)

Омг. Цеф быстрее упадёт чем интернет магазин ??

Почему? Скорости и железо будет другое

А ceph затем, что потом я буду хостить интернет-магазин, и мне нужна отказоустойчивость. Вот упадет у меня единственная нода, и магазин накроется.

Вам проще автоматизацию сделать чтобы магазин разворачивался за 5 минут в DO, чем ceph городить

Тем же терраформом. Подготовив снапшоты дроплетов

Почему? Скорости и железо будет другое

Не важно. Если вы там не амазон разворачиваете, то нафиг цеф не нужен. Есть 100500 вариантов сделать дешевле и лучше, и спать спокойно )

У тех же firstvds для облачных серверов используется ceph rbd

Ну и пока просто поиграться хочется

minio бы за глаза хватило

У тех же firstvds для облачных серверов используется ceph rbd

Посмотрите в сторону ECR, или аналог у Гугла. Для магазина достаточно хостить докер контейнеры с managed db.

Про cephfs - редкостное дерьмо, кстати.

У тех же firstvds для облачных серверов используется ceph rbd

В том то и разница что у них 100500 чужих виртуалок))) а не просто один сайтик.

Про cephfs - редкостное дерьмо, кстати.

А какую сетевую ФС тогда можно использовать ?

А какую сетевую ФС тогда можно использовать ?

Тебе точно нужна распределённая фс?

да

Необязательно для магазина, просто интересуюсь ъ

Гластер есть ещё и куча платных

Я слышал, что glusterfs хуже, чем ceph (склонна сбоить)

Я слышал, что glusterfs хуже, чем ceph (склонна сбоить)

хаха) Одно время пытался гластер юзать) с fuse драйвером ловить точно нефиг)

Поэтому стоит использовать Ceph

Ceph стоит использовать если он нужен)) а не по тому что гластер у сына мамкиной подруги не встал

Поэтому стоит использовать Ceph

@ceph_ru там вас отговорят

@ceph_ru там вас отговорят

+++++++

Я понимаю, что Ceph глючный, но мне хотелось бы выбрать наименьшее из зол

Я понимаю, что Ceph глючный, но мне хотелось бы выбрать наименьшее из зол

Ты делаешь такие громкие заявления будто уже оба попробовал.

Хорошо

Я понимаю, что Ceph глючный, но мне хотелось бы выбрать наименьшее из зол

Ceph не глючный, его просто нужно уметь готовить и поддерживать и как правило он ломается по причине "кривые руки"

Тогда так

Выбирать надо по параметрам и по запросам своим.

Так то хоть на hdfs можно взлететь ??

Тоже себе распределённая фс

Тогда можно забить на распределённые ФС вввроде gluster или ceph и развернуть всё в Google Cloud, а в качестве persistent volumes использовать gce persistent disk

Тогда можно забить на распределённые ФС вввроде gluster или ceph и развернуть всё в Google Cloud, а в качестве persistent volumes использовать gce persistent disk

Воооот я к тому и веду. Если нет времени и сильной потребности в одной или другой фс, не надо их брать. Это окончится переходом в тот тип админов которые делают бекапы.

Тогда можно забить на распределённые ФС вввроде gluster или ceph и развернуть всё в Google Cloud, а в качестве persistent volumes использовать gce persistent disk

Вообще k8s идет сам по себе с интеграцией с Iaas, поэтом самый оптимальный способ

И странный вопрос - можно ли использовать gce диски, но сам vds, к примеру, от DO или AWS? Не скажется ли это на скорости?////////////

И странный вопрос - можно ли использовать gce диски, но сам vds, к примеру, от DO или AWS? Не скажется ли это на скорости?////////////

По мне это практический чисто вопрос, ответ на который покажут тесты.

И странный вопрос - можно ли использовать gce диски, но сам vds, к примеру, от DO или AWS? Не скажется ли это на скорости?////////////

Wat? Как ты диски с амазона зацепишь в DO?

Какие отзывы о http://lustre.org/ ?

Wat? Как ты диски с амазона зацепишь в DO?

Я хочу, чтобы у меня vds был от digitalocean, а вот хранилище от google cloud (gce persistent disk). Почему нет?

apiVersion: v1 kind: Pod metadata: name: test-pd spec: containers: - image: k8s.gcr.io/test-webserver name: test-container volumeMounts: - mountPath: /test-pd name: test-volume volumes: - name: test-volume # This GCE PD must already exist. gcePersistentDisk: pdName: my-data-disk fsType: ext4 Что мне мешает сделать вот так?

Я хочу, чтобы у меня vds был от digitalocean, а вот хранилище от google cloud (gce persistent disk). Почему нет?

что-то вроде физического "доступа к диску не будет"?

apiVersion: v1 kind: Pod metadata: name: test-pd spec: containers: - image: k8s.gcr.io/test-webserver name: test-container volumeMounts: - mountPath: /test-pd name: test-volume volumes: - name: test-volume # This GCE PD must already exist. gcePersistentDisk: pdName: my-data-disk fsType: ext4 Что мне мешает сделать вот так?

То что у тебя на DO нет gcePersistentDisk например )))

Т.е. использование хранилища от gc обязывает меня использовать и виртуалку от gc?