чем гластер

Если хочется скорости - почему не nfs?

ну так задача - локальный диск, а не сетевой

для макс производительности

я понимаю, почему смотрят в сторону гластер "вау, быстро и удобно ставится" , и оно доезжает до прода, но потом одна нода падает и начинается анал-карнавал

за гластер мне хочется бить

каждый имеет право на выстрел в ногу

да, с гластером тоже опыт был, не очень удачный)

каждый имеет право на выстрел в ногу

когда-нибудь я приму это

ну так задача - локальный диск, а не сетевой

Так это просто вопрос протокола.

ну когда меня задолбает рассказывать

У тебя будет 10 нод и 10 nfs серверов)

нет, я просто говорю, что уж лучше нфс

Да я издеваюсь просто. Я не вижу проблем в околотематических разговорах, пока они не доезжают до "питон старее, чем пшп, а потому лучше".

А вот сервера смотрят на твои локальные ФС

если это разные nfs и под перезапустится, то он перезапустится на другой фс

А вот сервера смотрят на твои локальные ФС

Это к вопросу воркэраундов

если это разные nfs и под перезапустится, то он перезапустится на другой фс

Клонируй данные rsyncом.

мой воркэраунд проще)

мой воркэраунд проще)

Подними на выделенным сервере NFS)

ну так задача - локальный диск, а не сетевой

угу

ну так задача - локальный диск, а не сетевой

Я имел ввиду, что nfs можно использовать как обвязку для локальной ФС.

не понял)

не понял)

Как протокол.

Драйвер.

мой воркэраунд проще)

боюсь что вы несколько не понимаете задач k8s

не понял)

Смотри, ты не хочешь ceph или glusterfs потому что медленно, так?

боюсь что вы несколько не понимаете задач k8s

вы про everything ephemeral?

Смотри, ты не хочешь ceph или glusterfs потому что медленно, так?

Я тебе предложил. Обереги свои локальные ФС с помощью NFS.

Смотри, ты не хочешь ceph или glusterfs потому что медленно, так?

да. вообще чтобы БД в сеть не лезла

Я тебе предложил. Обереги свои локальные ФС с помощью NFS.

И отдай себе. Скорость будет ограничена шириной канала внутри кластера.

я поддержу мнение, что привязка к локалке - это антипаттерн

проблему сетевого диска понимаю, но либо на нем, либо вообще вне куба

я поддержу мнение, что привязка к локалке - это антипаттерн

В общем случае я соглашусь. Но тут как бы не паттерны просят, а решение.

тем не менее, этот антипаттерн делают https://github.com/kubernetes/community/pull/306

дак и редис тоже делают

(ba dum tss)

И отдай себе. Скорость будет ограничена шириной канала внутри кластера.

Не хочешь чтобы по сети гуляло - прибивай гвоздями роды кьнодам, если к8с умеет так. Но будь готов тогда к отказу от фэйловера

Не хочешь чтобы по сети гуляло - прибивай гвоздями роды кьнодам, если к8с умеет так. Но будь готов тогда к отказу от фэйловера

сейчас пока так и работает..

вы про everything ephemeral?

нет. Про то, что мы отделяем хранение данных от их использование. Хранение данных - сервис. Он абстрактен. Использование данных (к8 воркер) ничего не знает о хранении

но пока не сделают local PVs я не могу упростить себе жизнь хелмом

если вам надо быстро и локально - возьмите empty dir

но пока не сделают local PVs я не могу упростить себе жизнь хелмом

Они все-равно это сделают либо копированием содержимого между дисками, либо привязкой подов к нодам.

если вам надо быстро и локально - возьмите empty dir

я чуть выше об этом писал..

И тогда вопрос в том, нафига нужен кластер.

Они все-равно это сделают либо копированием содержимого между дисками, либо привязкой подов к нодам.

да, так и будет. это хотя бы позволит использовать PVs

да, так и будет. это хотя бы позволит использовать PVs

Ну так, блин, делай это руками rsyncом уже сейчас.

И при редеплое смотри где лежит под и завязывай на это создание pv на той ноде, которой хочешь.

Я либо чего-то не понимаю, либо не могу внятно объяснить, видимо.

как это сделать без скриптов?

чтобы взять пакет из хелма и он заработал?

и выжил после падения пода

stateful пода

как это сделать без скриптов?

Контейнер рядом. Внутри опрос api k8s и шаблон на pv+запуск rsync на клонирование.

и выжил после падения пода

использовать внешний провайдер PV

Контейнер рядом. Внутри опрос api k8s и шаблон на pv+запуск rsync на клонирование.

суть я понял

слушать ивенты и rsync если что

надо кодить. вот я и спросил, может уже есть у кого то опыт

слушать ивенты и rsync если что

Угу. Я просто ХЗ как хелм работает и каков его полный функционал.

надо кодить. вот я и спросил, может уже есть у кого то опыт

есть. Вы делаете странное и делать будет болезненно. Пересмотрите свою задачу.

надо кодить. вот я и спросил, может уже есть у кого то опыт

Да ну, какой там кодинг.

а что странного?

а что странного?

Потому что не надежно.

в том что я хочу чтобы БД работала с максимально производительным хранилищем?

Как копировать инфу с мертвого сервера?

вы думаете ваши облачные PV на 100% защищены от краха?

в том что я хочу чтобы БД работала с максимально производительным хранилищем?

Использовать максимально производиеютельное ВЫДЕЛЕННОЕ хранилище.

вы думаете ваши облачные PV на 100% защищены от краха?

Я думаю, тут вопрос вероятности.

тут вопрос баланса скорости и надежности

мне надо баланс сместить на скорость в текущей задаче

для надежности у меня есть реплики

вы думаете ваши облачные PV на 100% защищены от краха?

если за этим стоит какая-то система с репликацией, error codes или другим механизмом защиты данных - система готова потерять узел и выжить

Вы же тоже не на голых дисках все крутите, а используете всякие рейды, да и еще всякие сложности вида файловых систем. Можно поблоково же вычитывать и быстрее)))

а вы на каких хранилищах БД держите?

EBS?

Здесь сам вопрос странный. Прибить под к ноде - не проблема. Но страдает фэйловер. Но решать проблему так как вы хотите можно только в случае сбоя самого k8s. И это не решает проблемы выхода из строя сервера, например.

Вот поэтому и облачные хранилки.

Или специализированные решения типа отдельных полок, по FC, например с фэйловер-контрллем на уровне железа.

ну облачные PV - это черный ящик. не известно что там. может там hdd 10 летней давности, а может raid-10

да. у облака обычно доступность выше за счет рейдов, реплик. но от этого и цена и скорость

неизвестно что там в этой аптеке продают

может настой ромашки, а может плацебо

неизвестно что там в этой аптеке продают

Я не имел ввиду black-box. Я говорил про концепцию.

все таки вернусь к своему вопросу, может кто нибудь так же извращается как я и увидит это завтра - как вы используете helm на bare-metal?

На bare-metal тоже диски менять надо.

всем спокойной ночи) приятно было пообщаться

в том что я хочу чтобы БД работала с максимально производительным хранилищем?

кто сказал, что выделенное хранилище будет медленнее? FC 40G переплюент SSD RAID

все таки вернусь к своему вопросу, может кто нибудь так же извращается как я и увидит это завтра - как вы используете helm на bare-metal?

А ты можешь по русски сказать, что ты хочешь в конце получить? Опишите картинку полностью

ну облачные PV - это черный ящик. не известно что там. может там hdd 10 летней давности, а может raid-10

сделайте свой облачный PV, и вам будет известно, что там

сделайте свой облачный PV, и вам будет известно, что там

Вот я оба ваших комментария плюсану)

кто сказал, что выделенное хранилище будет медленнее? FC 40G переплюент SSD RAID

Стесняюсь спросить, а где вы FC на 40Gb видели ? -))) Они скейлятся по степени двойки как бы -)))

Расскажешь, как приземлить contrail на кубик?)

пока не готов )

пока не готов )

А жаль)

Будем ждать)

Не понятно правда зачем

Коллеги, а подскажите пожалуйста, как бы обезопасить кластер от зависаний\падений мастера? Кластеризация\дублирование мастера?

Коллеги, а подскажите пожалуйста, как бы обезопасить кластер от зависаний\падений мастера? Кластеризация\дублирование мастера?

Мультимастер, только так.

Т.е.? :)