та мне пофиг как хотите так и храните

Да там нет сарказма, мне рили интересно, что люди используют.

Да там нет сарказма, мне рили интересно, что люди используют.

А как нынче модно отказоустойчиво и целостно хранить стейт?

Я достаточно модный? :)

На самом деле я очень дофига SDS попробовать успел, включая самые экзотические

можно подробнее про вендорские решения. кого пробовали?

Предпочтение отдавалось в основном OpenSource-проектам: Ceph, BeeGFS, Lustre, RozoFS, Sheepdog, LizardFS

а ну я в опенсорсные сдс совсем не верю - это одна из немногих вещей где я считаю надо заплатить

ceph норм, если не обновлять

я не знаю, что там с сефом который блустор бэкенд, но мои знания мне подсказывают что любая дичь, которая натягивает себя поверх файловой системы имеет оверхеды

С чего посоветуете начать изучать k8s, не в бой что бы сразу было

С чего посоветуете начать изучать k8s, не в бой что бы сразу было

Для интенсивной записи/чтения он не годится. Или нужно очень много ресурсов на него

Выбор небольшой: кластерные базы (Кассандра, монга), либо SQL с репликацией и фейловером

Bluestor не сильно спасает, если что

для высоких нагрузок ресурсов много требуется эт факт вообще смотря для чего ceph мы пользуем для RGW (s3-like ) и кроме как ceph у нас других вариантов нет из опенсорс разве что писос, который поверх касандры но смысла на него ливать опять таки нет потому что в писосе paxos

меня интересуют только решения, которые отдают блочное устройство, в идеале они дожны отдавать его напрямую с себя, а не нарезать какие нибудь qcow2 поверх своей фс

С чего посоветуете начать изучать k8s, не в бой что бы сразу было

Тогда Linstor тебе отлично зайдет

меня интересуют только решения, которые отдают блочное устройство, в идеале они дожны отдавать его напрямую с себя, а не нарезать какие нибудь qcow2 поверх своей фс

я бы еще конечно хотел все нормальные вендорские вещи: автоматический тиринг, дедупликацию, онлайн компрессию, эрейжа кодинг для холодных данных

Тогда возможно тебе будет интересен StorPool, но говорят он очень дорогой

я бы еще конечно хотел все нормальные вендорские вещи: автоматический тиринг, дедупликацию, онлайн компрессию, эрейжа кодинг для холодных данных

Есть, кстати очень интересная RozoFS - она чисто под Ereasure Coding заточена. В прод я ее не рекомендую, но посмотреть на нее стоит. У нее очень интересная архитектура. Например под каждый bucket может быть заюзанно только строго определенное количество нод: 4, 8 или 16 (не больше и не меньше) Когда одна из нод падает - нет никакой репликации, недостающие данные просто вычисляются на оставшихся нодах в момент обращения.

c linux

Смешно, может тогда с включения пк?

Да, тем более там FUSE

Коллеги подскажите плиз, поднимаю кубер с помощью kubeadm в учебных целях ноды 3 мастера 3 воркера все в статусе ready, но в логах kubelet на всех нодах есть ошибка Failed to get system container stats for "/system.slice/kubelet.service": failed to get cgroup stats for "/system.slice/kubelet.service": failed to get container info for "/system.slice/kubelet.service": unknown container "/system.slice/kubelet.service" ничего путного пока не нагуглил :( подскажите куда копнуть если знаете

docker 1.13.1 кубер 1.12.2 ставил kubeadm 1.12.2

Ещё попробуй обновить докер до 18.06

👍

да какая разница 😉