но задача репликации чанков решается на уровне блочного устройства

ну, то бишь либо NFS либо кластерная fs нужны

Именно, minio работает поверх фс, есть возможность запустить его на нескольких хостах, но тогда он будет с Erasure coding работать, к сожалению это ещё медленнее

Либо можно запустить его поверх shared fs, тогда получится примерно то что вы хотите

Ceph на чтение действительно не плох, но вот на запись...

Я перестал любить слова плохо и хорошо. Только бенчмаркинг

а в minio несколько server-нод могут шарить один блочный сторадж?

А что, туда завезли блочный сторадж?

А что, туда завезли блочный сторадж?

нет, но кто мешает зарустить поверх своего?

Кстати s3 это не только CEPH и minio, есть ещё варианты поверх касандры

Кстати s3 это не только CEPH и minio, есть ещё варианты поверх касандры

еще есть вендорские железки

нет, но кто мешает зарустить поверх своего?

Ну так то ничего, я просто хотел удивиться

еще есть вендорские железки

Там местами всё ещё хуже

блин, звучит интересно, но хз для чего можно применить 🙂

Попробовал, короче это такая штука которая позволяет скачать или сбилдить по рецепту заготовленный image, затем упаковать его в initrd и прописать это дело в конфиг grub2. В результате можно будет перезагрузиться и в grub выбрать этот image, после чего загрузится система с overlayfs root.

Я тут подумал для чего это может пригодиться - для быстрого развертывания по видимому, идею прописывать это в grub я не понял, но полученные kennel и initrd можно смело отдавать по pxe, они будут работать точно также.

Я даже подумал на кой мне этот NBD-server, почему бы не упаковать все сразу в initrd - это ведь так просто! К томуже grub умеет http, так что это будет и не так медленно.

После чего наткнулся на проект: https://github.com/danderson/netboot/tree/master/pixiecore @vrutkovs вот она та простота о которой мы говорили!

Доброй ночи, кто может поделиться советом: есть локальный сервер ubuntu. если в двух словах, в какую сторону посоветуете делать выбор minikube или microk8s

Кстати s3 это не только CEPH и minio, есть ещё варианты поверх касандры

Он не живой, не мертвый

Он не живой, не мертвый

ceph или чтo?

ceph или чтo?

Pithos

Там первой строчкой на гитхабе

Project not under active development 

Кстати s3 это не только CEPH и minio, есть ещё варианты поверх касандры

Из говна ещё есть leofs и swiftstack

была еще одна дичь на ноде ... название не вспомню

https://github.com/scality/cloudserver

А вообще берём сасандру и делаем CREATE TABLE object_store ( key text, object blob, PRIMARY KEY (key) )

@vrutkovs @Andorka

кстати, а бросившим куб дают жетоны за дни клаудтрезвости?

Да, от редхата

внезапно...

После чего наткнулся на проект: https://github.com/danderson/netboot/tree/master/pixiecore @vrutkovs вот она та простота о которой мы говорили!

У него апишка-то есть?

У него апишка-то есть?

Есть https://github.com/danderson/netboot/blob/master/pixiecore/README.api.md

>The API consists of a single endpoint

Нам в чате остро не хватает сторонника юниквея

Чтобы он на каждую вторую ссылку приговаривал "Сложно-то как, вот пайпами-то и седом-то я б решил"

Чтобы он на каждую вторую ссылку приговаривал "Сложно-то как, вот пайпами-то и седом-то я б решил"

Это как раз про LTSP

Чтобы он на каждую вторую ссылку приговаривал "Сложно-то как, вот пайпами-то и седом-то я б решил"

Я здесь

А вообще берём сасандру и делаем CREATE TABLE object_store ( key text, object blob, PRIMARY KEY (key) )

мерджи, мерджи, раз-раз-раз

Чтобы он на каждую вторую ссылку приговаривал "Сложно-то как, вот пайпами-то и седом-то я б решил"

погодите, но yaml2json

мерджи, мерджи, раз-раз-раз

Ну хоть бы кто-то про чанки тут писал

кстати, все заметили, что нас теперь 3к?

кстати, все заметили, что нас теперь 3к?

уже почти неделя как

кстати, все заметили, что нас теперь 3к?

Это что-то в корне меняет?

всем привет! Вводная - managed kubernetes от DO. По дефолту там не стоит никакого metric сервера. Попробовал вкатить туда metrics-server из инкубатора. Метрики не собираются: $ kubectl top nodes error: metrics not available yet В логах пода metrics-server'а : worker-qnyj:10250/stats/summary/: dial tcp: lookup worker-qnyj on 10.245.0.10:53: no such host] E0501 07:13:13.672509 1 manager.go:111] unable to fully collect metrics: [unable to fully scrape metrics from source kubelet_summary:worker-qnyo: unable to fetch metrics from Kubelet worker-qnyo (worker-qnyo): Get https://worker-qnyo:10250/stats/summary/: dial tcp: lookup worker-qnyo on 10.245.0.10:53: no such host, unable to fully scrape metrics from source kubelet_summary:worker-qnyj: unable to fetch metrics from Kubelet worker-qnyj (worker-qnyj): Get https://worker-qnyj:10250/stats/summary/: dial tcp: lookup worker-qnyj on 10.245.0.10:53: no such host] Куда бороть? гугл особо не помог.

В деплойменте сервера починить надо, command на запуск с дополнительными параметрами

spec: containers: - command: - /metrics-server - --kubelet-insecure-tls что-то еще добавить нужно ?

Там про инсекьюре тлс и IntrnalIP

да, я видел ту ишую

пойду еще раз посмотрю. спасибо

У меня помогло

помогло вот с такими ключами: command: - /metrics-server - --kubelet-insecure-tls - --kubelet-preferred-address-types=InternalIP метрики собираются: $ kubectl top nodes NAME CPU(cores) CPU% MEMORY(bytes) MEMORY% worker-qnyj 265m 26% 1113Mi 38% worker-qnyo 254m 25% 1211Mi 41% но в логах метрик-сервера вот такие ошибки есть: E0501 07:28:00.630128 1 reststorage.go:129] unable to fetch node metrics for node "worker-qnyo": no metrics known for node E0501 07:28:00.630178 1 reststorage.go:129] unable to fetch node metrics for node "worker-qnyj": no metrics known for node E0501 07:28:01.934750 1 reststorage.go:129] unable to fetch node metrics for node "worker-qnyj": no metrics known for node E0501 07:28:01.935124 1 reststorage.go:129] unable to fetch node metrics for node "worker-qnyo": no metrics known for node

Как это решить?

Этот под поднимается для выполнения спарк джобы

Project not under active development 

Печалька

Как это решить?

Что именно? Отсутствие config map?

Печалька

Простой вариант своей объектной хранилкой пишется достаточно легко, вменяемым разрабом.

Поверх сасандры в частности

@vladkarasyov нет конфигмапа такого

Простой вариант своей объектной хранилкой пишется достаточно легко, вменяемым разрабом.

Кто это потом будет поддерживать

Кто это потом будет поддерживать

Эта проблема, переоценена, как показала практика

Когда компания пилит свой продукт, она же не перестает существовать, после смены какого-то из разработчиков

Ceph, зачастую, выходит поддерживать не дешевле, посмотрите только его крос регион с3 - это мало того, что настраивается только под веществами, а траблшутинг - вообще отдельная песня

Ceph, зачастую, выходит поддерживать не дешевле, посмотрите только его крос регион с3 - это мало того, что настраивается только под веществами, а траблшутинг - вообще отдельная песня

Кросс регион это нифига не простой вариант

Кросс регион это нифига не простой вариант

Никто не говорил что простой, но у ceph гипертрофированно усложнен

Да и сам ceph в маломальких масштабах больше Марк-4-ноды-продакшн недешево выходит в поддержке.

Использовать ceph как s3 это как греть пюрешку с котлеткой на теплооотводе атомного реактора

А как только начинаешь эти все sds тыркать на предмет нагрузки - оно как дрысня между пальцев растекается, а там где не растекается, о дешивизне поддержки даже речи нет

Использовать ceph как s3 это как греть пюрешку с котлеткой на теплооотводе атомного реактора

На каком из 2 контуров?

Так что все стоит поддержки, что типа готовое, что свая разработка. Я помню эпопею попенстека 2013 - 2014 как волали берешь и получаешь свой авс (утрирую), а в итоге риторику сменили на - это всего лишь фреемворк для построения облака, который как есть не продукт, в который надо вкладываться и тп

На каком из 2 контуров?

такие реакторы — одноконтурные

такие реакторы — одноконтурные

Нифига, там есть контур который соприкасается с реактором с водой, и второй, который соприкасается с первым через него уже идёт охоложление непосредственное.

Так фон уменьшают, я, думаю, не стоит рассказывать как фонит вода первого контура, которая омывает сам реактор непосредственно

это смотря как сделать, если через ceph, то реактор будет одноконтурный — простой в строительстве, тяжелый в поддержке

Использовать ceph как s3 это как греть пюрешку с котлеткой на теплооотводе атомного реактора

Зависит от объема

кстати, одноконтурный реактор использовался в Чернобыльской АЭС, нутыпонел, что может стать с твоим сефом

кстати, одноконтурный реактор использовался в Чернобыльской АЭС, нутыпонел, что может стать с твоим сефом

Ну так там и нет испарительного контура, считай замкнутый цикл с кучей проблем повышенного радиационного воздействия на оборудование

Ну это и для Ленинградской АЭС характерно

Кстати, до Чернобыля на Ленинградской тоже была авария, но, конечно, не таких масштабов

челяба хуже чернобыля

Использовать ceph как s3 это как греть пюрешку с котлеткой на теплооотводе атомного реактора

у меня для тебя плохие новости - атомный реактор именно так и используется повсеместно