ну все же процент считается от количества OSD, а не от самого кластера. Очень часто где можно встретить, что пулы привязаны к определенным OSD

ну все же процент считается от количества OSD, а не от самого кластера. Очень часто где можно встретить, что пулы привязаны к определенным OSD

Так если рассмотреть сой случай, у хочу пул отдавать по rbd , а аставшуюся часть ещё не решил как использовать - в таком случае каков процент ?

ну я поступал следующим образом. Отдавал рбд 60%, остальное на усмотрение. Когда понял,что ничего больше не будет, добавил оставшиеся проценты.

увеличивать количество PG можно в любое время, уменьшать конечно же нет.

Так если рассмотреть сой случай, у хочу пул отдавать по rbd , а аставшуюся часть ещё не решил как использовать - в таком случае каков процент ?

плохая идея

плохая идея

Чем ? Если у меня нет метадаты ?

Чем ? Если у меня нет метадаты ?

если ошибки с софте, реализующем "что-то еще" потрут в пуле куски rbd образов. Вы же так печетесь о безопасности.

господа, кто-нибудь сталкивался с необходимостью решардить индексы rgw на лету?

я конечно могу ошибаться, но онлайн нельзя было.

ок, не онлайн, но на существующем rgw-бакете?

я вижу что в RH Ceph Storage есть онлайн-решардинг, но не вижу в jewel

а, у меня просто старый jewel

коллеги, подскажите

есть несколько pg в состоянии ...peered

# ceph pg dump|grep peered dumped all in format plain 3.c80 173 0 346 692 0 715341824 10041 10041 undersized+degraded+remapped+backfill_wait+peered 2017-08-02 19:12:39.319222 12124'104727 12409:62777 [62,76,44] 62 [2] 2 1642'32485 2017-07-18 22:57:06.263727 1008'135 2017-07-09 22:34:40.893182 3.204 184 0 368 649 0 769544192 10065 10065 undersized+degraded+remapped+backfill_wait+peered 2017-08-02 19:12:39.334905 12124'13665 12409:37345 [75,52,1] 75 [2] 2 1375'4316 2017-07-18 00:10:27.601548 1371'2740 2017-07-12 07:48:34.953831 11.19 25525 0 51050 78652 0 14829768529 10059 10059 undersized+degraded+remapped+backfill_wait+peered 2017-08-02 19:12:39.311612 12124'156267 12409:137128 [56,26,14] 56 [18] 18 1375'28148 2017-07-17 20:27:04.916079 0'0 2017-07-10 16:12:49.270606

почему up set отличается от acting set

как это вообще чинить? 😩(

recovery идет?

https://github.com/socketpair/rbd2qcow2

я запилил

просьба тщательно обосрать

прямо на гитхабе

и если кто умеет запилить всяки свистелки и перделки (типа лицензии, setup.py всякие автотесты и линтеры и прочее ) тот будет молодец

как это вообще чинить? 😩(

ceph pg ID query что говорит?

все, разобрались

up set там - здоровые OSD, а acting set - один OSD который подвис

https://github.com/socketpair/rbd2qcow2

@SinTeZoiD

вот сейчас включили бэкфилл - оно забэкфиллилось

https://github.com/socketpair/rbd2qcow2

@spuzirev

но для меня странно что это какое-то бажное состояние, я его экспериментально выловить не успел :(

@SinTeZoiD

Потом

не складывайте в радос объекты, у которых omap в гигабайты.

это больно.

когда репликация метадаты одного объекта занимает 19 минут - это больно.

А как у тебя так вышло?

А как у тебя так вышло?

radosgw не сразу научился шардить индексы бакетов

Ааа. radosgw)

Вспомнил те истории, да.

Посмотрите ктонибудь мою писанину на петоне

Не имеет аналогов и крайне полезна

кто-нибуть тестил rbd on erasure coded pool?

Как мне сделать чтобы мою писню ктонибудь посмотрил и грамотно опустил ?

как проснётся народ с тестовыми площадками ...

Надо както прорекламировать чтоли

Мож припинить ?

Habrhabr за ли статью, отпустят быстро

Хабр до искр из глаз ненавижу

Сложная система с кармами и аккаунтами

Зато максимальный охват

И опускаторы в стиле нинужно потому что против Путина

Вроде упростит сейчас

Бл.. Бесят исправления в телефоне

кто-нибуть тестил rbd on erasure coded pool?

RBD ECP стабильным станет только в релизе luminous

Как мне сделать чтобы мою писню ктонибудь посмотрил и грамотно опустил ?

Лучше действительно хабр. Фигня с картой и т.п. конечно напрягает, но тебе же результат нужен, а там вполне можно получить адекватный фидбек

Опять таки скрипт я смотрел но развернутое описание в стиле нафига и почему тоже было бы интересно

Опять таки скрипт я смотрел но развернутое описание в стиле нафига и почему тоже было бы интересно

Это сделаю сегодня

Надеюсь

Опять таки скрипт я смотрел но развернутое описание в стиле нафига и почему тоже было бы интересно

Есть пул с рбд

Задача — сделать инкрементальный бекап. Но такой чтобы можно было вочстановиться даже если цеф упал совсем весь. При это не поднимая новый цеф

Поэтому в кукоу2 а не в рбд дифф экспорт

Есть пул с рбд

Нене. Пиши давай :-) у меня мысли как и куда применить есть, но интересно именно твоё видение которое может быть другим

См выше

Ага.

Это сделаю сегодня

давай-давай, правда интересно.

А еще киллерфича это скорость слива. Куему имг не умеет сливать дифф снапшота и делает слив только простой

И в один поток онли

Потом и я свой вариант выложу). Правда без инкрементов.

Ну без инкрементов это враппер вокруг куему имг конверт

ну у нас есть свои особенности. Мы сразу с цефа и снимаем снимки

И чо.

Обьем данных то гигантский

А у меня сливы диффов онли

Слив диффов каждый день по крону

на лету упаковка идет, да и объем совсем не критичен.

Результирующий имедж можно напоямую отдать в куему. Мгновенное экстренное восстановление

нам главное - быстрота

нам главное - быстрота

Ты не поверишь

ак тут raw тоже можешь напрямую отдать)

хоть на обычный жесткий диск записывай через dd

RBD ECP стабильным станет только в релизе luminous

Дык о чем и речь, после прочтения этого: "Erasure coded pools now have full support for overwrites, allowing them to be used with RBD and CephFS." и написал пост