http://tracker.ceph.com/issues/20111 еще баг. Хуй вам а не тхреады кароче

Детский сад.

Превед сегфолты

http://tracker.ceph.com/issues/20119

ЖОВАННЫЙ КРОТ

ЖОВАННЫЙ КРОТ

не жуй кротика.

http://tracker.ceph.com/issues/20119

кракен же 11 версия

кракен же 11 версия

Не переживай. последний раз доку по питону правили ещё при Брежневе.

А меня тоже сегодня жеваный крот навестил. Проапгрейдил сусю c 42.1 на 42.2 На первой osd жили под рутом, на второй - под ceph:ceph пошел второй час chown -R диски по 4Т

А меня тоже сегодня жеваный крот навестил. Проапгрейдил сусю c 42.1 на 42.2 На первой osd жили под рутом, на второй - под ceph:ceph пошел второй час chown -R диски по 4Т

отключи фсинк на время

в блокдевайсе там гдето было команда чтоб едро игнорило синки

тормозит изза проперчивания журнала ФС

ну да, оно сейчас дает 2 мега скорости на диск

Коллеги, привет! Пытаюсь освоить python-rados - интересует сбор статистики через команды osd/pg/mon_command. Команды к мониторам уходят на ура и возвращают json: cmd = {"prefix":"osd df","format":"json"} stats = cluster.mon_command(json.dumps(cmd), b'', timeout=30) а вот комманды osd_command и pg_command - подвисают, пример комманды: cmd1 = {"prefix":"find", "format":"json"} stats1 = cluster.osd_command(osdid=1, cmd=json.dumps(cmd1), inbuf=b'', timeout=10)

pdb.run(cluster.osd_command(osdid=1, cmd=json.dumps(cmd1), inbuf='', timeout=10)) также висит

в блокдевайсе там гдето было команда чтоб едро игнорило синки

Граждане на SO рекомендуют https://serverfault.com/a/378287/342473

Примеров использования pg_command и osd_command не нашел в инете...

Граждане на SO рекомендуют https://serverfault.com/a/378287/342473

а погоди. а ты как делаешь ?

а погоди. а ты как делаешь ?

пока что кажому диску свой chown запустил

Может кто-нибудь ткнуть носом - что и куда читать или что я делаю не так? -)

chown -R. верно ?

ага

chown -R. верно ?

йес

все, оно добежало, и даже ОСД стартанули

сейчас оно будет ребаланситься :]

tsya.ru

а тут норм Ь)

Priority changed from Normal to Low

редхат блять

Priority changed from Normal to Low

это про триды?

редхат блять

позови хрыча, он может попросить своего друга

неужто никто не решал задачи съема статистики через python-rados? -)

неужто никто не решал задачи съема статистики через python-rados? -)

решали через установку prometheus )

решали через установку prometheus )

Понятно =)

собственно, а зачем вам?

собственно, а зачем вам?

Собственно, есть задача снимать статистику по кластерам с помощью python. Вот и ковыряю библиотеку сижу. =)

это я догадался. какую статистику то?)

это я догадался. какую статистику то?)

основная инфа по osd и пулам. Плюс отдельно интересно написать обвязку для снятия статистики при ребалансе (какая группа, на какие осд переезжает, сколько уже данных перехало) - актуально для больших пулов с малым количеством PG - там ребаланс может раком поставить кластер. - вот именно для этого и интересовал метод pg_command

а как спасет информация о уезжающих ПГ?

чтобы граждане не сильно волновались, когда у них ребаланс идет

иногда вот бывает такое, что он как встанет backfill_toofill 18 pgs и стоит

а чё кальмари не нравится?

а как спасет информация о уезжающих ПГ?

поможет расчитать - сможет ли таргетная осд принять количество пг, которые на нее едут или надо будет менять ей вес. Цель - не дать упасть в туфул

а тут ему из-за угла ceph osd tell osd* .... toofull_rate=0.95

и оно продергивается

какой хитрый план

главное, потом на место поставить, да

и не делать такое, когда там МНОГО

какой хитрый план

+

Собственно, есть задача снимать статистику по кластерам с помощью python. Вот и ковыряю библиотеку сижу. =)

так всё таки чем не нравистя https://github.com/ceph/calamari ?

а чё кальмари не нравится?

Не знал, что подобный функционал там реализован. Давно с ней игрался. Стоит еще раз посмотреть, наверное, на нее

ну не всё из перечисленного

так всё таки чем не нравистя https://github.com/ceph/calamari ?

требует старую убунту

бесет

Просто не особо в ней видел смысла никогда

требует старую убунту

вот даже как.

требует старую убунту

https://zphj1987.gitbooks.io/calamaribook/content/First/da_bao_calamari_-_server.html

ну и на гитхабе пишут

https://github.com/ceph/calamari/issues/503#issuecomment-293408803

а так да, прометеус или чё нравится+ графана и смотрите

можно даже заббиксом

Да дашборды то есть - нужна некая логика, которую самим надо дорабатывать (по крайней мере никто из готовых ее не предоставляет)

вот тут то и хотел использовать python-rados

поможет расчитать - сможет ли таргетная осд принять количество пг, которые на нее едут или надо будет менять ей вес. Цель - не дать упасть в туфул

ну если вы такое напилите и это будет работать автоматом

По сути логика достаточно простая - детектим ребаланс, смотрим backfilling pg, смотрим куда перезжает, смотрим размер ну и нехитрый расчет. Для всего кластера расчет чуть усложняется

вообще я ощущаю запах костылей

наверное, придется еще и в crushmap лезть

наверное, придется еще и в crushmap лезть

пока не совсем понимаю зачем =)

вообще я ощущаю запах костылей

весьма вероятно, что из этого может вырасти костыль -)

а может и practice, а может и ничего =)

а может и practice, а может и ничего =)

дока и разрабы говорят, что если у вас забился кластер, то купите диски, а не играйтесь с весами)

дока и разрабы говорят, что если у вас забился кластер, то купите диски, а не играйтесь с весами)

Всмысле добавить осд?

ага

дока и разрабы говорят, что если у вас забился кластер, то купите диски, а не играйтесь с весами)

или остреляйте неиспользуемые диски, весьма логично =) Всегда есть но, к сожалению

или остреляйте неиспользуемые диски, весьма логично =) Всегда есть но, к сожалению

называется денег нет, но вы держитесь?)

называется денег нет, но вы держитесь?)

Почти в точку =) И ситуации с массовым ребалансом происходят достаточно часто, чтобы задуматься о подобном костыле

так, а кто в курсе? Ceph-iSCSI gateway уже существует?

вот то, что работает с LIO target