я обновляю - раза 2 уже обновлял

но внутри одной мажорной

можно попробовать то что чуваки пишут

By setting osd pg max concurrent snap trims = 0 and noscrub and nodeep-scrub, the cluster was able to finish replicating and we have then re-added all down osd's again. But these 3 parameters/flags need to remain set to prevent "random" OSD's to go down.

и поглядеть - не уйдет ли

слушай

хотел спросить

нормально будет сейчас убивать снап?

ceph osd pool rmsnap pool pool-snap

таким вот образом

видимо вся фигня именно из-за снапов и пошла

да - скорее всего

да - скорее всего

это к безопасности?

да

626 requests are blocked > 32 sec

омг

2889 requests are blocked > 32 sec

ОМГ

чорт

12930 requests are blocked > 32 sec

24624 requests are blocked > 32 sec

пиздец

а я смотрю ceph профи в этом чате нашлись

да если бы

тут похоже пиздец подкрался

это была ирония сейчас)

13384 requests are blocked > 32 sec

пиздец

стало конечно поменьше

но пиздец

ну понятно

щас он грохнет их все же

:(

главное чтобы меня раньше не грохнули ;)

БЕГИ

тут то я точно продам фуру вазелина)

главное чтобы меня раньше не грохнули ;)

не грохнут - все будет окей

потом делаем как у чувака - osd pg max concurrent snap trims = 0 and noscrub and nodeep-scrub,

или osd disk threads = 0

и смотрим - как обновнять кластер

ага

ОТПУСТИЛО

ЕГО ОТПУСТИЛО

мужики, я курить

много и яростно

тут и выпить не грех

а потом правки

проблема осталась

уф блеать

а вот дичь с реквестами ушла

всё отошёл

ну вот - теперь не грех и пятницу отпраздновать )) тем более мне уже можно начинать бухать за завтра ))

рано ещё

By setting osd pg max concurrent snap trims = 0 and noscrub and nodeep-scrub, the cluster was able to finish replicating and we have then re-added all down osd's again. But these 3 parameters/flags need to remain set to prevent "random" OSD's to go down.

ушёл делать

а расскажите надо добавить 12 OSD. если добавить сразу 6, загнать им вес в 0 и постепенно повышать IOPS кластера просядет сильнее, чем если бы я добавлял по одной OSD и изменял им вес?

короче

внёс изменения

упавшие осд не добавляются

что пишут

ща сойдётся

и скажу логи

лог пустой

у этой OSD

а вот

дописал видимо

http://dropmefiles.com/QYSZd

хм, а если логи монитора глянуть

или всего цефа

у меня не пишет main.log кстати

глупый вопрос. а что с местом? и оперативкой

та же херня в общем

всех ресурсов с запасом раз в 5

Так

в общем вернулись на исходную

только кластер стал работать ощутимо быстрее

но проблемы с доступом к части инфы сохранились

надо подумать

снапшоты мы грохнули

пойду логи мона смотреть