сюда тоже покажешь потом

тебе сюда со всех трёх?

ага

с трех

можно сюда пастить, чтоб не закачивать/выкачивать:

https://pastee.org/

https://pastee.org/z2vh7

первый мон

так

стоп

это не за тот промежуток времени

http://dropmefiles.com/tSdT0

фига там логов

Предстоит в скором времени изучать сия термины и их применения

)

че-то в мониторах ничего интересного не вижу(

я тоже не нашёл

чуваки с ceph.com сказали, что у меня старая версия и они её не поддерживают

ну это понятно

давай думать как обновлять до 0.80.11

уже гуглю

нашёл кучу проблем с эти обновлением

там хоть и дохера патчей - но сломаться ничего не должно

нашёл кучу проблем с эти обновлением

что за проблемы ?

я внутри 0.94 обновлялся

2 раза

с обновлением именно с 0.80.7

подожди

я как понимаю у меня проблема именно в кривой репликации отдельных pg

pgmap v10792068: 2700 pgs, 2 pools, 6722 GB data, 1699 kobjects 18992 GB used, 283 TB / 301 TB avail 85333/4833873 objects degraded (1.765%) 13 active+degraded+remapped 2522 active+clean 137 active+degraded 28 active+remapped

и собственно вот ссыль

https://www.mail-archive.com/ceph-users@lists.ceph.com/msg05780.html

кстати как думаешь, имеет смысл ввести ещё одну OSD (свободные диски есть), чтобы инициировать ребалансинг без выпадания дисков или это ещё больше нарушит консистентность данных?

ну положим у тебя данные и так консистенты

да вот видимо не особо

раз скраб не проходит

и он сойтись не может

ага

покажи еще раз ceph health detail

скраб не проходит из-за баги - валит osd

http://dropmefiles.com/zefHX

в общем надо подумать

слишком непонятный стейт кластера

пойду почитаю - потыкаю в свой кластер

напишу чуть попзже

Спасибо

Я тоже пойду ресерчить

кстати, кто нибудь может рассказать про crush tunables? Что, почему и зачем

ибо не очень вкуривать из статей редхата

Ещё не дошёл до этого

А никто ovirt 4.0 не пробовал?

@demeliorator говорят гластер стал попиздаче в последних версиях в плане производительности

@demeliorator говорят гластер стал попиздаче в последних версиях в плане производительности

дизайн не поменялся - а значит он опасен как хуй понять что

дизайн не поменялся - а значит он опасен как хуй понять что

Опасен чем?

Опасен чем?

потерей данных

А можно подробнее?

@Stirch подскажи, как с пула лучше всего данные слить

@Stirch подскажи, как с пула лучше всего данные слить

rdb-image слить

если у вас там rbd

rbd

а в каком пакете утила?

ибо хочу на соседнюю тачку слить

которая не относится к цефу

а просто подключится как клиент и слить

как либвирт например

@Stirch так что с гластер не так?)

rbd export -p ${POOL} ${IMAGE} ${POOL_BACKUP_DIR}/${IMAGE}

не

это я в курсе

я про то в каком пакете лежит утилита rbd

ибо по умолчанию её нет

@Stirch так что с гластер не так?)

у меня уже за 12 и я пьян %) так как у меня уже др )) и так как праздновать буду я его один - то вот ))

@Stirch так что с гластер не так?)

я пробовал его несколько раз начиная с момента когда он был прям совсем бетой

и в итоге всегда в какой-то момент попадал в ситуацию когда фс замаунчена, демон мертв, stale состояние - после хард ресета(по другому никак уже не вылечить) - на репликах неконсистентные данные = пиздец

у меня уже за 12 и я пьян %) так как у меня уже др )) и так как праздновать буду я его один - то вот ))

С праздничком!

данке шон ))

у меня уже за 12 и я пьян %) так как у меня уже др )) и так как праздновать буду я его один - то вот ))

Оо! Поздравляю!

ибо по умолчанию её нет

у меня везде деб, идет в пакете ceph-common

о! он у вас также называется ceph-common-0.80.4-0.el7.x86_64.rpm

Оо! Поздравляю!

спасибо :))