На centos 6 ты с этим обломишься. Вероятно, на centos 7 тоже.

Ну универсального ничего не бывает

ой да ладно вам, было время я скрипты автоматизации на php писал

+

ты уверен, что всё правильно делаешь?

ну нет конечно. что-то я делаю не так. но что?

тут посоветовали чуз леаф тайп

# cat /etc/ceph/ceph.conf [global] fsid = cb4b2313-45c8-40b6-8600-28ac29880741 mon_initial_members = node2 mon_host = 10.80.48.2 auth_cluster_required = cephx auth_service_required = cephx auth_client_required = cephx ceph_osd_crush_chooseleaf_type = 0

ну я сделал передеплойил вообще весь кластер

результат тот же

Ксения в наших сердцах

Я ДЕБИЛ. нашёл багу в конфиге.

в рот мне ноги

щас попробую исправить

щас попробую исправить

И как?)

нуу.. решил что самый тупой способ — поправить конфиг и перезапустить все демоны.

норм ?

там как-то странно написано в доке что перед деплойментом мол надо менять

а про то что можно ли после — ни слова

ну сделал... хуй там плавал

жованный крот. и как дебажить вобще?

попробую передеплойить опять

руби можно и не знать

питон тоже. Это как в стихотворении: хорошо быть девочкой в мамином пальто можно и не девочкой но уже не то

попробую передеплойить опять

Ты как передеплоиваешь?

нуу.. решил что самый тупой способ — поправить конфиг и перезапустить все демоны.

нужно поменять crushmap или пересоздать osd

Ты как передеплоиваешь?

сношу всё нахрен и делаю ceph-deploy по мануалу

а то хрен его знает что он там куда запоминает. я пока не разобрался

нужно поменять crushmap или пересоздать osd

Он не осилит

нужно экспортировать crushmap в текстовый файл, поменять osd_crush_chooseleaf_type и записать обратно, ceph сам перебалансирует данные

сношу всё нахрен и делаю ceph-deploy по мануалу

С перестановкой пакетов?

ну если данных нет то конечно проще пересоздать

да, я наркоман нахрен. лучше подождать

в общем-то не больше 5 минут занимает передеплой

УРАААААААААААААААААААААААААААААААААААА

ПОПЕРДОЛИЛОСЬ!

Он не осилит

был бы мануал.

нужно экспортировать crushmap в текстовый файл, поменять osd_crush_chooseleaf_type и записать обратно, ceph сам перебалансирует данные

так и хотел в начале

но не поверил в свои силы :)

а кстати. "записать обратно" это как?

в общем-то не больше 5 минут занимает передеплой

Где наебался то?

там видел экспорт, декомпиляцию

а кстати. "записать обратно" это как?

Компиляция и set

Это обратно

Вроде бы

Где наебался то?

1. хз хули не работало 2. подсказали люди добрые что надо делать (привели кусок доки) 3. ёбся в срачку почему команда не работает 4. понял что это не команда сука а кусок конфига 5. поменял конфиг 6. ёбся хули он не применяется. 7. передеплоил 8. нашёл ебучую опечатку. хоть бы кто сказал что нет такой ебучей опции 9. передеплоил без опечатки. 10. попёрло.

можно ещё командой ceph osd crush отредактировать crushmap

о. а как ?

Твой ceph 3 чата ставило)

и не говори

мой цеф 3 чата шатало

я на память не помню, что-то типа такого создаем правило ceph osd crush rule create-simple host_replica default host узнаем номер этого правила ceph osd crush rule dump и назначаем его пулу ceph osd pool set mypool crush_ruleset 3 я пару лет назад ceph использовал, сейчас возможно что-то поменялось

я, например, это использовал для репликации между датацентрами

до появления этой команды приходилось компилировать crushmap

я даже понял

ceph status cluster 79f68c45-7a42-4f9e-a0de-a5745bbb2aff health HEALTH_OK monmap e1: 1 mons at {node2=10.80.48.2:6789/0} election epoch 3, quorum 0 node2 osdmap e28: 4 osds: 4 up, 4 in flags sortbitwise pgmap v97: 0 pgs, 0 pools, 0 bytes data, 0 objects 20614 MB used, 4138 GB / 4158 GB avail

внимание вопрос. кто жрёт 20 гигов?

ни одного пула нет

ceph osd tree что выводит?

# ceph osd tree ID WEIGHT TYPE NAME UP/DOWN REWEIGHT PRIMARY-AFFINITY -1 4.06078 root default -2 4.06078 host node2 0 0.87849 osd.0 up 1.00000 1.00000 1 0.90919 osd.1 up 1.00000 1.00000 2 0.90919 osd.2 up 1.00000 1.00000 3 1.36389 osd.3 up 1.00000 1.00000

до появления этой команды приходилось компилировать crushmap

А что не так с компиляцией?

А что не так с компиляцией?

убил один раз кластер с данными :)

Господа Знатоки, кто будет отвечать ?

@pro_openstack напоминаю, что там знатоков по ceph больше

Господа Знатоки, кто будет отвечать ?

Ceph osd df

# ceph osd df ID WEIGHT REWEIGHT SIZE USE AVAIL %USE VAR PGS 0 0.87849 1.00000 899G 5154M 894G 0.56 1.16 0 1 0.90919 1.00000 931G 5153M 926G 0.54 1.12 0 2 0.90919 1.00000 931G 5153M 926G 0.54 1.12 0 3 1.36389 1.00000 1396G 5153M 1391G 0.36 0.74 0 TOTAL 4158G 20614M 4138G 0.48 MIN/MAX VAR: 0.74/1.16 STDDEV: 0.08

systemd крут

пжжи. тут цеф распидорасиваем

# ceph osd df ID WEIGHT REWEIGHT SIZE USE AVAIL %USE VAR PGS 0 0.87849 1.00000 899G 5154M 894G 0.56 1.16 0 1 0.90919 1.00000 931G 5153M 926G 0.54 1.12 0 2 0.90919 1.00000 931G 5153M 926G 0.54 1.12 0 3 1.36389 1.00000 1396G 5153M 1391G 0.36 0.74 0 TOTAL 4158G 20614M 4138G 0.48 MIN/MAX VAR: 0.74/1.16 STDDEV: 0.08

Ну вон у тебя по 5гб гб на осд

БЛЯТЬ я тупой

вопрос второй, что лучше использовать для образа диска динамического размера? tar не предлагать

это журналы

qcow2 пробовал уже, есть другие варианты?

просто я не знал что они в как-бы занимаемое пространство входят

Ну, теперь знаешь

вопрос второй, что лучше использовать для образа диска динамического размера? tar не предлагать

ШТЭ

qcow2 пробовал уже, есть другие варианты?

Есть que или как его, не помню

Есть que или как его, не помню

qed ты хотел сказать

qcow2 пробовал уже, есть другие варианты?

спарсе-файл попробуй. говно конечно но чем не вариант

qcow2 пробовал уже, есть другие варианты?

а чем не устраивает ?

а чем не устраивает ?

подбираю стек с нуля просто, ищу что лучше

qed ты хотел сказать

Да

подбираю стек с нуля просто, ищу что лучше

а какие критерии ?

когда в куему делаешь -snapshot то он на самом деле делает в /tmp qcow2-диск со ссылкой в качестве бекинг-стор на оригинал.

ну я и спрашиваю в расцылке — а если qed пижже то почему бы его не брать для этих целей ?

а мне отвечают — схуя это ты решил что он пижже ? а я говорю дак в вики вашей ебаной

а они говорят там говно устаревшее

типа раньше — да, а сейчас нет

а какие критерии ?

четких критериев нет. цель чтобы в финальный стек вписалась ну да просто можно было смонтировать в хост-систему

посмотрел в сторону systemd-nspawn, он позволяет папку использовать в качестве корня

тогда достаточно просто монтировать иметь возможность

алсо умеет работать напрямую с qcow2

но почему-то требует btrfs

если я правильно понимаю

пиздец какойто

а может и неправильно...

"работа с образами возможна только на базе файловой системы BTRFS, которую нужно примонтировать к директории /var/lib/machines"

у тебя по ходу всё перемешалось