Да

кто нибудь ssd кстати тестировал на блюсторе?

ни кто не тестил?

Именно. Посмотри ченджлог в люминоусе по блюстору и охуей

я не просто охуел, я охуел от того как я охуел (С) кто-то

сколько багов закрыто, сколько новых заложено

я не просто охуел, я охуел от того как я охуел (С) кто-то

новый продукт, что теперь). придется пока смириться...)

ни кто не тестил?

Ну лично не тестил, но понравилось и скидывал уже. Ща.

А не, не то) Есть только презентации Сейджа.

http://events.linuxfoundation.org/sites/events/files/slides/20170323%20bluestore.pdf

Линк кривой

Я ж поправил вроде)

osd scrub load threshold Description: The maximum load. Ceph will not scrub when the system load (as defined by getloadavg()) is higher than this number. Default is 0.5. Type: Float Default: 0.5

А это не слишком ли жестокий дефолт ?

у мну лоад аверадж как раз примерно такой и бывает и побольше

чяднт ?

а понял, там есть принудительный скраб и такой, типа если не загружена система

0,5 - это ведь половина одного проца??

Ааа

этот параметр нужно уже менять, в зависимости от масштаба/нагрузки и графика скрабинга

ну типа да

у мну есть поинтереснее вопрос

The new WeightedPriorityQueue (wpq) dequeues all priorities in relation to their priorities to prevent starvation of any queue. WPQ should help in cases where a few OSDs are more overloaded than others.

успевают ли в течении недели(по умолчанию) все PG проверится

а почему она не по дефолту ?

mon initial members — не могу понять смысл и как оно используется и зачем. у меня оно задано и причём там указан только один монитор (а не все три). что это, блджад. доку прочитал, но не понял

@SinTeZoiD

@spuzirev

mon initial members — не могу понять смысл и как оно используется и зачем. у меня оно задано и причём там указан только один монитор (а не все три). что это, блджад. доку прочитал, но не понял

Это минимальный набор мониторов которые используются при развертке кластера. Ну, то есть, оно надо только при начальной установке.

Типа когда первый раз мониторы запускаешь.

блджад. тогда выпиливаю

Погоди)

Оставь на случай если большая часть мониторов вдруг перезагружена будет по какой-то причине.

и что

не понимаю

у меня три монитора. я ожидаю что выключсение любого из них приведёт лишь к небольшому лагу. смерть двух должна привести цеф в состояние некворума тоесть временной приостановки

зачем эта строка ?

А, ну если у тебя всего три монитора, тогда, думаю, не страшно) Ща, момент.

Да, выпиливай на здоровье)

Я убрал, видимо, давным давно.

не понимаю

Ну, в моем понимании когда много мониторов список первоначальных нужен для того чтобы не ждать пока соберется кворум по-настоящему. То есть, ждать придется только когда большинство initial members сформируют кворум, а не когда вбсолютное большинство мониторов.

Но это, конечно же, мои выдумки не проверенные.

херота какая-то кароче. надо вызывать шаманов-знатаков

херота какая-то кароче. надо вызывать шаманов-знатаков

Почему херота?)

потому что не понятно

всё в режиме Ванги

Ну эт да. Но проверить не трудно)

INITIAL MEMBERS¶ We recommend running a production Ceph Storage Cluster with at least three Ceph Monitors to ensure high availability. When you run multiple monitors, you may specify the initial monitors that must be members of the cluster in order to establish a quorum. This may reduce the time it takes for your cluster to come online.

Трудно доку почитать?

Трудно доку почитать?

Не надо тут высокомерия)

Все равно это не особо проясняет.

"you may specify"

ну да, спасибо, Капитан. У меня есть возможность указать. но блять ЗАЧЕМ

или чо, это список мониторов которые обязательно должны быть в составе кворумного минимума ?

ну да, спасибо, Капитан. У меня есть возможность указать. но блять ЗАЧЕМ

"This may reduce the time it takes for your cluster to come online"

вот это вот may — пиздец бесит

за счёт чего уменьшит? а может не уменьшит?

Марк, ёпт, ты просил пояснить, что это за опция и что делает - тебе дали. Интересует механизм работы - в сорцы или в списке спроси.

за счёт чего уменьшит? а может не уменьшит?

Ща. До работы доеду и дальше попробую рассказать и сам разобраться.

Марк, ёпт, ты просил пояснить, что это за опция и что делает - тебе дали. Интересует механизм работы - в сорцы или в списке спроси.

сорян, прост у меня бомбит неистово

initial members нужен для создания кворума, например при полном выключении/включении кластера по питанию.

initial members нужен для создания кворума, например при полном выключении/включении кластера по питанию.

окей, дак а каким образом оно влияет на алгоритм закворумления ?

на то он и называется как "initial"

не понимаю

а если ничего не указывать то как работать будет?

ни как работать не будет, если кворума не существует в кластере.

прочитай про paxos алгоритм, я думаю, что все сразу станет понятно.

https://en.wikipedia.org/wiki/Paxos_(computer_science)

Initial не встречается... да и на само мделе не понятно зачем. ну выключил все. окей. включил. каждый монитор начинает пинговать остальные мониторы. как только минимальное количество нужное для кворума нашлось — вот он он кворум. Почему у какого-то монитора или мониторов должен быть приоритет перед чем-то ?

либо я не до конца понимаю...

Ну, короче, я сишный и плюсовый код очень плохо читаю, но вот. https://github.com/ceph/ceph/blob/8859627fa5c7c9ac2abd0df08025c82811a3cc29/src/mon/Monitor.cc 630 строка

Похоже что initial members нужна действительно только при первоначальной сборке кластера. А если монитор хотя бы раз присоединялся к кворуму, initial members он даже смотреть не будет, а будет ориентироваться только на monmap.

Похоже что initial members нужна действительно только при первоначальной сборке кластера. А если монитор хотя бы раз присоединялся к кворуму, initial members он даже смотреть не будет, а будет ориентироваться только на monmap.

И типа из этой директивы генерируется monmap.

Наверн, если руками заранее сгенерировать, то и не нужен список начальных мониторов.

Ну да. прочел вики статью по ручной установке которую сам же и писал года полтора назад) Там initial members не используется, сам себе написал что лучше руками генерировать карту мониторов.

Ну да. прочел вики статью по ручной установке которую сам же и писал года полтора назад) Там initial members не используется, сам себе написал что лучше руками генерировать карту мониторов.

дай ссылку

или это внутренняя вики?

Внутренняя) Мож как в порядок приведу, выставлю наружу.

Суть в том что я там просто записал чо делал когда первый кластер раскатывал.

И там ваще ни слова нету про mon initial members. Вместо этого генерирую карту через monmaptool и при вызове ceph-mon —mkfs эту карту скармливаю.

Так что, вот.

ладно. будем считать что разобрались