Mark ☢️
вендорлок
Александр
сервера HP — Говно. в них дорогая память. а обычная не подходит
Странно, но у меня в хп, работает обычная память, что я делаю не так?
Kirill
Чё так блять дешево ?
Alexey
которое растрачивает ресурсы и затрудняет работы по замене дисков
ок) а то что у разных нод разные скорости записи. он будет ждать пока одну транзакцию с журнала запишет? потом следущую?
Mark ☢️
действительно. возможно я что-то делаю не так.
Mark ☢️
а оно явно быстрее любого рэйда
Александр
действительно. возможно я что-то делаю не так.
Эм.. у меня плашки по 16гб, забит полностью, работает норм.
Mark ☢️
Эм.. у меня плашки по 16гб, забит полностью, работает норм.
а можешь написать в личку какая именно память? я куплю — попробую
Sheridan
Блин, мне бы столько железа как вы тут пишите. Штука виртуалок, 5пб хранилища. Пойду повешусь...
Sheridan
Денег нет
Mark ☢️
Да обычная ddr 3 ecc. в ситилинке брал
а у меня пищит и не включается
Sheridan
переводи постепенно
Я тут свичи соховские покупаю по 300р
Mark ☢️
Денег нет
тогда страдай.
Sergei
Блин, мне бы столько железа как вы тут пишите. Штука виртуалок, 5пб хранилища. Пойду повешусь...
смени работу, город и, возможно, страну, тебе три чатика уже говорит об этом.
Mark ☢️
Денег нет
а на что нет ?
Alexey
а оно явно быстрее любого рэйда
ну вот запись в ssd состоялась ноды (забрали?получили?) запись на первой диски на 5400 на второй на 7200 на 3 15000 . последняя записала и курит первую?
Kirill
Памяти мало что-то
Sheridan
а какой город?
Минеральные воды
Mark ☢️
Минеральные воды
оооо. Эльбрус близко
Mark ☢️
я там был
Kirill
Минеральные воды
Чувак мой город я там жил ,
Mark ☢️
и скоро ещё буду. весной
Александр
Памяти мало что-то
А сколько надо чисто под ceph? расчёт 1.5гб на 1тб
Kirill
Правда сьебал
Sheridan
а на что нет ?
Ни на что. Винду и ту юзерами купить не дают.
Mark ☢️
если записи реально много что аж журнал не смог сглотнуть пики, то да. придется ещё и ждать пока дурнал просрётся.
Mark ☢️
если записи реально много что аж журнал не смог сглотнуть пики, то да. придется ещё и ждать пока дурнал просрётся.
но! в цефе настраиваются веса на ОСД. и ты можешь на медленных нодах сделать меньше вес. тогда на них меньше будет идти нагрузка
Mark ☢️
А сколько надо чисто под ceph? расчёт 1.5гб на 1тб
если не блюстор, который щас нестабилен (проверял)
Alexey
на каждую ноду прости
Sergei
а журнал - то есть ssd на кажды сторадж. правильно понимаю?
есть какое-то хранилище на каждый диск. можно сделать кусочек диска.
Mark ☢️
а журнал - то есть ssd на кажды сторадж. правильно понимаю?
на каждый комп. но если в компе много дисков, то один ссд на группу магнитных делается
Sheridan
Mark ☢️
1 ssd на каждые 4 диска в ноде
обычно — да. но если магнитные пиздец быстрые, то может и по 3, ой, тоесть наоборот, по 5
Alexey
1 ssd на каждые 4 диска в ноде
Хрыч отвали - у меня диски по 80ГБ могут быть и по 4 ТБ . а ssd 120.
Sergei
Хрыч отвали - у меня диски по 80ГБ могут быть и по 4 ТБ . а ssd 120.
размер устройства на журнал не коррелирует с размером osd.
Mark ☢️
главно чтобы скорость у ни была заебца. просто умрут быстрее
Mark ☢️
обычный размер одного журнала — 5 гигов (по дефолту)
Sheridan
Где вы были, когда я тут полгода назад конкретные вопросы про цэф задавал?
Mark ☢️
Хрыч отвали - у меня диски по 80ГБ могут быть и по 4 ТБ . а ssd 120.
ну.. 80 гигов — у них совсем говённая скорость
Sheridan
Все молчали и плечами жали
Sheridan
Именно тут
Alexey
Все молчали и плечами жали
хоть не хлопали плечами)
Mark ☢️
Марк я образно
я вот каждый диск бенчил. узнал что грин не просто говно, а суперговно
Sergey
оказывается мне ссд негде протестить, везде сата2 Ж(
Sergei
оказывается мне ссд негде протестить, везде сата2 Ж(
обычно ssd в сефе не утилизируется полностью в полосу.
Sergei
и смысл его как журнала не в том, что полоса широкая, а в том, что latency низкая.
Sergey
@socketpair давал тест, есть тоже 850 самсунги и интел 540, протестить как оно будет
Alexey
в чо
в sata2
Mark ☢️
в sata2
а. сата 2 именно 2. щас понял
Mark ☢️
впрочем да, латенси всеравно ниибацца уменьшит
Mark ☢️
пока ты в это ограничение не попадёшь
Alexey
плюс на адресацию отрежет. Бляха муха. а я только весь свой хлам раздал)))
Alexey
от 250 до 2ТБ блеков....
Mark ☢️
у меня только один 500 Гб. остальные от терабайта и выше
Sheridan
Вот, нашел
Sheridan
Вопрос 1. В цефе до сих пор куча захардкоденого? admin socket = /data/ceph/run/$cluster.$type.$id.asok
Sheridan
это в конфиге прописано. А по факту ктото всеравно лезет в /var/run
Sheridan
точнее - osd
Sheridan
ceph version 10.2.2 (45107e21c568dd033c2f0a3107dec8f0b0e58374)
Sheridan
вопрос 2. http://paste.org.ru/?0z4vlv - кусог лога. Полдня ковыряюсь - не могу понять __куда именно_ не хватает прав у osd.
Sheridan
причем ceph-osd -f --cluster ceph --id 0 --setuser ceph --setgroup ceph - поднимает демона и живёт, а systemctl start ceph-osd@0.service просит сначала оказать ему какието услуги личного характера