Mark ☢️
вендорлок
Александр
сервера HP — Говно. в них дорогая память. а обычная не подходит
Странно, но у меня в хп, работает обычная память, что я делаю не так?
Kirill
Alexey
которое растрачивает ресурсы и затрудняет работы по замене дисков
ок) а то что у разных нод разные скорости записи. он будет ждать пока одну транзакцию с журнала запишет? потом следущую?
Mark ☢️
действительно. возможно я что-то делаю не так.
Mark ☢️
ок) а то что у разных нод разные скорости записи. он будет ждать пока одну транзакцию с журнала запишет? потом следущую?
он будет ждать только записи в SSD
Mark ☢️
а оно явно быстрее любого рэйда
Александр
действительно. возможно я что-то делаю не так.
Эм.. у меня плашки по 16гб, забит полностью, работает норм.
Mark ☢️
Эм.. у меня плашки по 16гб, забит полностью, работает норм.
а можешь написать в личку какая именно память? я куплю — попробую
Sheridan
Блин, мне бы столько железа как вы тут пишите. Штука виртуалок, 5пб хранилища. Пойду повешусь...
Mark ☢️
Александр
а можешь написать в личку какая именно память? я куплю — попробую
Да обычная ddr 3 ecc. в ситилинке брал
Sheridan
Денег нет
Sergei
Блин, мне бы столько железа как вы тут пишите. Штука виртуалок, 5пб хранилища. Пойду повешусь...
смени работу, город и, возможно, страну, тебе три чатика уже говорит об этом.
Alexey
а оно явно быстрее любого рэйда
ну вот запись в ssd состоялась ноды (забрали?получили?) запись на первой диски на 5400 на второй на 7200 на 3 15000 . последняя записала и курит первую?
Mark ☢️
Kirill
Mark ☢️
я там был
Mark ☢️
и скоро ещё буду. весной
Kirill
Правда сьебал
Mark ☢️
Mark ☢️
если записи реально много что аж журнал не смог сглотнуть пики, то да. придется ещё и ждать пока дурнал просрётся.
Mark ☢️
если записи реально много что аж журнал не смог сглотнуть пики, то да. придется ещё и ждать пока дурнал просрётся.
но! в цефе настраиваются веса на ОСД. и ты можешь на медленных нодах сделать меньше вес. тогда на них меньше будет идти нагрузка
Mark ☢️
А сколько надо чисто под ceph? расчёт 1.5гб на 1тб
если не блюстор, который щас нестабилен (проверял)
Alexey
но! в цефе настраиваются веса на ОСД. и ты можешь на медленных нодах сделать меньше вес. тогда на них меньше будет идти нагрузка
а журнал - то есть ssd на кажды сторадж. правильно понимаю?
Alexey
на каждую ноду прости
Sergei
а журнал - то есть ssd на кажды сторадж. правильно понимаю?
есть какое-то хранилище на каждый диск.
можно сделать кусочек диска.
Mark ☢️
а журнал - то есть ssd на кажды сторадж. правильно понимаю?
на каждый комп. но если в компе много дисков, то один ссд на группу магнитных делается
Anonymous
а журнал - то есть ssd на кажды сторадж. правильно понимаю?
1 ssd на каждые 4 диска в ноде
Mark ☢️
1 ssd на каждые 4 диска в ноде
обычно — да. но если магнитные пиздец быстрые, то может и по 3, ой, тоесть наоборот, по 5
Alexey
1 ssd на каждые 4 диска в ноде
Хрыч отвали - у меня диски по 80ГБ могут быть и по 4 ТБ . а ssd 120.
Sergei
Хрыч отвали - у меня диски по 80ГБ могут быть и по 4 ТБ . а ssd 120.
размер устройства на журнал не коррелирует с размером osd.
Mark ☢️
главно чтобы скорость у ни была заебца. просто умрут быстрее
Mark ☢️
обычный размер одного журнала — 5 гигов (по дефолту)
Sheridan
Где вы были, когда я тут полгода назад конкретные вопросы про цэф задавал?
Mark ☢️
Хрыч отвали - у меня диски по 80ГБ могут быть и по 4 ТБ . а ssd 120.
ну.. 80 гигов — у них совсем говённая скорость
Александр
Где вы были, когда я тут полгода назад конкретные вопросы про цэф задавал?
Видимо не там задавал 😆
Sheridan
Все молчали и плечами жали
Mark ☢️
Где вы были, когда я тут полгода назад конкретные вопросы про цэф задавал?
меня здесь не было.
Sheridan
Именно тут
Sergey
оказывается мне ссд негде протестить, везде сата2 Ж(
Sergei
оказывается мне ссд негде протестить, везде сата2 Ж(
обычно ssd в сефе не утилизируется полностью в полосу.
Sergei
и смысл его как журнала не в том, что полоса широкая, а в том, что latency низкая.
Sergey
@socketpair давал тест, есть тоже 850 самсунги и интел 540, протестить как оно будет
Alexey
и смысл его как журнала не в том, что полоса широкая, а в том, что latency низкая.
Спасибо ! и тебе @socketpair Спасибо)
Mark ☢️
впрочем да, латенси всеравно ниибацца уменьшит
Mark ☢️
пока ты в это ограничение не попадёшь
Alexey
плюс на адресацию отрежет. Бляха муха. а я только весь свой хлам раздал)))
Alexey
от 250 до 2ТБ блеков....
Mark ☢️
у меня только один 500 Гб. остальные от терабайта и выше
Sheridan
Вот, нашел
Sheridan
Вопрос 1. В цефе до сих пор куча захардкоденого? admin socket = /data/ceph/run/$cluster.$type.$id.asok
Sheridan
это в конфиге прописано. А по факту ктото всеравно лезет в /var/run
Sheridan
точнее - osd
Sheridan
ceph version 10.2.2 (45107e21c568dd033c2f0a3107dec8f0b0e58374)
Sheridan
вопрос 2. http://paste.org.ru/?0z4vlv - кусог лога. Полдня ковыряюсь - не могу понять __куда именно_ не хватает прав у osd.
Sheridan
причем ceph-osd -f --cluster ceph --id 0 --setuser ceph --setgroup ceph - поднимает демона и живёт, а systemctl start ceph-osd@0.service просит сначала оказать ему какието услуги личного характера