Vladimir
Ставлю оптимальную таблице, кластер становиться раком.
Vladimir
оптимальную таблицу
Georgii
Добрый день! Может кто-нибудь подсказать - нужно ли выделять mon на отдельные сервера, или можно использовать osd ?
Georgii
на mon планируется подключение но iscsi и rbd клиентов
Georgii
или лучше - 6 нод osd, на 3-х из них - mon
Georgii
и на отдульные сервер вынести доступы для клиентов
Georgii
iscsi и rbd
Georgii
хочу правильную архитектуру сделать
Евгений
iscsi и rbd
зачем порнографию делаете и конвертите rbd в iscsi?
мониторы можно держать на нодах с осд, не страшно
Georgii
ок
Georgii
не, не конвертируем
Georgii
у нас 2 гипервизора сейчас
Georgii
hyper-v и kvm
Georgii
соотвественно для hyper-v - iscsi
Georgii
для kvm - rbd
Georgii
точенн конвертим только для hyper-v
Georgii
)
Mark ☢️
А в гипер-гэ внутри линукс ?
Mark ☢️
В госте
Edg666
yo!
Georgii
И линукс, и window
Mark ☢️
В линуксе можно с гостя рбд подключить
Georgii
Мы хотим в гиперпв на хост цеплять, для хранения образов виртувлок
Edg666
Vsem zdarova! i vseh s dnjom admina
Евгений
Мы хотим в гиперпв на хост цеплять, для хранения образов виртувлок
А таки зачем вам этот костыль-V, когда KVM прекрасно решает задачи?
Georgii
А таки зачем вам этот костыль-V, когда KVM прекрасно решает задачи?
Мы клиентам предлагаем виртуальные машины с ос Windows, дата-центрам лицения позволяет не платить за каждую виртулку, а лицензировать хостовып машины
Михаил
Евгений
Мы клиентам предлагаем виртуальные машины с ос Windows, дата-центрам лицения позволяет не платить за каждую виртулку, а лицензировать хостовып машины
Таким образом получается, что использовать Hyper-V с точки зрения лицензирование Windows дешевле, чем KVM?
Georgii
Georgii
Таким образом получается, что использовать Hyper-V с точки зрения лицензирование Windows дешевле, чем KVM?
Так в итоге - конфигурация с 2мя серверами для доступа и с 6ю нодами osd+mon будет более правильной?
Евгений
мониторов надо нечетное количество
Georgii
На 3x осд из 6 тогда mon
Georgii
И 2 отдельные машины для отдачи rbd и iscsi
Georgii
?
Евгений
две отдельные машины через multipath?
Georgii
Да
Mikhail
2 отдельных сервера на раздачу наверное разумный вариант
Евгений
Я бы их выкинул и сделал бы гейты на самих осд
Евгений
Аргументы?
Georgii
Но ведь так не безопасно)
Mikhail
стоп, а вообще вопрос странный - железки одинаковые что ли?
Georgii
Да
Georgii
Я изначально думал чтобы mon на отдельные железки
Mike
Мы клиентам предлагаем виртуальные машины с ос Windows, дата-центрам лицения позволяет не платить за каждую виртулку, а лицензировать хостовып машины
Эту самую лицензию, можно применять и на другие гипервизоры. На тот же KVM
Georgii
Эту самую лицензию, можно применять и на другие гипервизоры. На тот же KVM
То есть, купить дц а ставить kvm?
Georgii
К сожалению тестов на продакшене не видел, сколько mon отьдает
Mikhail
я смысла в одинаковости серваков не понял, под осд нужна корзина с дисками, под моны и раздачу можно 1У
Евгений
Если сервер будет скомпрометирован, получат доступ ко все данным
Именно.
И главное - мониторам очень нужно быть синхронными по времени.
Georgii
У нас 3 сервера помощнее
Georgii
3 послабее
Georgii
Что больше ест ресурсы - раздача или mon
Georgii
Понимаю что странный вопрос)
Georgii
?
Евгений
mon очень легкий, особенно в последних версиях.
Georgii
я смысла в одинаковости серваков не понял, под осд нужна корзина с дисками, под моны и раздачу можно 1У
Так тут советует ставить Mon на osd,
Евгений
6 osd, 6 гейтов, 5 мониторов.
Mikhail
Так тут советует ставить Mon на osd,
да, ок. я просто не понял что распределяете уже имеющееся, думал что планируете закупку
Georgii
Georgii
И вопрос - кто нибудь раздавал rbd по внешним ip
Georgii
Как работает если расстояние большое, и соответственно латенси
Georgii
Если расстояние от дц до клиента около 250 км?
Евгений
темное волокно?
Евгений
мониторы сделать на разных концах волокна, и посмотреть, начнет ли ругаться на clock skew
если начнет - навернуть ему параметр (забыл какой, это гуглится)
Georgii
мониторы сделать на разных концах волокна, и посмотреть, начнет ли ругаться на clock skew
если начнет - навернуть ему параметр (забыл какой, это гуглится)
Тогда ещё вопрос - если у нас в 2х местах дц, расстояние 250 км, 10g тёмное волокно - чисто теоретически можно построить один кластер?
Евгений
Евгений
Надо будет поиграть с crushmap и пулами, чтобы primary osd были на той же половине, что и клиенты, а реплики уже валились за 250 км
Евгений
https://access.redhat.com/documentation/en-us/red_hat_ceph_storage/1.2.3/html/storage_strategies/primary-affinity
Georgii
3 и 2