и использовать ceph как raw key-value нужно с употреблением головы.

потому что rados k->v очень специфичный.

Прост там чювак видимо не может представить что образы виртуалок не ооько в файлах типа qcow2. Могут быть но и в цефе.

Прост там чювак видимо не может представить что образы виртуалок не ооько в файлах типа qcow2. Могут быть но и в цефе.

а

ок

Поэтому и городит огороды с зфс

и использовать ceph как raw key-value нужно с употреблением головы.

Мне кажется если напрямую отдавать то тут уже идет неудобство если я правильно понял. Если сравнивать с vmware, то хотелось бы как vmfs, ceph использовать, просто виртуальные диски

Няня я у них поел

Мне кажется если напрямую отдавать то тут уже идет неудобство если я правильно понял. Если сравнивать с vmware, то хотелось бы как vmfs, ceph использовать, просто виртуальные диски

все слова понял, смысл не понял.

Аналогично :)

Прост там чювак видимо не может представить что образы виртуалок не ооько в файлах типа qcow2. Могут быть но и в цефе.

Мат часть и правду могу незнать, каюсь)

Мне кажется если напрямую отдавать то тут уже идет неудобство если я правильно понял. Если сравнивать с vmware, то хотелось бы как vmfs, ceph использовать, просто виртуальные диски

короче, чтобы запускать виртуалки с ceph вам не нужна распределенная файловая система.

У тебя система виртуализации как называется ?

Я говорю с колокольни vmware

Блять.

По факту какая ?

Но хотелось бы и разобраться в ceph+ovirt или proxmox

Во. Значит kvm

Типа для тестов

Мне кажется если напрямую отдавать то тут уже идет неудобство если я правильно понял. Если сравнивать с vmware, то хотелось бы как vmfs, ceph использовать, просто виртуальные диски

но зачем vmfs?

но зачем vmfs?

Это как пример работы сторожа

Есть библиотека. Называется librbd. Квм умееь ее еюзать. Она сама подключается к цефу и юзает образы вм из него. При этом никакой фс там нет.

На файловой системе просто расположить диски

Цеф сам организовывает хранилище образов вм в свои внутрях

На файловой системе просто расположить диски

Не надо фс. Это лишний слой

? но зачем? цеф сам отдаст тебе эти виртуалки

Цеф сам организовывает хранилище образов вм в свои внутрях

А ты сам ceph в проде используешь?

? но зачем? цеф сам отдаст тебе эти виртуалки

Не виртуалки а образы дисков от них

А ты сам ceph в проде используешь?

Да

? но зачем? цеф сам отдаст тебе эти виртуалки

А бэкапы чем например можно снять или вручную снапшот и копию

А бэкапы чем например можно снять или вручную снапшот и копию

Цеф умеет снапшотить образы нагорячую. Ну и слить оттуда пара пустяков. Например через qemu-img convert слить в кукоу2

Там есть функциональность для инкрементального бекапа

Цеф умеет снапшотить образы нагорячую. Ну и слить оттуда пара пустяков. Например через qemu-img convert слить в кукоу2

А будут ли консистентные бэкапы приложения ( БД например)

А бэкапы чем например можно снять или вручную снапшот и копию

бэкапы у тебя может делать как ovirt так и ceph

А будут ли консистентные бэкапы приложения ( БД например)

а как вы это себе представляете? :)

Или AD

А будут ли консистентные бэкапы приложения ( БД например)

Да. Гарантировано. Если приложения и ос не гавно

а как вы это себе представляете? :)

Если бэкап неправильно снять в момент работы приложения, могут быть косяки

Да. Гарантировано. Если приложения и ос не гавно

нет. то есть если приложения и ОС не гавно, то будет поднятие с рекаверингом и т.п. но не чистое.

нет. то есть если приложения и ОС не гавно, то будет поднятие с рекаверингом и т.п. но не чистое.

И.

А будут ли консистентные бэкапы приложения ( БД например)

единственное будет проблема с миграцией 2016 через овирт, проще через ceph будет сделать

В veeam например есть поддержка vss например

Не просто так видимо

Если бэкап неправильно снять в момент работы приложения, могут быть косяки

Значит софт гавно. Софт должен быть готов к внезапному отключению питания

Значит софт гавно. Софт должен быть готов к внезапному отключению питания

Все бд и современные фс умеют в это

Значит софт гавно. Софт должен быть готов к внезапному отключению питания

В момент высокой записи на БД , данные могут поехать

В момент высокой записи на БД , данные могут поехать

Не могут же. Ну еба. Как именно. ? Журнал же

В момент высокой записи на БД , данные могут поехать

а кто делает бэкапы в такие моменты?

Если обратно некорректно смежить снапшот

В момент высокой записи на БД , данные могут поехать

значит бд гавно.

значит бд гавно.

Плюс стопицот

Если обратно некорректно смежить снапшот

Штобля

а кто делает бэкапы в такие моменты?

Если например сервис нагружен 24/7

Если например сервис нагружен 24/7

если сервис нагружен 24/7, у его оснвоных бд есть репликации

и бэкап делается с репликации

Кароч. Можно и с ассистентом в квм делатьь гуест агент который сдеает синк и фсфриз

и бэкап делается с репликации

При этом бэкап останавливает репликацию базы?

Ааааааа. Убейте меня

Не порите хуиту

Не порите хуиту

На досуге найду пруфы

Ceph+zfs делают. Но делают это очень странные люди, готовые сами сопровождать ядро и патчить ceph. Единственный вариант, для чего osd можно сажать на zfs - проверка CRC блоков при чтении.

Кароч. Можно и с ассистентом в квм делатьь гуест агент который сдеает синк и фсфриз

можно. только нафига :(

Ceph+zfs делают. Но делают это очень странные люди, готовые сами сопровождать ядро и патчить ceph. Единственный вариант, для чего osd можно сажать на zfs - проверка CRC блоков при чтении.

То есть явно решение не для боевого сервера

Ceph+zfs делают. Но делают это очень странные люди, готовые сами сопровождать ядро и патчить ceph. Единственный вариант, для чего osd можно сажать на zfs - проверка CRC блоков при чтении.

Ты не понял. Он зфс поверх рбд хочет. Чтобы там образы виртуалок хранить

Ты не понял. Он зфс поверх рбд хочет. Чтобы там образы виртуалок хранить

наркоман

Именно

При этом бэкап останавливает репликацию базы?

и что? реплика догонит основу потом

Ты не понял. Он зфс поверх рбд хочет. Чтобы там образы виртуалок хранить

А какие еще варианты есть? Честно не представляю себе

и что? реплика догонит основу потом

Я так и думал, спасибо

То есть явно решение не для боевого сервера

Да и официальной поддержки нет, хорошо если в mail list ответят.

А какие еще варианты есть? Честно не представляю себе

Храни образы виртуалок прямо в цефе. Один рбд это один образ для виртуалки

А какие еще варианты есть? Честно не представляю себе

образы виртуалок хранятся на ceph, он их отдаёт гипервизору, никака фс там не нужна

Ты не понял. Он зфс поверх рбд хочет. Чтобы там образы виртуалок хранить

Если гипервизор KVM - наркоман.

Если гипервизор KVM - наркоман.

Да. Квм.

Если гипервизор KVM - наркоман.

даже если гипервизор не KVM - наркоман.

Если гипервизор KVM - наркоман.

vmware вообще zfs не умеет

ZFS не сетевая FS

ZFS не сетевая FS

А. Ну да. Он токана одном компе это смаунтит

Там залочка бай дефолт в рбд

даже если гипервизор не KVM - наркоман.

Если не KVM надо как-то отдавать в другом виде.

Зфс бтрфс и другие снапшотные фс -- фпезду

Если не KVM надо как-то отдавать в другом виде.

iSCSI gw

Круто засрали, ничего не скажешь

Круто засрали, ничего не скажешь

Ну так по делу же

Зфс бтрфс и другие снапшотные фс -- фпезду

btrfs вполне себе нормальная фс, не надо, но у неё свои задачи

Просто зашел спросить, а тут каками закидали

iSCSI gw

Поддерживаю

Просто зашел спросить, а тут каками закидали

прости :(

Ну так по делу же

По делу если бы попробовал и сломал бы

Просто зашел спросить, а тут каками закидали

Не каками. А сказали как именно нужно делать

iSCSI gw

Да или Ganesha. Кто делал storage app с ceph для vmware

Не каками. А сказали как именно нужно делать

Ну так за это спасибо а на личности не стоит переходить, не красит вас

Ну так за это спасибо а на личности не стоит переходить, не красит вас

А где было про личности ?! Оо

Да или Ganesha. Кто делал storage app с ceph для vmware

Я про это ни слова не говорил, я как пример привел

Ганеша это ж нфс. Верно ? А нах. А по айскайзи трим работает и все такое. Годнота же. Имонтировать ничо не надо

Ганеша это ж нфс. Верно ? А нах. А по айскайзи трим работает и все такое. Годнота же. Имонтировать ничо не надо

Если можно NFS, это лучше чем не уметь.

По делу если бы попробовал и сломал бы

у тебя странное представление, например, если у тебя 1-2 сервера где то, то лучшим решением будет kvm+lvm block под виртуалки, это будет значителньо лучше, чем mdraid 10 и ext4 например