« Rev
@ceph_ru   151
Fwd »


Михаил
собственно, если вам надо держать лям файлов на цефе, то используйте его как object storage
Михаил
оно для этого создано)
Александр
я ж телепат. угадал.
Аааа
Nick
отказ от журнала, перенос журнала на ссд, тюнинг - и проблем не будет
Александр
отказ от журнала, перенос журнала на ссд, тюнинг - и проблем не будет
А разве с самого начала не надо держать журнал на ssd?
Nick
А разве с самого начала не надо держать журнал на ssd?
ну вот тут очевидно случай, когда не )
Александр
ну вот тут очевидно случай, когда не )
Очевидный для кого? While SSDs are cost prohibitive for object storage, OSDs may see a significant performance improvement by storing an OSD’s journal on an SSD and the OSD’s object data on a separate hard disk drive. В доке написано даже...
Александр
Тут помоему кроме Марка ни кто доку не читает 😆
Михаил
rsync
ну вот смотри 1)несколько миллионов файлов на одной фс идея так себе 2)цеф тебя спасет, но надо будет его использовать как object storage, то есть rclone для бекапов
Михаил
Sergey кстати, если использовать object storage, то реплики можно не использовать
🍄 Sergey
в 1 копию бекап хранить?
Mikhail
в 2
Михаил
нет, там есть erasure coding
Михаил
аналог raid 5
Михаил
@spuzirev может расскажет о нюансах
Mikhail
в смысле вылет одного диска переживет
Михаил
в смысле вылет одного диска переживет
можно и двух, как настроишь
Михаил
нет. не в сефе.
ты же говорил, что вы юзаете
Sergei
ты же говорил, что вы юзаете
я говорил, что юзаем очень массово и это накладывает специфику на сторадж. я не говорил, что сторадж при этом - сеф.
Михаил
занятно)
Михаил
ну, в любом случае erasure coding в цеф есть и по крайней мере суся продвигает её как мегавесчь
Mark ☢️
http://www.openio.io
Mark ☢️
что за зверь? один сплошной булшит на сайте
Mark ☢️
minio.io — тоже нет деталей никаких
Mark ☢️
http://www.openio.io
http://docs.openio.io/arch-design/objectstorage_arch.html
Mark ☢️
короче хипстеродерьмо, видимо отмывочный стартап
Mark ☢️
это ж надо сколько булшита
Михаил
Зачем ты сюда несешь всякую гадость?
Михаил
Канал же про Ceph
Denis
короче хипстеродерьмо, видимо отмывочный стартап
не факт, они с тем же backblaze b2 stor сделали
Denis
Вобще чуваки оч прикольные
Denis
если они и правда форкнулись \ опенсорснулись как бизнес в 2015 они оч много уже сделали
Mike
Разных SDS навалом
Denis
работающих в разных кейсах только ни одной )
Etki
minio.io — тоже нет деталей никаких
обсуждали уже здесь же
Mark ☢️
Канал же про Ceph
а есть канал про SDS ?
Михаил
а есть канал про SDS ?
@cloud @cloud_flood
Михаил
туда всё
Logan
minio.io — тоже нет деталей никаких
а причем здесь минио? Минио - предельно простой "эмулятор" S3, нужен он только для отладки S3 приложений
Sergei
(не защищаю минио)
Logan
они пишут что "распределенный", "отказоустойчивый" и все такое.
распределенность не проверял, но вызывает сильные сомнения. Надо будет оттестировать его. Базово он хранит все свои данные прямо в файловой системе, и файлы, и бакеты
Sergei
и swift тоже
Logan
все его внутренние коды хранятся просто в системном файле, который может быть сломан. у свифта в файлсистеме хранятся чанки, а не данные
Vlad
В minio уже с октября поломан код для исправления при потере узлов кластера. В ближайшей версии должны его вернуть.
Logan
и я не уверен, что минио можно заставить перебалансировать данные. А управлять балансировкой нельзя точно
Sergei
как минимум давно так точно было
Sergei
чанки - это только про SLO/DLO
Logan
В minio уже с октября поломан код для исправления при потере узлов кластера. В ближайшей версии должны его вернуть.
в смысле – он конечно distributed, но при потере узла ребалансироваться не сможет? фантастика
Logan
адок. хипстота не дремлет
ну вообще-то учитывая для чего минио сделан - свою задачу он выполняет :)
Sergei
ну вообще-то учитывая для чего минио сделан - свою задачу он выполняет :)
а где написано-то про то что он для целей отладиться? :)
Logan
в том же vault до сих пор не могут починить failover при бэкенде на etcd. Уже версии 3 или 4 этот баг ездит по релизам и чинить его никто не собирается В явном виде - нигде, но: - запуск исключительно прост - возможность создать один (и только один) keypair - хранение данных приложения в виде бинарного файла все это слегка намекает нам :)
Logan
нет, у него есть база с информацией о том, где какие файлы-бакеты, какие у них полиси и тд
Logan
все это хранится в бинарном файле в расшаренной файловой системе
Mike
как борятся с проблемой доступа ? Гонками?
Etki
а где написано-то про то что он для целей отладиться? :)
он именно под такой эгидой и шел, пока его не решили расширить
Logan
как борятся с проблемой доступа ? Гонками?
насколько я знаю - никак. На отладочном стенде не бывает гонок
Mike
Спрашивали про DreamHost
Mike
http://dreamhostfeed.livejournal.com/670897.html
Mike
Подробности от Sage по этой аварии: http://www.spinics.net/lists/ceph-users/msg31730.html
Михаил
Подробности от Sage по этой аварии: http://www.spinics.net/lists/ceph-users/msg31730.html
Because it's a beta cluster that's due to be decommissioned shortly it wasn't upgraded from firefly. что у них там за версия то была?
Mike
filefly
Mike
firefly
Михаил
Нуу, к фф были же претензии давно
Михаил
как-то маловато материалов по CEPH + DPDK
Михаил
точнее много маркетингка и буллшита
Mike
в luminous как experimental добавлена поддержка DPDK для AsyncMessanger
Михаил
ок, а что такое тогда spdk?
Mike
это часть DPDK, как фрейморка, только для storage девайсов.
« Rev
@ceph_ru   151
Fwd »