Ну так он еще не релиз же

собственно работает и даже прилично, если сказать bluestore bluefs = no

нет, jewel уже релиз

нет, jewel уже релиз

Нет

ну в общем вылетали osd, что с блюстором что без, могу даже багу откопать

http://ceph.com/releases/v10-2-3-jewel-released/ O RLY?

а что именно с гластером там не так было у вас?

а что именно с гластером там не так было у вас?

ну во-первых, начнем с того, что (гластер <censored>)

https://antizapret.prostovpn.org/

а что именно с гластером там не так было у вас?

Чистяков против) ну и говорят он в старых версиях терял данные

а что потребуется чтобы развернуть ceph для начала работы?

во-первых дико медленный stat() и прочее

ну во-первых, начнем с того, что (гластер <censored>)

ну. если решение получило популярность - значит, уже что-то в нём хорошее есть) вот и интересно узнать, какие слабые и сильные стороны)

во-вторых оно любило разваливаться под нагрузкой (коллега подскажет)

в третьих, упаси боже гонять его хоть даже в разных машзалах одного ДЦ

во-вторых оно любило разваливаться под нагрузкой (коллега подскажет)

Исправлено уже же

чуть какие задержки и начинаются баги

Исправлено уже же

вот тут не подскажу, не я поднимал

в третьих, упаси боже гонять его хоть даже в разных машзалах одного ДЦ

Ну так оно и не предусмотрено

у меня есть маленький кластер oVirt на глястере

там была фигня

у меня есть маленький кластер oVirt на глястере

Какой овирт?

Какой овирт?

ну такой. он же RHEV

Версия

3.5.2

а сколько нужно времени на поддержку/администрирование своего объектного хранилища на базе Swift / Ceph на базе дедиков?

сколько часов в месяц

Саша Вир, ответить мне в личку, дама переживает :)

мне хочется посчитать примерно, при каком размере хранилища будет выгоднее делать своё, а не арендовать B2/S3/etc.

а сколько нужно времени на поддержку/администрирование своего объектного хранилища на базе Swift / Ceph на базе дедиков?

Ну цеф настроил и работает

вот есть кейс https://silversuit.net/blog/2016/04/how-to-set-up-a-practically-free-cdn/

взяли B2 и повесили сверху CloudFlare - получилось очень дёшево

Ну цеф настроил и работает

а сколько времени разбираться с ним примерно?

там много подводных камней с ним было?

там много подводных камней с ним было?

для простых кейсов недолго. допустим маны "ceph + openstack" есть в оф доках и делается это за день максимум

это если без разворота цефа, ну цеф еще пол дня не спеша

ясно

это если в 1 дц серверы

а если хочется сделать хранилище на базе серверов в разных дц, то как?

вот это вот? http://openstack.ru/about/components/openstack-swift/

посикс совместимый при этом

Так не бывает

Так не бывает

пруфануть гластером?

пруфануть гластером?

Ну, давай я с разных нод гластера буду писать в один файл и посмотрим на пруфы

Особенно, если ноды разнести по разным городам рф

давай

И посмотрим, какое оно быстрое будет и насколько оно posix

Особенно, если ноды разнести по разным городам рф

не, так не надо )

И посмотрим, какое оно быстрое будет и насколько оно posix

быстрое не будет, но кейсов мало где нужно писать в ОДИН файл

Здрасьте

здрасьте

а с посиксом-то что?

быстрое не будет, но кейсов мало где нужно писать в ОДИН файл

Да блин, у гластера нет сервера метаданных

и?

Это значит, что для того чтобы знать что файл не модифицировали он побежит по всем нодам сравнивать

да

дальше что?

а если хочется сделать хранилище на базе серверов в разных дц, то как?

не пробовали, не скажу

Уже при 10 нодах даже в локальной сети на гигабите все превращается в тыквк

но напомню, что есть профильный канал про опенстек цеф и прочее) https://telegram.me/pro_openstack

там есть люди поумнее меня)

дальше что?

readdir будет занимать несколько rtt

Уже при 10 нодах даже в локальной сети на гигабите все превращается в тыквк

ну так не пойдёт. я сказал, что нужен посикс. ты ответил, что так не бывает. и начал приводить кейсы с кроссдц, десятью нодами и т.д.

readdir будет занимать несколько rtt

я с этим не спорю. я спорю, с тем что не получится posix совместимой распределённой фс на базе гластера

остальное детали

я с этим не спорю. я спорю, с тем что не получится posix совместимой распределённой фс на базе гластера

получится.

работать будет отвратительно.

ERROR: S client not available

у гластера есть какое-то решение для нескольких дц

вот это другой разговор совсем

на хабре писали в комментах

ну так не пойдёт. я сказал, что нужен посикс. ты ответил, что так не бывает. и начал приводить кейсы с кроссдц, десятью нодами и т.д.

Да потому что нахер не нужен посикс, где readdir/stat/open занимат десятки миллисекунд

у гластера есть какое-то решение для нескольких дц

там асинхронно всё

Да потому что нахер не нужен посикс, где readdir/stat/open занимат десятки миллисекунд

на десяти нодах

3-4 - норм

опять же

"нахер нужен посикс с таким перфомансом" и "посикса не получится" это разные тезисы

а кто-нибудь вот B2 +CloudFlare использует как в статье выше?

Константин вон тоже в школе хуево учился - и ничего, живет же, даже до работы одним куском доезжает

ты хоть бы не позорился

Ну, то есть, когда ты на меня подпездываешь в мое отсутствие - это не подход обиженного школьника, окей

обычно этим ты занимаешься

дожил до седых мудей, а как пишется "ни при чём" - не выучил

Когда человеку хочется поднять гластер в продакшне, ему надо сходить провериться

а у тебя что с гластером никак?

я с этим не спорю. я спорю, с тем что не получится posix совместимой распределённой фс на базе гластера

Да я сам могу написать такое же. Только пользы от еле ползающего решения ноль

3-4 - норм

У нас был на 4 нодах. И это вилы

Да я сам могу написать такое же. Только пользы от еле ползающего решения ноль

> Да я сам могу написать такое же напиши, может будет быстрее гластера > Только пользы от еле ползающего решения ноль голословно. как сторадж для статики работает на ура

> Да я сам могу написать такое же напиши, может будет быстрее гластера > Только пользы от еле ползающего решения ноль голословно. как сторадж для статики работает на ура

только почему-то этот сторадж для статики очень педалируют в овирт и прод

тут пони вроде будет юзать гластер, так что ждём отзывы

только почему-то этот сторадж для статики очень педалируют в овирт и прод

А. Ну я бы так делать не стал. В тред просто не читав ворвался как обычно

всем утро!

есть господа знающие postgres как свои 5 ?

http://ceph.com/releases/v10-2-3-jewel-released/ O RLY?

и где там хоть слово про блюстор?

есть господа знающие postgres как свои 5 ?

Есть

Но ты должен быть сам таким господином

всем утро!

Я знаю. Мухтар ???

Но ты должен быть сам таким господином

о да, я господин =)

Я знаю. Мухтар ???

угу. он уже не справился

о да, я господин =)

Вопрос-то в чем?

о да, я господин =)

https://icdn.lenta.ru/images/2016/10/13/19/20161013191121658/pic_2a4e98e0f3bb821e0ef294c40e1570bb.jpg

да-да. она от меня тогда приехала)