Неудобно.

чем?

с фабриком к стати первый раз столкнулся когда увидел что им juniper деплоит openstack & opencontrail

Тем что с помощью декларативного стиля и языка для сериализации данных надо пытаться реализовать логику. Ни нормальных циклов ни условий ни генераторов. Импорты работают неявно, а структура больших проектов полная пизда. Так и не смог себя заставить использовать ceph-ansible. Недавно вроде спрашивал про него, но, судя по всему, там ничо и не поменялось в сравнении с тем что год назад было.

А, ну и да. Ансибль неудобно интегрировать с какими-то внешними проектами. Типа fabric я могу как питоновскую библиотеку использовать, а вот ансибль нет.

Импорты работают неявно, а структура больших проектов полная пизда. --- вот тут я прям стоя зааплодировал

Ну то есть вот как по мне, так ансибль - чисто чтоб одно и то же действие на куче хостов совершать и попутно упростить себе жизнь. Не писать там собственные парсеры или не вникать в детали работы mysql\rabbitmq\cinder\подставить нужное.

вы видели большие проекты на puppet ? я когда увидел kolla-ansible прям плакал как все удобно дебажится

вы видели большие проекты на puppet ? я когда увидел kolla-ansible прям плакал как все удобно дебажится

Видели, поблевали, захотели развидеть.

Ну то есть вот как по мне, так ансибль - чисто чтоб одно и то же действие на куче хостов совершать и попутно упростить себе жизнь. Не писать там собственные парсеры или не вникать в детали работы mysql\rabbitmq\cinder\подставить нужное.

но так в этом и заключается понятие деплой

я кстати не призываю использовать ceph-ansible мне он кажется монструзоным

я кстати не призываю использовать ceph-ansible мне он кажется монструзоным

Ну вот да. А просто ансибль тоже мне не очень для серьезных вещей. Вот еще, кстати, обидка на него. Нельзя управлять выводом. Только verbose level менять, разве что. А так - подкрасить чо-то или скрыть нельзя.

Так что вот...

а вот это https://github.com/ceph/ceph-docker кто-нибудь пользует ?

а вот это https://github.com/ceph/ceph-docker кто-нибудь пользует ?

Вроде кто-т говорил. Но в чем смысл такого бутерброда? Какие преимущества в сравнении с демонами работающими прямо на хостовой системе?

ни какого преимущества нет.

мы только для тестов используем.

вниз положить coreos

а что вообще дает этот coreos для ceph'а? Абслютно ничего из положительного.

кроме лишнего слоя прокладки.

ничего, он дает плюшки для docker

прокладки, изоляции и абстракции - теперь ты обновляешь контейнер а не пакеты

эту прослойку надо обслуживать, и на проде это чувствительно - лишняя точка отказа.

а докер и сверхнагрузки на IO, ИМХО вещи не совместимые.

а вот для тестовых стендов, ceph-docker самое что надо :)

прокладки, изоляции и абстракции - теперь ты обновляешь контейнер а не пакеты

Спасибо, я лучше пакеты обновлю)

kolla кладет qemu в докер) вроде ее уже даже включили в 11ый дистр редхата

Спасибо, я лучше пакеты обновлю)

+1, тем более это не часто делается на проде.

kolla кладет qemu в докер) вроде ее уже даже включили в 11ый дистр редхата

Ну я тут пристрастно рассуждаю. Потому что очень не люблю докер и считаю что команда его разработчиков инфантильные и посредственные инженеры.

Поэтому вся эта тенденция пихать все чо можно в докер мне тоже не нравится.

А, ну и да. Ансибль неудобно интегрировать с какими-то внешними проектами. Типа fabric я могу как питоновскую библиотеку использовать, а вот ансибль нет.

согласен во многом, но справедливости ради ансибл может подключать плагины лежащие прямо рядом с плейбуком, который их сразу же и использует

Нужда в изоляции сервиса внутри котейнера есть в моем понимании только когда тебе нужно разрешить проблемы с зависимостями какие-то. Причем с зависимостями типа конкретной версии libc. Для питона есть virtualenv, например)

kolla кладет qemu в докер) вроде ее уже даже включили в 11ый дистр редхата

че за kolla?

че за kolla?

Один из ста тыщ опенстековских проектов)

Ну я тут пристрастно рассуждаю. Потому что очень не люблю докер и считаю что команда его разработчиков инфантильные и посредственные инженеры.

Ну начинается, ребята живите в прошлом веке, продолжайте

Ну я тут пристрастно рассуждаю. Потому что очень не люблю докер и считаю что команда его разработчиков инфантильные и посредственные инженеры.

Lol, просто не надо совать его всюду

на этом докеросрач мы закончим

@cloud_flood

Ну начинается, ребята живите в прошлом веке, продолжайте

Воу, докер - инновация! Инструмент 21 века, ага)

на этом докеросрач мы закончим

Все, я закончил)

а вот это https://github.com/ceph/ceph-docker кто-нибудь пользует ?

Ceph работает в докере хорошо, никаких проблем за 2 месяца, порядка 140 iops в сек

https://docs.openstack.org/kolla-kubernetes/latest/ceph-guide.html

140 IOPS это крайне мало...

что это такое то хоть?!

что это такое то хоть?!

+

140 IOPS это крайне мало...

Чем богаты тем и рады :) зато практические данные

140 IOPS это крайне мало...

со скольки дисков хоть?

что это такое то хоть?!

Ну типа отдельный проект который направлен на то чтоб все чо можно в опенстеке пихать в контейнеры.

140 IOPS'ов это один HDD диск

Ну типа отдельный проект который направлен на то чтоб все чо можно в опенстеке пихать в контейнеры.

нормас)

140 IOPS'ов это один HDD диск

SATA?

со скольки дисков хоть?

4 диска, это постоянная нагрузка

4 диска, это постоянная нагрузка

4 sata диска?

с одним журналом?

Обычные hdd по 4 терабайт, с двумя ssd под журналы

мало

Чем богаты тем и рады :) зато практические данные

Как расширю, расскажу :)

Чем богаты тем и рады :) зато практические данные

это средняя за день?

это средняя за день?

+-, да

+-, да

интересно сколько максимум

я предполагаю, что в районе 400-500 получается, если 4 диска.

Но опять же, все очень сильно зависит от контроллера

А я мерил, и не помню :) по-моему порядка 200-300 получалось

А я мерил, и не помню :) по-моему порядка 200-300 получалось

запах тракториста говорит, что что-то не так

Мало / много?

мало

хотяя зависит от конфига цефа)

а есть какие-нибудь best practices по организации private/public network поверх облака, например vmware?

и еще - вы же говорите про iops, которые отдает rados bench?

а есть какие-нибудь best practices по организации private/public network поверх облака, например vmware?

А что именно интересует? И что значит поверх облака? В смысле, в виртуалках запускать ceph?

Ну например есть несколько гипервизоров, есть СХД, между ними 10Г сеть. На виртуалках ceph , osd хранит данные в образах на том же СХД, журналы - на ssd лунах схд. Имеет ли в данном случае вообще разделение на private/public и как его правильно организовать)

извращение нет разве ?

почему?

Ну например есть несколько гипервизоров, есть СХД, между ними 10Г сеть. На виртуалках ceph , osd хранит данные в образах на том же СХД, журналы - на ssd лунах схд. Имеет ли в данном случае вообще разделение на private/public и как его правильно организовать)

Сразу же можно сказать что только для тестирования годится такая дрянь.

не лучше поставить на чистые серваки ?

или такое часто в продакшине используют ?

Ну, gitlab использовали.

И в итоге заключили что цеф говно)

не совсем понимаю, вы не могли бы привести аргументы против

Да, конечно.