Михаил
весло тебя ждёт)
Александр
:(
Михаил
я боюсь цеф + опенстек это только на вёсла. потому что ну не в стартап же опенстек тащить?)
Александр
Хз честно говоря
Михаил
@ntwrk
Vladimir
Господа, а есть ли простой способ поставить Ceph без глубокого вникания в детали? Что-то вроде apt-get install ... и минимальной настройкой с помощью пошаговой инструкции, скажем на той же Убунте?
Михаил
Да, на ceph.com нормальная стартовая дока
Михаил
в таком ключе ceph не нужен
Вот только тебя не спросили
NS 🇷🇺
Да, на ceph.com нормальная стартовая дока
главное не пользовать цеф деплой =)
Anonymous
Вот только тебя не спросили
Но он прав. Это ж не май сивкел, который просто поставил и работает
Nikita
в таком ключе Хрыч не нужен
NS 🇷🇺
Ну ручками оно надёжнее и понимание придет быстрее что и для чего
Михаил
Но он прав. Это ж не май сивкел, который просто поставил и работает
Поставил на НОРМАЛЬНОЕ железо и оно работает
Vlad
в лучшем мире для деплоя используют что-то типа ansible или chef
Anonymous
Ты всё сломал! Нас теперь 257 человек :(
Михаил
Sn00part
надо до 1024 догонять
Михаил
надо до 1024 догонять
Ну, потихоньку дойдем я думаю
Vlad
У цефа какие то монструозные плейбуки
важно что-бы входные данные для плейбуков были легко читаемые
Vlad
цеф сам по себе монструозен
Михаил
Смотря как готовить
Vlad
да как не готовь, понадобится блочное устройство для данных, журнал, osd сервер, mon сервер, crushmap. Не многовато ли сущностей для простого реплицируемого хранилища? И это даже без кластерной файловой системы.
Vlad
на блусторе? Он уже готов к прому?
Михаил
Crushmap хранится на моне
Михаил
А мон можно с осд
Михаил
на блусторе? Он уже готов к прому?
Ну, судя по рассылке не до конца
Vlad
как btrfs? готова но не до конца? :)
Михаил
Однако я из рассылки читаю заголовок и вполне может быть что ок
Михаил
как btrfs? готова но не до конца? :)
А вот тут не знаю, говорят да, но есть нюансы
Александр
Зачем тебе опенстек?
Хочу,.. :D Лого красивое у него
Александр
как btrfs? готова но не до конца? :)
Готово больше чем btrfs
Vladimir
Мне посмотреть/потыкать как Ceph в качестве Persistent Volume в Kubernetes взойдёт на Azure, не тратя недели на вникание в детали. Я понимаю, что для продакшена может чуть ли не отдельная команда девопсов понадобиться на Ceph.
Vladimir
Можете посоветовать ansible деплой (или другой деплой), который более менее работает из коробки?
Vladimir
Чтобы, например в случае Ansible, можно было просто настроить инвентарь и несколько настроек, и оно "само" развернулось.
Михаил
Возьми правда оф доку. Оно за 10 минут ставится на потыкать
Михаил
Если будут вопросы пиши сюда
Anonymous
Готово больше чем btrfs
Чем вам btrfs не нравится? Не используйте "подозрительный" функционал(например, рейд) и всё будет ок
Александр
Александр
Из винтовки можно и в голову себе стрелять, но стреляя в ногу соседу оно может дать осечку
Александр
Из этой оперы
Anonymous
Не используейте btrfs и всё будет хорошо, звучит из той же серии
Ничего за стабильность не говорю(не было в хайлоад проде), но по функциональности она няшка. Нравится гораздо больше overlayfs и других CoW систем
Михаил
А я бы попробовал
Anonymous
Мне кажется использование ZFSoL более странным, чем btrfs. Конечно, если у вас ядро больше либо равно 3.18
Михаил
Zfs к ceph не нативна
Vladimir
Слушайте, а Ceph вообще нормально на облачном железе запускать?
Vladimir
Я поискал про Ceph на Azure и нашел отличный тикет от Gitlab: https://gitlab.com/gitlab-com/infrastructure/issues/678
Михаил
Ну на поиграть почему бы и нет
Vladimir
У них был Ceph на Azure. Azure стал тротлить доступ к дискам. Они ушли с Azure (похоже на bare metal)
Михаил
Ха
Vladimir
Раньше Gitlab жил на AWS, интересно, там у них тоже бвл Ceph и не было проблем?
Vladimir
Ушли с azure - это я про Ceph, они его вынесли на bare metal
Vladimir
Сами то они пока на Azure (им MS дала большой гранд, насколько я помню, чтобы они в Azure перешли)
Mark ☢️
Да, на ceph.com нормальная стартовая дока
Плюсую. Однако судя по всему, кроме 7 центоса они ни на чем на самом деле не тестировали.
Dmitry
А вот тут не знаю, говорят да, но есть нюансы
Как минимум шестой рейд оно не але
Михаил
Dmitry
для CEPH оно и не надо)
Лучше блустор подождать )
Dmitry
Лет пять и ок
Михаил
оо, тяжелая артиллерия подоспела)
Nikita
а я чот пропустил, опенстек стал цефом?
Vladimir
Был quick start на хабре, смотрели?
Не смотрел, спасибо за наводку. Похоже, что в Azure Ceph в продакшене в последующем будет не завести, поэтому я буду искать другое решение для Persistent Volumes в Kunernetes (или мы уйдем с Azure :)
Mark ☢️
А зачем на чем-то другом?
Ну я раньше думал на этих нодах будет что-то еще. Оказалось это фейл. Поэтому кесарю -- кесарево. Тоесть цефу -- центос 7.
Pavel
"что-то еще" это вообще ужасный подход
Mark ☢️
У меня щас доебан. Оно вроде работает. Но глючат системдэ джобы
Nick
Кто пользует ceph - расскажите, как там с латенси и с иопсами