Artem

ceph-ansible - быстро, просто, единообразно

Вот стоит у тебя какой нибудь python2.1.x, и не будет твой ансибл работать

Pavel

А салт у нас везде, не только для цефа

Mike

Вот стоит у тебя какой нибудь python2.1.x, и не будет твой ансибл работать

какие-то странные ограничения.

Artem

Я к тому что ceph-ansible это все таки штука которая ставит и настраивает софт, а докер это готовая вещь

Mike

да мне вообще докер не упёрся с ceph. Потом ещё **ся с докером.

Artem

да мне вообще докер не упёрся с ceph. Потом ещё **ся с докером.

1. Никто не заставляет 2. Еба*ся как правило приходиться с ОСью когда она засирается всяким софтом и зависимости друг друга убивают

Михаил

нуу, вообще рекомендуется ось под цеф отдавать всю)

Anonymous

адназначна ceph-ansible

Михаил

без доп вещей

Anonymous

ну или адназначна puppet :) на выбор, кто что умеет

kiosaku

насчёт паппета: не сталкивались с тем, что паппет-агент работает, но ничего не делает?

Artem

То есть вы мониторы тоже отдельными серверами держите?

Anonymous

подвисшие агенты... бывает :(

Михаил

То есть вы мониторы тоже отдельными серверами держите?

мониторы это сущность цефа

Михаил

если че

Anonymous

вот вы мне лучше скажите, есть ли возможность (для RGW) такого себе статического переноса объектов в более быстрый пул без изменения URL этого объекта для клиентов?

Anonymous

т.е. cache tiering нам не нужен, нам надо по какой-то внешней метрике схватить популярные объекты и утащить на SSD-only рут

Artem

мониторы это сущность цефа

Я собственно к тому что железо простаивает, если оно есть, а как у нас его нет =)

Anonymous

но при этом так, чтобы клиенты этого RGW ничего не заметили

Anonymous

тьфу, в запарке RBD написал :)

Mike

То есть вы мониторы тоже отдельными серверами держите?

смотря какой размер кластера. У меня был 5-ти нодовый ceph - на всех нодах по монитору запущено с данными на SSD.

Mike

тьфу, в запарке RBD написал :)

так RBD или RGW?

Anonymous

RGW конечно))

Mike

RGW конечно))

а что тормозит? Выборка? Поиск? Или отдача объёктов?

Anonymous

Имеется в виду, что например если мы хотим отдавать горячие объекты с SSD, но управлять этим вручную, это можно как-то сделать?)

Anonymous

Ты не модный! /opt он вспомнил

😔

Anonymous

чтобы не городить cache tiering, который в нашем случае ничего не даст и будет даже вреден

Anonymous

Если по топику, я не вижу ничего особенно предосудительного запускать цеф в контейнере. Конфиги и данные, естественно, вне него. Контейнер - как пакетный менеджер

Mike

что значит "в ручную"? Как ты это видишь?

Anonymous

ну условно говоря хочется переместить некоторые объекты на быстрый пул, при этом клиент radosgw не должен ничего заметить

Михаил

Если по топику, я не вижу ничего особенно предосудительного запускать цеф в контейнере. Конфиги и данные, естественно, вне него. Контейнер - как пакетный менеджер

да никто не осуждает. пытаются понять зачем)

Anonymous

еще момент, у нас сейчас используются в тестах blind buckets (приложение само знает, какие объекты спрашивать). а без него - была адовая нагрузка на index pool. Есть какие-то рекомендации по развертыванию radosge для большого кол-ва объектов?

Anonymous

да никто не осуждает. пытаются понять зачем)

В кориоси небольшие проблемы с деплоем не через контейнер :) Плюс, когда у тебя вся инфраструктура на них, то почему бы и нет?

kiosaku

зачем заводить ещё одну сущность?

Михаил

В кориоси небольшие проблемы с деплоем не через контейнер :) Плюс, когда у тебя вся инфраструктура на них, то почему бы и нет?

кейс с кореосью я сам вчера сказал

Михаил

хочу еще кейсов

Anonymous

кейс с кореосью я сам вчера сказал

Говорю же, когда у тебя всё на контейнерах. Можно даже на убунту коре такое сделать, хотя она с rw рутом

Mike

ну условно говоря хочется переместить некоторые объекты на быстрый пул, при этом клиент radosgw не должен ничего заметить

не думаю, что получится, т.к. в конфигурации radosgw описываются конкретные пулы. Можно играться в "placement targets", но для клиента это уже другой destination. Может поиграться с "rgw cache", но как он работает - не знаю.

Anonymous

хм:)

Anonymous

ну опять же, тупой lru не спасет, в нашем случае больше потратим трафика и иопсов на miss-ы