Mark ☢️
Чот не нашел с ходу фтп гейтов
Mark ☢️
Нашел https://www.storagemadeeasy.com/ceph/
Mark ☢️
Видимо да
Sergei
https://github.com/Memset/sftpcloudfs
Михаил
А оно oauth авторизацию умеет?)
Sergei
ну ты же умеешь в питон
Sergei
https://github.com/softlayer/swftp
Sergei
вот это ещё кажется пробовали
Sergei
давно было, забыл я.
Mark ☢️
Твистед. Питон 2. Закапывайте
Mark ☢️
Проще самому накатать используя нормальный фтп на питоне
Sergei
ну напишите на го. там не должно быть никакого рокет сайнса же
Mark ☢️
Почему поверх радоса никто не пишет ?
Mark ☢️
Заебли с s3. 100500 прокладок между софтом и дисками
Sergei
на нем нормально написать - rgw и получится. и то не сразу.
Mark ☢️
Кстати. А как они листинг файлов в фтп сделали ? Свою минифс организовали ?
Sergei
s3 и swift предоставляют листинг
Mark ☢️
Эу. Я наверно протупил. Есть где про s3 без буллшита прочитать ?
Sergei
ну, у амазона.
Mark ☢️
Без буллшита
Mark ☢️
Кароч за ссылку был бы благодарен
Mark ☢️
Consul.io есть чо у кого на эту тему ?
Etki
что подразумевается под "чо"? я так понимаю, ты не документацию просишь
Mark ☢️
Да. Прошу про опыт работы с ней и грабли если есть
Etki
Тот же etcd + куча плюшек типа регистра сервисов и встроенного DNS, по большому счету просто key-value хранилище с возможностью консистентных операций (т.е. гарантий, что в случае каких-либо проблем с сетью и пр. запись/чтение либо пройдет с верным результатом, либо не пройдет вообще). Большого опыта не было, но год назад прикола ради запускал 50 экземпляров в docker-compose, и они сошли с ума, перевыбирая мастера каждую секунду, но сказать, баг ли это в консуле или у меня на машине просто ресурсов не хватало - хз. Большого смысла именно его использовать не вижу (не единственный консистентный k/v сервис, все операции происходят только на одном мастере, хотя здесь, казалось бы, шардируй и шардируй), самое прикольное его применение для меня - автоматическая регистрация docker-контейнеров в паре с gliderlabs/registrator.
Etki
В etcd афир в свое время докопался до неконсистентных чтений, не знаю, продублировал ли в консуле, скорее всего такой проблемы там и нет, но с небольшой вероятностью чтения там могут быть не очень консистентны во время перехода мастера.
Mark ☢️
Мде. С идеей выбора мастера микрософт со своим нетбиосом уже обосрались.
Sergey
А чо у сеф с производительностью на запись?
Mark ☢️
Она есть
Sergey
Ну вот слышал мнение что много много иопсов не сдюжит
Sergey
Пару тыс
Sergey
Например
Sergey
Или 50-200 тыс
Sergey
По 2-20mbps
Sergey
😏
Михаил
сильно зависит от количества дисков и типа дисков
Михаил
из скольки дисков ты хочешь получить 2к ипосов?
Sergey
Например? А в ссд кэш умеет?
Sergey
Предположим что диски спроектировать с запасом, софт / фс не будет узким местом?
Sergey
А то райдикс тот же только в новой версии в апреле такое смогет
Sergey
Много потоков
Sergey
Видео
Михаил
ну у нас на цефе лежит дохера виртуалок
Sergey
Запись в 300 потоков, читаем их тыщами
Sergey
Авто распределение нагрузки и всякое такое
Sergey
Типа cdn
Михаил
только вот нюанс
Михаил
CEPH это бекенд, а что на фронте?
Михаил
и это кстати медь
Михаил
10г 40г
Sergey
Свой софт, он пока не очень умеет оптимизировать и кэшировать
Sergey
Сфп+
Михаил
то есть в софт это будет влетать по iscsi?
Sergey
Да хоть fc
Sergey
И др вариант, пишем 5-20-50 тыс потоков, читаем в полтора - два раза больше
Sergey
Меж серверами что рядом Infiniband/40g могу, дальние 10/40g
Михаил
инфинибенд грят огонь должно быть
Михаил
Где то в рассылках ceph это читал
Михаил
Если у вас rbd то точно смысла нет
Mikhail
Хм, так если пиковая нагрузка он ее должен сгладить
Mark ☢️
Например? А в ссд кэш умеет?
Ну да ведь. Журнал на ссд -- вот тебе и кэш, на запись правда онли
Sergei
инфинибенд грят огонь должно быть
мы пробовали (не на сефе), опыт был неоднозначным. вернулись на 10G.
но крок живет вон.
Deleted
http://tracker.ceph.com/issues/16399 Мде, и до сих пор не починили.
Deleted
В кракене то же самое
Deleted
@SinTeZoiD Говно ваш Цеф %)