Что скажете ? может я дурак и считаю это хренью ? или оно реально требуется ?

где-то тут был линк на доклад с опенстек митапа

как раз про ALL FLASH CEPH

Остался у кого ?

Остался у кого ?

https://www.youtube.com/watch?v=ziIWYMt30II&index=2&list=PLGfYcGZHdMozQZntwwlitK9oRYr-UMCdv

Сколько читал про NVMe и CEPH - никто такой хренью не страдал. Ну по крайней мере в списках рассылки

Сергей

Сергей

Спасибо

ну так допиши) у меня просто сильно горело

не могу, инвайта нет.

Прыгающие диски - это когда во время восстановления диски начинают тупо вываливаться и подниматься ?

нет. Это когда из-за отваливающихся дисков блокируется доступ к данным, т.к. данные не верны.

Что скажете ? может я дурак и считаю это хренью ? или оно реально требуется ?

Конкретно эта статья - хрень

Сколько читал про NVMe и CEPH - никто такой хренью не страдал. Ну по крайней мере в списках рассылки

С NVMe как раз так и надо. Был бы доступный ресурс CPU

Коллеги, хорошего дня, первый раз ставлю Ceph, решил сделать singlenode (ну вот так, да) при ceph-deploy mon create-initial вылетает Some monitors have still not reached quorum

Потыкайте носом, куда копать

ну, оно хочет 3 мона минимум

ну, оно хочет 3 мона минимум

http://palmerville.github.io/2016/04/30/single-node-ceph-install.html получается сей ман бесполезен? Оке, пойду разширять песочницу

http://palmerville.github.io/2016/04/30/single-node-ceph-install.html получается сей ман бесполезен? Оке, пойду разширять песочницу

маны на ceph.com надо брать(

Я в ceph не умею но писали что процесс osd не оч быстрый, и он тупо не может утилизировать disk io упираясь в cpu

И на шустрых ссд и нвм это типа как раз имеет смысл

Парни, S3 кто в проде пользует7

+

+

Напильник большой нужен?

Да нет. Для всего что шевелится и пишется (в плане языков golang, python и тд) есть API. Подключается в 2 счета. aws s3 api помоему даже мой холодильник умеет.

дектопных клиентов для s3 тоже навалом, жаль хорошие - платные

Т.е. gateway вполне стабильный?

С кубернетисом думаю его

Вполне. Есть лимиты вроде website api, но это не критично. haproxy + rgw ведут пока что себя стабильно. Использую не так давно.

А кому отдаёте?

Контейнерам или машинам?

Себе. Статика для сайтов, бекапы, документы. Че попало хранится в buckit.

Статистика? Много?

Да по разному. Где то 25 гб мелких файлов, где то мало фоток но в raw.

Спасибо Думаю ещё кассандру попробывать

Пожалуйста.

эм, как кассандра связана с s3?

https://dzone.com/articles/s3-compatible-storage-with-cassandra

чет ад

> But that’s okay. Eventual consistency is baked into the S3 way of doing things. Only one operation requires atomicity: changing bucket ownership and Pithos handles such operations in a strongly consistent manner. > So, when you store a file using Pithos, here’s what happens: - Pithos validates your credentials to access the cluster, destination bucket, and object. - It then chunks your object into those 8 KB pieces. - It writes the chunks to Cassandra and maintains a map of where they are in the metadata. Если я правильно понял, то при одновременном обновлении одного объекта он либо частично перепишется, либо оставит после себяя мусор в виде предыдущей версии без единого намека на ошибку. But that's okay, eventual consistency is baked into the S3 way of doing things.

Питос же вроде не полетел, не ?

за 7 месяцев 50 коммитов... ну хз.

> While operations are commutative, stale data may be left in the inode_blocks and block column families when upload operations fail, or clients interrupt uploads. This will result in orphaned blocks, which need to be regularily purged from the blobstore. Pithos does not provide a method to check for these yet.

ахаха

вот бы man были обновлённые у ceph - красота была бы

как вывести список всех объектов в pg группе?

@SinTeZoiD а у своё железо есть в аренду?

@SinTeZoiD а у своё железо есть в аренду?

неа, мыж не хостер

а что тебе надо?

Ну если не хостеры то ни чо)

Вновь прибывшие, а вы почитать или есть что рассказать?)

"просто смотрим"

Не думаю, что нужно давить на вновь прибывших. Если будет о чем поговорить ведь включатся в диалог, верно?)

Мы хотим историй про iscsi dpdk, spdk, erasure coding или просто о страданиях)

Не думаю, что нужно давить на вновь прибывших. Если будет о чем поговорить ведь включатся в диалог, верно?)

Да ни боже мой! Никто не давит)

Мы хотим историй про iscsi dpdk, spdk, erasure coding или просто о страданиях)

Добрый вечер. Меня зовут Максим и я страдал при разворачивании Ceph.

😆

Добрый вечер. Меня зовут Максим и я страдал при разворачивании Ceph.

Здравствуй Максим!

Добрый вечер, меня зовут Михаил и я Михаил

По традиции клуба анонимных <кого_нибудь> ответ "здравствуй Максим" должен быть хором. Все спят(

https://yandex.com/images/search?text=%D0%BA%D0%BB%D1%83%D0%B1%20%D0%B0%D0%BD%D0%BE%D0%BD%D0%B8%D0%BC%D0%BD%D1%8B%D1%85%20%D0%9C%D0%B8%D1%85%D0%B0%D0%B8%D0%BB%D0%BE%D0%B2

Нас выгонят за оффтоп

По традиции клуба анонимных <кого_нибудь> ответ "здравствуй Максим" должен быть хором. Все спят(

А у вас большой опыт )

Ну стараюсь оживить спящих, как могу. У меня например вопрос есть относительно website api в radosgw - оно вообще планируется? на github в issue не нашел никаких упоминаний.

Сегодня пятница + день святого Патрика, не то чтобы его кто-то отмечал, просто это двойной повод )

Тогда всех с двойным поводом, видимо.

Меня зовут Валентин и у нас цеф на проде

У нас тоже. Сочувствую Валентин. Добро пожаловать в клуб.

Меня зовут Сергей, у нас было 4 инсталляции, а стало 3, возьмете в клуб?

смотря что за прод ... 5 iops считаются?

Я вообще не знаю что такое цепх

учиться, учиться, учиться...

Тут раньше был другой чат

Тут раньше был другой чат

нас всех обманули, но мы привыкли

нас всех обманули, но мы привыкли

Вот вот

видимо придется поднять цеф

10 нод, 20к иопс

10 нод, 20к иопс

SATA ?

Большой объем

Да?

SAS

15k rpm

Маловато тогда, не?