я уперся в сеть)

Или делать full flash систему на 8 ssd и не придумывать?

я уперся в сеть)

Десятку?

yep

У меня задачка дать 20 на compute

По чтению

Или делать full flash систему на 8 ssd и не придумывать?

с первой попытки хорошо не сделаешь) будет много вопросов и много тестов

БД

@ankr5678 дать 20 не компьюте чего?

кстати, есть доклад про full flash ceph

@ankr5678 дать 20 не компьюте чего?

20gbit

аааа погоди

хм...

@ankr5678 https://www.youtube.com/watch?v=ziIWYMt30II&index=2&list=PLGfYcGZHdMozQZntwwlitK9oRYr-UMCdv

Два массива - один ссд другой хддссд

На ссд кладем базу

все равно упрешься в сеть быстрее чем в производительность ssd и hdd

На хдд все остальное

у меня 10 гигабит сеть, три цеф-монитора и около 80 цеф нод (450 хдд)

и вот он ваще даж не нагружается

почти всегда idle

журналы на ссд

а фото есть, так чисто пофапать?

Я слегка подзаебался с полками, которые не могут дать нормального чтения

80 нод, по 6 винтов, чет плотность какая то маленькая

И с вендрозависимыми По винтам полками

не, фото нема((

там стойки не все забиты

треть где-то

Но! Если стальные яйца, то можно монтировать диски для OSD с опцией nobarrier и получать вкусные иопс

По возможности избегайте этого.

в них же еще компьюты бла бла бла

сделал бы кто хорошую морду управления всем ceph - было бы хорошо.

уже есть давно, но платные :)

кто бы дал $100к. Сделал бы кластер на миллион иопсов. Эхх.

за $60K ты на нутаниксе выдавишь 1млн иопсов легко уже

у меня 10 гигабит сеть, три цеф-монитора и около 80 цеф нод (450 хдд)

Вы можете переехать на infiniband, например

Я слегка подзаебался с полками, которые не могут дать нормального чтения

Обнимемся. HP MSA выпил столько моей крови, что теперь должен жить вечно

Обнимемся. HP MSA выпил столько моей крови, что теперь должен жить вечно

Угу . Но он еще душка по сравнению с синоложи

за $60K ты на нутаниксе выдавишь 1млн иопсов легко уже

Оффтоп )) вон Чуваки пытались выжать, который Storage review

у меня 10 гигабит сеть, три цеф-монитора и около 80 цеф нод (450 хдд)

Я с 5 нодами умудрился увидеть 55gb/s при ребалансинге. Мну не понимать как вы живёте на чистой 10.

Я с 5 нодами умудрился увидеть 55gb/s при ребалансинге. Мну не понимать как вы живёте на чистой 10.

С каждой ноды по 10 гигабит в секунду. Тоесть 1 гигабайт в секунду. Если диски ссд -- то вполне даже. Если не ссд -- то их должно быть много на одной ноде.

по дискам - 1 pcie ssd, 4 intel s3710 400gb, 4 hdd x 1TB?

Упрешся в CPU.Просто не потянят.

Упрешся в CPU.Просто не потянят.

Спасибо

за $60K ты на нутаниксе выдавишь 1млн иопсов легко уже

Ну да

Спасибо

Я к тому, что ты на ssd будешь вешать два osd и увеличивать треды и шарды на обработку.

Спасибо

У меня на тестовом стенде 4 SSD в ноде и e5-2620v3... Упираюсь в проц.

У меня на тестовом стенде 4 SSD в ноде и e5-2620v3... Упираюсь в проц.

Как?

Прямо в полку чтоль?

Прямо в полку чтоль?

Да

С каждой ноды по 10 гигабит в секунду. Тоесть 1 гигабайт в секунду. Если диски ссд -- то вполне даже. Если не ссд -- то их должно быть много на одной ноде.

16 и 2 nvme под журнал

Спасибо

Быстрый по частотам проц + dpdk, возможно и не упрется

И еще spdk ( при наличии avx2+)

И еще spdk ( при наличии avx2+)

С spdk по идее проц должен меньше нагружаться

Старые ( до broadwell ) еще частоты будут скидывать

Угу . Но он еще душка по сравнению с синоложи

А у synology есть энтерпрайзные полки? Не знал, честно.

А у synology есть энтерпрайзные полки? Не знал, честно.

http://www.synology.su/products/143

Такая же модель, только предыдущих годов

3416

http://www.synology.su/products/143

...представляет собой компактную операционную систему на базе браузера... - лопни мои глаза!

это у них пальцы запутались

линь там

забей

побереги глаза

да понятно что линь. У хьюллета кстати тоже - я разбирал фирмаварь

а с физической стороны, внезапно, AMD Athlon

2300, кажется

http://www.petasan.org

Это же крутяяяк

PetaSAN current version uses a kernel up streamed from SUSE Linux Enterprise 12 SP1 with a few patches, Ceph Jewel and Ubuntu Core 16.04 LTS for its root file system. The installer is based on Tinycore Linux resulting in a compact iso download image.

Я его слепила из того, что было

Это же крутяяяк

это не крутяк, а вебморда, сеф, LIO и Consul. крутяк был бы, если бы вебморда была опенсорснута отдельно, а в LIO сделали бы multipath

Но продукт вкусен, фичаст

это не крутяк, а вебморда, сеф, LIO и Consul. крутяк был бы, если бы вебморда была опенсорснута отдельно, а в LIO сделали бы multipath

радуйся, что хоть как-то двигаются дела с LIO

радуйся, что хоть как-то двигаются дела с LIO

да не, норм. просто тут ценности - только вебморда, остальное делается за неделю :(

вебморда для девачек

только сосноль и клавиатура на иврите

Да, я уже почитал

Загадочный зверек

вебморда для девачек

и для заказчиков

и для заказчиков

Вот-вот

У меня просто есть друган, которому я помогаю

Изредка

И вот он от такой хни был бы в восторге