Кароч около 2х млн рублей

Рассчёты вышли

Быстрее балансируется, меньше параметр NF

не iops-ом единым нужно считать

Кэш в памяти - секретное оружие highload!

Ага, зато на графике красиво)

не iops-ом единым нужно считать

Если брать за цель iops то чо б нет 😆

Если брать за цель iops то чо б нет 😆

Блин, ну ты-же инженер! Тебе нужно понимать что "под капотом".

Ирония же бле

:-\

Ладно, надоели уже со своим флудом

нынешние "инженеры" уже не знают, что под капотом ... ремонт схд выполняют по мануалу с инструкциями вида "вынь диск, поставь новый"

нынешние "инженеры" уже не знают, что под капотом ... ремонт схд выполняют по мануалу с инструкциями вида "вынь диск, поставь новый"

O_o а инженер не должен читать инструкцию, да?

Ой всё, опять флуд.

Здравствуйте уважаемое сообщество. А никто не считал стоимость хранилища под выполнение закона яровой ? беда в том что там большие скорости, но запись более менее линейная.

В каком-то канале считали O_o Искать надо.

Окей, расссмотрим примерный кейс - запись видео архива. Есть у кого такое ?

Подобного не видел. Считали сколько трафика бегает и от него размер хранилища+цена

Меня интересует концептуально. Примерно составил схему: SSD пул под кэш, jerasure пул на HDD как хранилище.

Дело еще в том, что нагрузка неравномерная, есть ярко выраженные пики трафика, где-то с 7 вечера и утихает до часу ночи.

Ну я думаю таких расчётов тут ни кто не делал.

Бррр .... грустненько ..

А, вот нашёл, считали хранилище 1пб в 12-15кк рублей, без учетов нагрузки и т.д., чисто хранилка

А, вот нашёл, считали хранилище 1пб в 12-15кк рублей, без учетов нагрузки и т.д., чисто хранилка

Пруфы

Как вы так насчитали

Пруфы

Пузырёв считал 😆 В сисадм, у него спроси

Нууу, ладно

Меня интересует концептуально. Примерно составил схему: SSD пул под кэш, jerasure пул на HDD как хранилище.

А писать то чем будете? Своя утилита? Erasure Coding не работает с RBD

А писать то чем будете? Своя утилита? Erasure Coding не работает с RBD

Писать своим. Там всё довольно просто, ERSPAN + сортировалка/записывалка. Erasure Coding работает с RBD. где вы вычитали обратное ?

Писать своим. Там всё довольно просто, ERSPAN + сортировалка/записывалка. Erasure Coding работает с RBD. где вы вычитали обратное ?

На jewel проверял.

Не даёт создать блочник

[root@compute-31 ~]# ceph osd pool ls detail pool 1 'one-EC-2-1' erasure size 3 min_size 2 crush_ruleset 1 object_hash rjenkins pg_num 64 pgp_num 64 last_change 98 lfor 35 flags hashpspool tiers 2 read_tier 2 write_tier 2 stripe_width 4096 removed_snaps [1~9]

[root@compute-31 ~]# rbd ls -p one-EC-2-1 one-13 one-14 one-15 one-16 one-18 one-20 one-21 one-22 one-23 one-24 one-30 one-31 one-34 one-35 one-36 one-40 one-43 one-7

[root@compute-31 ~]# ceph —version ceph version 10.2.3 (ecc23778eb545d8dd55e2e4735b53cc93f92e65b)

Лишка скопировал

Не даёт создать блочник

ЧЯДНТ ?

Size3 wtf?!

Size3 wtf?!

маленький пул в нем всего 4 OSD

ЧЯДНТ ?

It is not possible to create an RBD image on an erasure coded pool because it requires partial writes.

http://docs.ceph.com/docs/master/rados/operations/erasure-code/

у erasure coding нет понятия size)

у него есть понятие k и m

А кстати, почему рбд не может в EC-пулы ? вот ему не пофиг ли ? это же на API работы с объектами через librados не влияет же?

или я не прав ?

у erasure coding нет понятия size)

В данном случае сайз считается как k+m. у меня 2-1, вот он и отображает 3

или я не прав ?

Прав, но программно ограничено. erasure пул для RBD может использоваться только с кэш пулом, который обязательно должен быть обычным.

Прав, но программно ограничено. erasure пул для RBD может использоваться только с кэш пулом, который обязательно должен быть обычным.

вот оно че

вот оно че

Так в доке же написано про это

да, я не дочитал)

да, я не дочитал)

It is not possible to create an RBD image on an erasure coded pool because it requires partial writes. It is however possible to create an RBD image on an erasure coded pools when a replicated pool tier set a cache tier:

ну то есть условно берем 1 ссд под кеш, делаем из нее пул с размером 1, объявляем кешем и вперед?)

буржуйским по белому написано

ну еще квотой 1 =)

чтобы вс сразу скидывалось

а почему ЕС-пулы не поддерживают частичную запись? возможно, я тупой, но это же и в ЕС можно....

частичная — это, видимо, пару байтов по смещению в таком-то объекте.

а почему ЕС-пулы не поддерживают частичную запись? возможно, я тупой, но это же и в ЕС можно....

видимо недопилили. Теоретически алгоритм позволяет.

проклятье

обещали в люминусе

или как его там

люминоус

люминоус

Это новый LTS ? а когда выходит ?

хз

Это новый LTS ? а когда выходит ?

да, в ноябре

есть вот это: https://trello.com/b/ugTc2QFH/ceph-backlog

ну по крайней мере обещали

Блин, я только только сподобился на jewel перелезти .... негодяи. В люминоусе опять +100500% к производительности ?

Блин, я только только сподобился на jewel перелезти .... негодяи. В люминоусе опять +100500% к производительности ?

уу)

там будет веселье в виде рабочего bluestore

который +100500% к производительности

если взлетит)

у него есть понятие k и m

Оно выводится как size в свойствах пула. При k=3, m=2 size будет 5

который +100500% к производительности

Насколько я понял, пропадёт хак что журнал используется как кеш на запись.

поэтому для кеширования записи придётся мастерить чот своё

dmcache или чтото в этом стиле (там её пару решений есть)

ну зато у тебя убирается двойная запись

зато нет кеша на запись

и всё это говно с ФС

дада.

но ссд меня сейчас сильно вывозит

а если его не будет - то пиковые нагрузки превратятся в ад

у меня