почему?

Скорости не хватит

а вообще - надо мерять

Ну - стенда с самсунгами или интелами в рейде у меня нет

А так бы я померял

не пустое, но и проблемы не решит, особенно на таких количествах

ну мы же вроде уже обсуждали: шардинг в монго делается по некоему индексу. соответственно, достаточно легко вычисляется на каком шарде лежат необходимые данные.

Скорости не хватит

откуда такой вывод?

если даже у sata3 ssd на чтение ~ 550Mb/s и 80k iops

если мало - можно поставить пару в страйп.

если снова мало - есть nvme

их тоже можно в страйп

nvme из коробки даёт 1.3Gb/s чтения.

мы помним, что речь идет о 50TB?

или о 100

мы помним, что речь идет о 50TB?

и? речь не идёт о хранении индекса всех 50Тб

откуда такой вывод?

Не видел никогда сэсэдэ со скоростью и последовательной, и рандомной сравнимой с рамкой. Хотя, может, они м2 поставят и он меня удивит О.о

и? речь не идёт о хранении индекса всех 50Тб

Идет

впрочем, как дешевле, кластер rf=3 или один такой сервер со слейвом, это вопрос открытый

Идет

ооох...

впрочем, как дешевле, кластер rf=3 или один такой сервер со слейвом, это вопрос открытый

А со старта rf=3 и будет

а, ты хочешь индекс отдельно отнести, да. но полнотекстовый индекс может запросто оказаться сравним по объему

ещё раз: есть sharding key, который позволяет быстро понять на какой конткретно ноде искать данные.

т.е. просто берем и на каждой ноде имеем либо одну, либо пару ssd в страйпе.

а, ты хочешь индекс отдельно отнести, да. но полнотекстовый индекс может запросто оказаться сравним по объему

Поэтому нафиг пока полнотекст

Эээ, так что в итоге то решили?

Думаем еще

Нил, так что, спайк?

он хранит индекс иключительно в памяти

http://www.aerospike.com/docs/operations/plan/capacity

он хранит индекс иключительно в памяти

На 50Тб он будет подниматься сутки, если не больше, имхо

можешь посчитать под свою задачу, но циферки будут заоблачные

На 50Тб он будет подниматься сутки, если не больше, имхо

от количества нод зависит. но - да, часы

ещё раз напомню, что в mongodb можно хранить индексы отдельно от данных.

при этом, если индексы похерить, то это светит только их перестроением

ну и ещё компрессия данных из коробки.

от количества нод зависит. но - да, часы

Плохо. Придется базы разделять на тухлые и свежие записи.

не надо под эту задачу аэроспайк брать

надо кассандру

не надо под эту задачу аэроспайк брать

А что тогда?

Чем выигрывает кассандра?

и думать отдельно, что делать с полнотекстом

кассандра не держит все индексы в памяти

и не должна перестраивать индекс в памяти при старте

и думать отдельно, что делать с полнотекстом

Придумал уже, запилю еще раз свой отдельный полнотекст

А есть под кассандру подсчет ресурсов?

я не видел

но знаю, что на 7 нод и 500М объектов нам потребовалось внедрить bcache, чтобы ребалансинг не клал кластер

слушайте, при таких исходных данных надо самому проверять

О.О

Можно побыть бетатестером scylladb

Можно побыть бетатестером scylladb

Нельзяу

50Т я потом перекатывать из мертвых файликов как буду?

Это скорее наброс был, у них полно таких вещей: https://github.com/scylladb/scylla/labels/cassandra%202.2%20compatability

http://www.opennet.ru/opennews/art.shtml?num=46136

я правильно понимаю, что возможно и go для wasm? :)

Если возможен транспилер Go в Javascript , то возможно всё ?

давно есть

только зачем (

надо кассандру

-

Ай

А насколько это дешево?

на твои цифры дешево не будет, не расчитывай

Ну, а тачки под БД какие посоветуешь?

Ну, а тачки под БД какие посоветуешь?

с ssd :)

надо считать

экспериментировать, мерять, и считать

с ssd :)

У них это дефолт. Только не знаю, m2 или sata3.

У них это дефолт. Только не знаю, m2 или sata3.

m2 это формфактор, сата3 - шина

m2 бывает PCI-Express а бывает САТА3 )

"Не знаю что выбрать, БМВ или Седан"

если м2 - pci express, то он быстрее, пока не перегревается

m2 бывает PCI-Express а бывает САТА3 )

Ну - простите за неточность

если сата3 то одинаково

если м2 - pci express, то он быстрее, пока не перегревается

У них охлаждение хорошее

у м2 pcie дисков беда в том что они перегреваются без радиаторов и сильно деградируют по скорости, а радиаторы не ставят

хотя диску достаточно тонкой медной пластинки на контроллер

кстати тут уже обсуждали результаты опросника (Go Survey) за 2016 год?

https://blog.golang.org/survey2016-results

кстати тут уже обсуждали результаты опросника (Go Survey) за 2016 год?

Я не видел

ну а что они ожидали то? )

Тоже только-только ознакомился. Вполне ожидаемо.

ну а что они ожидали то? )

Ну, тут просто дженерикосрач был недавно

мол "а вот и не мешает!"

Не, в соседнем

Ну, тут просто дженерикосрач был недавно

он на соседнем канале прям ща идет

я только в одном по го есть

один из них в этом чате, а второй Роб Пайк

один из них в этом чате, а второй Роб Пайк

Russ Cox ещё

Осталось 34

интересно, почему он такой непопулярный?

интересно, почему он такой непопулярный?

В чём его фича?

14% пишут десктопные приложения