Я бы так туда-сюда не бегал

Решают гибридные схемы

Что-то в Pg, что-то в кассандре

А о каком количестве объектов в таблицах речь?

И я бы не сказал, что они не парятся

я застал кончину whitehost в 13, кажется, кончину mchosta, кучи хабра и лепро хостингов.

Ну давай 50м в сутки

50м?

не понял

я застал кончину whitehost в 13, кажется, кончину mchosta, кучи хабра и лепро хостингов.

Слушай, а что такое лепрохостинги? Я чтот пропустил или лепра реально плодила хостинги для своих?

Записей

Слушай, а что такое лепрохостинги? Я чтот пропустил или лепра реально плодила хостинги для своих?

ну, какое-то количество было.

Ну давай 50м в сутки

И как оно сейчас в постгресе существует?

Слушай, а что такое лепрохостинги? Я чтот пропустил или лепра реально плодила хостинги для своих?

наверное пользователи постили рекламу своих микрохостингов

Какой-нибудь полуручной шардинг?

Какой-нибудь полуручной шардинг?

так вот тот первый флопс - тоже откуда-то из социалки и то там хорошо, то плохо...

50 миллионов

В сутки записывать

Последовательно

не много.

Ну - это я уже понял

Сейчас никак

Да, в общем-то, довольно много

так вот тот первый флопс - тоже откуда-то из социалки и то там хорошо, то плохо...

на флопсе сейчас всегда хорошо, если что но возможно это было не мне

Кассандра отлично подойдёт есть смысл запариться

За 20 дней миллиард Это, кагбе, дохрена

бг 600к записей (изменение статуса или что-то такое) на nosql базе обрабатывал пока к нему на хост не подселили проектов еще, секунды за полторы.

Кассандра отлично подойдёт есть смысл запариться

Ну - а вы пробовали?

Да все было быстро пиздец

А сколько записей-то было?

Пг в несколько раз хуже

Мало тысячи

Аааа, хорошо

Вас ждет ряд неприятных открытий

В чем?

Первое из которых - кассандра использует mmapped files

Да во всем

Ну и отлично?

Отлично?

Я правильно понимаю, что CTO ушел

А новый не вырос?

кстати, по поводу нагрузок. мне тут про технологии стучалась какая-то женщина из IBM. может выбьем коллективную скидку от них для чатика?)

И слова “memory-mapped files” не говорят ничего?

ток я не знаю чего хотеть

Разве ммап это не то как работают все файлы?

Нет

Это специальный сисколл тащемта

https://vscale.io/ru/ - а старый он?

Который мэпит файл на виртуальную память

https://vscale.io/ru/ - а старый он?

не старый хотя я не понимаю критерия "старый", что имеется ввиду?

как давно существует

по-моему меньше года

Который мэпит файл на виртуальную память

так норм же! Виртуальной памяти много, ее не жалко.

селектел - это адекватные чуваки?

да

так норм же! Виртуальной памяти много, ее не жалко.

+1

+1

А если будет не хватать - увеличим свап.

Но 50 миллионов записей в день - это хорошо, да

да

это про селектел? вскале.ио - их проект, выходит.

Если не секрет - откуда такой поток

это про селектел? вскале.ио - их проект, выходит.

да

пойду регаться)

Ну и, конечно, тот факт, что кассандра - write-optimized А читать с нее весьма сильная боль Он кагбе тоже ускользнул

Пока хотсет в памяти - она лучше постгреса, дооо

а кто такая касандра?

ток не бейте

В системе ты открываешь файл а ос внутри делает ммап

И это самый быстрый и оч. Надёжный способ

ERROR: S client not available

Если вообще есть критерии для сравнения этих двух не слишком похожих систем хранения и извлечения информации

В системе ты открываешь файл а ос внутри делает ммап

Да? Это новость

50м это 10м пользователей

Ну открой реализацию fopen

50м это 10м пользователей

10м пользователей это аудитория большая, чем у MRA была

И 5 сообщений у каждого в личке

Актор сейчас в сети имеет пол ляма, новые кастомеры новые юзера

Если со сбером контракт подпишем то там сразу трафика будет прорва

Ну - у любого роста есть предел же

Ну да

До 2 ярдов)

Но идея в общем все та же Чтобы кассандра нормально работала, надо чтобы хотсет не слишком вызывающего размера был

А то вышеупомянутые 20Т диски прикладывали довольно плотно

Обычно так да

Правда, коллеги нашли способ это преодолеть

Сервер наш все сам кеширует

Там чтения даже нет обычно просто запись и иногда чтение

Все в оператве сервера идёт иначе такой перфрманс не сделать

Ну - тогда более-менее пофиг

Это логично, да

Сорян у меня тут инет пропадет

Ну вот для этой машины и разрабов и девопсов сложно найти)

Да чот не должно быть сложно-то

Штук 5 в месяц разработчику Штуки 4 в месяц девопсу

И все найдутся, я гарантирую

да

Закидывать баблом не получается слишком много пиздаболов

Особенно в мск

а че такого?

Да при чем тут “закидывать"

Это не очень большая зарплата хорошего специалиста

Четверть ляма серьёзная сумма