А если все 1000 будут сразу писать друг другу через бота? + задача есть предусмотреть масштабируемость в будущем при возрастании нагрузки

Предположить 500 запросов в секунду?

Вряд ли у тебя такое будет.

Это много, это пиздец много.

Для бота.

В телеге.

У меня вечером 20 запросов в секунду, а так где-то 10.

MongoDB и MySQL жрут CPU как ссаные мрази.

В качестве постоянного хранилища думаю использовать postgresql

В качестве постоянного хранилища думаю использовать postgresql

Он тоже жрёт CPU.

Все базы жрут CPU.

Немудрено.

Кроме редиски, ясен хуй.

Ну и других in-memory.

Вряд ли у тебя такое будет.

Окей, каков порог сообщений/секунда когда нужно использовать очередь?

Окей, каков порог сообщений/секунда когда нужно использовать очередь?

Больше 1 в секунду уже можно задуматься.

До этого можно не задумываться.

MongoDB вообще любит на 100% по рандому забивать процессор.

индексы проставить надо )) без индексов у меня монга все cpu выедала на раз-два.

индексы проставить надо )) без индексов у меня монга все cpu выедала на раз-два.

На все поля индексы не поставишь.

(если бы)

А в моём случае вся база задействована.

Т.е. почти по всем полям выборки.

Я конечно проставил индексы там, где это необходимо.

ID всякие и т.д.

В качестве постоянного хранилища думаю использовать postgresql

Храни в монго, json же

На все поля индексы не поставишь.

что-то делает не то, если тебе на все поля нужны индексы.

Храни в монго, json же

Вот да.

+ MongoDB обожает запись.

Так обожает, что там по умолчанию fire and forget.

что-то делает не то, если тебе на все поля нужны индексы.

Аналитика.

Так обожает, что там по умолчанию fire and forget.

на каком движке?

на каком движке?

Wired Tiger.

зонятно.

Там всегда же была настройка write concern

Там всегда же была настройка write concern

Я про настройки по умолчанию.

К слову, я и не менял этого поведения.

Это нужно внимательно следить если update есть.

Направление куда двигаться ясно, спасибо большое за ответы. Пошел изучать подробнее.

А если ты просто пишешь, то в принципе, fire and forget.

я у себя хочу выпиливать монгу нафиг и переделывать хранение данных. жрет память как вне себя.

подумываю о tarantool

я у себя хочу выпиливать монгу нафиг и переделывать хранение данных. жрет память как вне себя.

правильно

монга это ваще мутант, переноскл, недоскл

подумываю о tarantool

маилрушные поделки не нужны

маилрушные поделки не нужны

там честный wal.

там честный wal.

основная бд у тебя какая?

епрст, 1500 сообщенек за 5 часов

епрст, 1500 сообщенек за 5 часов

https://comstatbot.xyz/telegram/chart

К успеху идём.

основная бд у тебя какая?

сейчас - монга.

вообще монга кому нибудь пригодилась ? у кого не спрашиваю все уходят от нее

вообще монга кому нибудь пригодилась ? у кого не спрашиваю все уходят от нее

Мы используем. 1тб данных, чуть не дотягиваем до 500млн документов

вообще монга кому нибудь пригодилась ? у кого не спрашиваю все уходят от нее

Я повсеместно использую.

а что храните в ней ? мы пробывали ее использовать. но не сраслось, теперь она на 2 плане. используется только для данных с парсера и логов.

а что храните в ней ? мы пробывали ее использовать. но не сраслось, теперь она на 2 плане. используется только для данных с парсера и логов.

Данные храним.

монга ваще хуйня полная

кривой псевдоскл синтаксис запросов

уродский

кривой псевдоскл синтаксис запросов

Где там псевдо sql?

Где там псевдо sql?

монговый язык запросов

Там оно и близко не напоминает sql

потомучто уродский

выборки и там и там

тока скл это нормальный вид

$elemMatch: { award: "Turing Award", year: { $gt: 1980 } }

вот это $gt особоый изврат

ERROR: S client not available

free - это функция в C.

Это слово в ангельском языке. Шах и мат

Это слово в ангельском языке. Шах и мат

?

У меня нет “начальника"

А в gitinsky.com ты кто?

Я думал, ротация только на радио бывает

Тыж лейтеха, про ротацию у военных забыл, когда отдохнувшие сменяют заебавшихся

А в gitinsky.com ты кто?

Сооснователь

Сооснователь

должность?

должность?

Главный инженер

Наемный работник? Не гендиректор?

Главный инженер

Ну вот а ты отрицал

У меня нет “начальника"

Ну вот а ты отрицал

Что отрицал?

Да - его нет

У меня нет “начальника"

Вот это. У главного инжинера есть начальник

Да - его нет

Как

Вот это. У главного инжинера есть начальник

Когда как

Как

Да вот так

Мной никто не управляет за полной бесполезностью этого дела

Я и без начальников справляюсь норм

2к сообщений за ночь.

2к сообщений за ночь.

MySQL обсуждали.

Какое бурное обсуждение я пропустил.

Да ходят вот слухи что MySQL быстрее чем Redis.

Поговаривают также, что кэшировать нужно в файлах, а не в оперативной памяти.

Redis? Я только о MySQL слышал.

Ну и правильно.

/stat@comstatbot

comstatbot.xyz/chat/-1001007166727

Всем привет! Делаю хеллоуворды с рекурсией. Выдает эксепшн из-за того, что не хватает заданной глубины. Увеличил через sys.setrecursionlimit() - интерпретатор падает. Как-то лечатся такие вещи?

Правкой рекурсии