Давайте я лучше накину. Как вам lsyncd в качестве распределенной фс?

в нем немножечко не хватает распределенности и файловой системы

Давайте я лучше накину. Как вам lsyncd в качестве распределенной фс?

если синкать пару лямов файликов то збс

Давайте я лучше накину. Как вам lsyncd в качестве распределенной фс?

вроде у неё были какие-то недостатки, но уже не помню

у него недостаток это sqlite )

какие-то парни из МИФИ пилили на замену ему и аналогам свой clsync, но по-моему его как полтора года не сопровождают он должен был решить все проблемы - и дёрганья rsync сто раз в секунду, и парсинга большого кол-ва файлов

какие-то парни из МИФИ пилили на замену ему и аналогам свой clsync, но по-моему его как полтора года не сопровождают он должен был решить все проблемы - и дёрганья rsync сто раз в секунду, и парсинга большого кол-ва файлов

их можно пнуть в irc и они что-нибудь поправят )

их можно пнуть в irc и они что-нибудь поправят )

я пинал, но по-моему они заняты хотя я пинал так, абстрактно, без конкретных просьб =)

какие-то парни из МИФИ пилили на замену ему и аналогам свой clsync, но по-моему его как полтора года не сопровождают он должен был решить все проблемы - и дёрганья rsync сто раз в секунду, и парсинга большого кол-ва файлов

тоесть путь получился csync -> lsync -> clsync ?

тоесть путь получился csync -> lsync -> clsync ?

не, у них свой движок поверх inotify и rsync, решающий проблемы остальных решений ну всмысле эволюционно похоже, что да там правда между ними ещё csync2 затерялся

2 миллиона файлов?

вроде clsync-ом уже можно сейчас пользоваться, но вроде они писали, что есть какие-то ещё неисправленные баги, типа не продакшн реди писали они для своих нужд, похоже их всё устраивает у себя

делайте выдачу динамической страницы кешируемой с TTL 5 секунд

кэш тоже может применять шаблоны, кстати. динамичной странице не обязательно всей кэшироваться.

кэш тоже может применять шаблоны, кстати. динамичной странице не обязательно всей кэшироваться.

ну да, я и имею ввиду кешировать прогрузку динамики в приложении, чтобы она доставалась просто из кэша во время рендеринга

а куда цепочка из рсинков?

просто 2 ляма файлов двигать из одной стороны в другую?

это таки логи, стата или что ?

видимо немножко асинхронный файловый гео-кластер

хз автор пропал

хз автор пропал

xai тусуется на freenode в #clsync , если есть конкретные пожелания

я говорил про автора вопроса

а

хз автор пропал

ну я набросил, тему сменил, мне норм

мне надоело про рефереры и ботов читать

я ж сайты не на пхп пишу :)

на пхп одним серваком вполне работали до оптимизация на 43к юзеров одновременно играющих в игру. (сперва 20 потолок был, потом кто-то нашел ORM включенный и забытый, стало ок). не засчитан хейт)

RunAbove (бета-лаборатория OVH) тестит Shinken as a Service, доступ за копейки https://www.runabove.com/shinken.xml если будет саксес, появится постоянной платной услугой

мне надоело про рефереры и ботов читать

а у тебя интерфейс или апи?

читаешь, пишешь сколько?

про пхп - это наброс был :)

а что значит 43к "одновременно играющих"? это рпсов-то сколько?

рпс - это?

requests per second

"одновременно играющих" это не очень понятно

а что значит 43к "одновременно играющих"? это рпсов-то сколько?

это когда дуров поменял алгоритмы и мы оказались на 2м месте на 2й странице приложений вк всех

рпсов-то сколько? я не знаю, что за игра у вас

"одновременно играющих" это не очень понятно

есть кейсы где очень быстро от юзера идут запросы. но очередями с перерывами по несколько минут. + игра постоянно тусит в апи вк (оно медленное) и считает социальный граф новый + обновляет старый.

изменения одного юзера влияет на других в его социальном граф, особенно если тот онлайн

то есть если от юзера пара запросов в минуту, то столько на моем ноуте можно отсервить

рпсов-то сколько? я не знаю, что за игра у вас

не знаю.

фоном примерно раз в 5 секунд обмен данными. + активность юзера - каждое событие.

а у тебя интерфейс или апи?

что? где? кто?

ну, что ддосят

меня?

я не особо по большим нагрузкам спец, больше 1000 рпсов не видел

а, нет, видел 3к рпс, но один раз только

что? где? кто?

не туда ткнул, походу

а, нет, видел 3к рпс, но один раз только

ну, ту нагрузку юзеров умнож на 42к и медленный отклик апи вк

42 к надо не множить, а делить

если запрос в среднем раз в 5-6 сек

всмысле?

от каждого юзера

по логике игры

и таких юзеров налиии 42к

в смысле, если юзеров 40к и в среднем запрос раз в 5 сек

то рпсов будет 8к

нет, каждый

я описал как игра сама себя ведет на каждом юзере на стороне клиента

еще раз

со стороны клиента запрос раз в 5 секунд?

в среднем

каждый юзер может мышкой создавать активность + сам по себе раз в примерно 5 секунд дергает сервер.

да.

ну да

умножаешь на количество клиентов

если таких юзеров 40 , то запросов в секунду 8

40к

ну 40 000

ERROR: S client not available

что-то с арифметикой совсем плохо что-ли?

сошлось?

если 40 чел раз в 5 сек дергают сервер

40 тысяч людей

то сервер в секунду дергается 8 раз

раз в 5 секунд

епрст

Бывают дурни, которые делают апи без батчинга

занавес....

И потом маются с кучей rps

Бывают дурни, которые делают апи без батчинга

это было давно)

времена первого зенда

На современном железе легко можно получить хоть пару млн rps

это было давно)

Не имеет значения

На современном железе легко можно получить хоть пару млн rps

пару млн сложно

пару млн сложно

С батчами?

пинцет, я не могу объяснить человеку ,что "если раз в 5 сенкунд" ,то в одне секунду будет в 5 рез меньше....

С батчами?

именно RPS на фронтэнд - не важно с чем, тупо в сеточку упираться начнет

С батчами?

Даже с батчами, мало-мальски что-то значащие сообщения в колличестве 1 млн перестанут влезать в 10 гбит

т.е. это уже будет не очень просто

пинцет, я не могу объяснить человеку ,что "если раз в 5 сенкунд" ,то в одне секунду будет в 5 рез меньше....

эмм, ты точно это пытаешься объяснить?

ну как бы да, я гвоорю 8к рпс при 40к юзеров

мне в ответ что-то про еще умножить на что-то там

ну как бы да, я гвоорю 8к рпс при 40к юзеров

к я не заметил. с ним и спорил.

успокаивайся)

я это просто раза три сказал :)

разными словами

сли 40 чел раз в 5 сек дергают сервер

Maxim Penzin, [24 июня 2016 г., 18:41]: если таких юзеров 40 , то запросов в секунду 8

и так далее.

я допускаю что я сонный, но не настолько же что бы К не увидеть?

мы друг друга поняли, в итог, все ок?)