но у кроля есть вещи, которых нет ни у кого. Одна беда - тормозной.

Такое себе замечание, тормозной - это какие цифры?

10-15kmsg/s

Поверьте, это очень мало для геораспределенных систем.

Верю, а что в замен?

я предлагал но до тестов не дошло

Схожее по функционалу

так что ничего пока

был бы пилот альтернатив - рассказал чо да как

ну 1. персистентные сообщения в очереди 2. кластеризация 3. возможность спокойно набрасывать в очередь не думая подписан на нее кто-то или нет (у nats.io этого нет) 4. поддержка клинтов другими языками (php, java, nodejs, python) 5. быстрый паблишинг (важнее чем подписка)

кажется это самое основное

у кроля через эксченджи отличная скорость паблишинга, а если учесть, что паблишеры обычно размыты, то все вполне разумно

он на пиковой нагрузке паблишингу отдает приоритет

Stanislav кстати, сегодня тестировал (правда, на дефолтной установке из homebrew) - по сравнению с sidekiq скорость ниже =/

сайдкик сколько показал? Я слышал он быстр

ну у меня rabbit выдавал что-то в районе 15k rps на паблиш, а sidekiq - в районе 50k rps

но что у сайдкика с надежностью и масштабируемостью? А то отличных решений для локалхоста я знаю немало

цифры примерные, но порядок такой

ну, sidekiq в этом проигрывает, поэтому и смотрим на rabbit )

на бинстолке можно и 1М взять, толку правда никакого при задаче фейловера и масштабирования

вон, натс пишут 1М может

а толку

да, согласен, масштабируемость - всегда влияет на скорость

редис тоже 1М позволяет взять, но опять же, кейс локалхоста как у бинстолка (вру, оба могут в сингл-мастер и мультислейв - но нам это не поможет)

у нас еще юзкейс такой, нам важен не объем в секунду, а то, как быстро мы сможем опубликовать одно сообщение в стеке вызова. ну два.

вообще, интересно еще протестировать разницу в скорости отправки многих маленьких сообщений и нескольких больших через rabbit

мы тестировали

если интересно могу порыться

и что выгоднее? )

но если серьезно, мы гребем с редисов и рэббитов в сторону кафки и аэроспайка

большие

аероспайк хорош но там тоже не все гладко

Ну я то как раз знаю всю его темную сторону

Так что тут мои спят спокойно

я например задолбался в нем копаться чтоб он унас заработал как надо. а на ишьюсы они отвечают раз в 3 месяца и ответ такой - кидаю тебе ссылку на раздел Jobs на их сайте

мол приходи и сделай

можно купить лицензию на полгода и теребить саппорт в реалтайме пока настраиваеться кластер

Я знаю историю про упоротых, которые собирают под аэроспайк несимметричную NUMA на базе Dell R730. В одном сокете вся оперативка 4 канальная, а во втором - только одна палка памяти.

И они очень довольны таким конфигом

ну, хорошо это или плохо не скажу, но у нас никогда не был освоего железа. мы все в амазоне покупаем

А в таблице цифры точно в миллисекундах?

ну и лежим вместе с ним

И единичные?

У платного эроспайка есть еще парочка критичных плюшек для промышленных деплоев

А в таблице цифры точно в миллисекундах?

да, но я писал что в колнках не 1000 а 10000 сообщений ,я опечатался

в принципе я допускаю что с кластером что-то не то, но что именно не могу понять. меня самого настораживают такие цифры )

хотя, этож пхп что вы от него хотите

да, наши тоже ушли на php-amqp из-за этого

c-клиент, голый, примерно в 30 быстрее по замерам

Не совсем понятно как время щамеряли

После коннекта, всех деклараций и биндинга?

просто этож tcp. что там бедная пыха может делать ))) открывает сокет, while (true) и полетели. жизнь в одном потоке она такая, суровая

У платного эроспайка есть еще парочка критичных плюшек для промышленных деплоев

мегахак юзать комунити версию и купить саппорт )

Не совсем понятно как время щамеряли

там есть штатный функционал

После коннекта, всех деклараций и биндинга?

коннект отдельно, паблишинг отдельно. декларация и биндинг вынесены за замеры и они в замерах не учавствовали

мегахак юзать комунити версию и купить саппорт )

Это очень по-хипсторски, не могу не согласиться.

я мерил пару дней назад с ними они дают минимальный оверхед

там есть штатный функционал

Наверное не понимаю о чем речь, подскажите где такие метрики увидеть?

Вы не программер?

коннект отдельно, паблишинг отдельно. декларация и биндинг вынесены за замеры и они в замерах не учавствовали

Ясно понятно, т.е. пхп скрипт будет работать типа в режиме демона?

Легкий намек: http://php.net/manual/en/function.getrusage.php

Не php-fpm?

Ясно понятно, т.е. пхп скрипт будет работать типа в режиме демона?

если на подписку то наверное да. но нам это не важно. у нас пришел клиент, открыл страницу, что-то поделал и ушел. пока он на странице мы публикуем сообщение (я) идногда одно иногда несколько. в зависисмости от страницы - своя логика. например загрузил пдф, мы файл сохранили а java воркеру бросили сообщение с путем к файлу для конвертации. короче много вот такой скучной логики

и почти всегда это буквально несколько сообщений за сеанс

как долго они будут обрабатываться будут консюмером - почти не важно

соответственно чем быстрее мы скажем клиенту что все ок, закончим рендерить страницу на которой он находится, тем для нас лучше

разница в 50 миллисекунд влияет на продажи, как мне говорят маркетологи

так что я три недели все это тещу и пока одна печаль

завтра буду редис тестить

Вы не программер?

Программер, но всегда предпочитал измерять время выполнения чего либо microtime'ом

ну я так иделал

Речь только про время выполнения

Завтра обязательно заюзаю, гляну че там да как с инфой

Легкий намек: http://php.net/manual/en/function.getrusage.php

Спасибо

разница в 50 миллисекунд влияет на продажи, как мне говорят маркетологи

Это все почему? Это потому что им надо свалить на кого-то свою неспособность повлиять на продажи и не остаться без работы. Некомпетентность и безблагодатность. Им остается только слушать радио Радонеж и поститься.

просто этож tcp. что там бедная пыха может делать ))) открывает сокет, while (true) и полетели. жизнь в одном потоке она такая, суровая

маршалит данные скорее всего )

Это все почему? Это потому что им надо свалить на кого-то свою неспособность повлиять на продажи и не остаться без работы. Некомпетентность и безблагодатность. Им остается только слушать радио Радонеж и поститься.

ну, президент слушает маркетологов а не разработчиков / девпсов

я даже спорил - говорю не может организм отловить разницу в 50 миооесекунд. не верят мне, говорят может

я даже спорил - говорю не может организм отловить разницу в 50 миооесекунд. не верят мне, говорят может

можно провести тест )

я говорю в секунде 1000 милесекунд. а это 50 милисекунд - все равно не верят

50% людей вставлять sleep на 50ms :)