давай я придумаю, что тебе надо в базу писать 10миллиардов записей в секунду, и чтобы поверх еще SQL работал в то же время

ну глупо же

ну вот пишем мы mq.

зачем?

мы не "пишем mq", мы решаем конкретную бизнес-задачу

зачем?

например потому что имеющиеся не устраивают

например потому что имеющиеся не устраивают

еще раз - кончай про абстрактного коня в вакууме

люди не пишут mq, потому что им захотелось

сначала - задача, потом - архитектура

Все зависит от того насколько у тебя много свободного времени

:D

Все зависит от того насколько у тебя много свободного времени

и это тоже немаловажный фактор, да)

Все зависит от того насколько у тебя много свободного времени

еще от бизнес-требований :)

еще от бизнес-требований :)

я тебе уже полчаса про это пишу, да))

внезапно проснулся

))))

Безысходность

)))

celery вообще довольно тяжел

Тут спор какой-то странный. Вы спорите, что лучше, какой язык? Питон хорош там, где нужно быстро что-то запилить и дальше, когда бизнес вырос до тех размеров, когда переписать часть системы и затем получать профит с экономии на серверах, тут уже можно выдумывать го, яву и прочие си. А до этих пор писать на том, что более-менее работает, позволяет быстро выкатывать фичи ну и т.п.

Тут спор какой-то странный. Вы спорите, что лучше, какой язык? Питон хорош там, где нужно быстро что-то запилить и дальше, когда бизнес вырос до тех размеров, когда переписать часть системы и затем получать профит с экономии на серверах, тут уже можно выдумывать го, яву и прочие си. А до этих пор писать на том, что более-менее работает, позволяет быстро выкатывать фичи ну и т.п.

поддерживаю

Так а это же комбу

Селери тут постольку поскольку

просто я рассказывал, что есть довольно много случаев, когда питон для веба предпочтительнее го, а человек решил поспорить :)

Селери тут постольку поскольку

ну, есть, например, rq

В комбу надо поддержку кластера

Есть

я тебе уже полчаса про это пишу, да))

эмм.. я делаю анализатор трафика для защиты от ddos и мне довольно быстро надо узнать про тот или иной ip-адрес во внутренней бд. можешь считать, что это обычный dict где ключем является uit32, а значением - список со всякими счётчиками.

Есть

https://github.com/rq/rq/pull/808

и он проще в разы и уже умеет в кластер

эмм.. я делаю анализатор трафика для защиты от ddos и мне довольно быстро надо узнать про тот или иной ip-адрес во внутренней бд. можешь считать, что это обычный dict где ключем является uit32, а значением - список со всякими счётчиками.

а я работаю в компании, которая как раз на том, что ты описываешь, заработала кучу денег начиная еще с девяностых годов

Селери тут постольку поскольку

Это чудовище от Аск Салема? Нафиг

))

а я работаю в компании, которая как раз на том, что ты описываешь, заработала кучу денег начиная еще с девяностых годов

и написали они это на python? )))

и написали они это на python? )))

частично. Сам сервер на C, конечно же, но поток логов идет через кафку и анализируется разными моделями, в том числе питоновыми

частично. Сам сервер на C, конечно же, но поток логов идет через кафку и анализируется разными моделями, в том числе питоновыми

каких еще логов?

каких еще логов?

будешь смеяться, но DNS

)))))))

примерно миллион запросов в секунду в среднем

примерно миллион запросов в секунду в среднем

ну вот у меня ~ 40mpps на одном ядре.

ну вот у меня ~ 40mpps на одном ядре.

ути какой молодец

а у меня и так неплохо, а сервера у заказчиков стоят

и это самые высокопроизводительные DNS-сервера на рынке в принципе

давай еще пиписьками померяемся

:D

Так вы уже

и это самые высокопроизводительные DNS-сервера на рынке в принципе

А какая компания? Интерено стало

а у меня и так неплохо, а сервера у заказчиков стоят

ты путаешь задачи. вот прямо совсем.

А какая компания? Интерено стало

раньше http://nominum.com, теперь принадлежат Akamai

ты путаешь задачи. вот прямо совсем.

я задачу из реального мира привел. Не там, где веб-сервера на arm64.

я тебе про ситуацию, когда через твой код пролетает трафик и ты принимаешь решение что с этим делать. ты же про обработку событий от внешней системы.

Как бы то смешно не было, но весь спор, по сути, состоит из того, что сначала был мисскоммьюникейшн, затем перешло всё в эмоции и дальнейший мискоммьюникейшн

Как бы то смешно не было, но весь спор, по сути, состоит из того, что сначала был мисскоммьюникейшн, затем перешло всё в эмоции и дальнейший мискоммьюникейшн

угу.

я тебе про ситуацию, когда через твой код пролетает трафик и ты принимаешь решение что с этим делать. ты же про обработку событий от внешней системы.

если вообще стоит такая задача - то ничто не сравнится с аппаратным решением, а выжимать на питоне или го крупицы из нетворк-стека при наличии C - это уже отдельный изврат

если вообще стоит такая задача - то ничто не сравнится с аппаратным решением, а выжимать на питоне или го крупицы из нетворк-стека при наличии C - это уже отдельный изврат

нет.

нет.

прагуса ответ

Жалко не хватает парня с SOru

Чтобы он зашёл со слов

конечно, да

Вот у нас в сообществе считают..

И тогда бы

Да

Был комплект

И тогда бы

и ссылку еще на свой собственный пост

Да

где он хвалит soru

мол, это аргумент, у нас спецы

ERROR: S client not available

))))

На тему про питон и когда не надо юзать, в лучше выбрать подходящий инструмент, сегодня рассказывали про внутренности pyspark, где дата сереализуется в байты и запихивается байтами в jvm потому как по другому никак

И сидишь слушаешь и думаешь, собственно зачем

Ну есть же scala, ну нужен спарк

если вообще стоит такая задача - то ничто не сравнится с аппаратным решением, а выжимать на питоне или го крупицы из нетворк-стека при наличии C - это уже отдельный изврат

https://fd.io/2017/07/fdio-doubles-packet-throughput-performance-terabit-levels/

На тему про питон и когда не надо юзать, в лучше выбрать подходящий инструмент, сегодня рассказывали про внутренности pyspark, где дата сереализуется в байты и запихивается байтами в jvm потому как по другому никак

причем вроде свой протокол даже, не pickle и не msgpack

Ну иди пиши на скале

Ну на джаве на худой конец

если вообще стоит такая задача - то ничто не сравнится с аппаратным решением, а выжимать на питоне или го крупицы из нетворк-стека при наличии C - это уже отдельный изврат

терабит.

Там же в рамках api spark не много боли

терабит.

для аппаратного решения - не проблема, а в софтверном уровне - С

Это про то, что гвозди в ногу ради привычного языка

Это про то, что гвозди в ногу ради привычного языка

ну, народ до сих пор боится скалы часто

незаслуженно

да еще и на курсах всех учат на питоне писать

интересно, сколько можно выжать производительности из правильно завериложенного FPGA

Ага

ну хейтеры же

)))

для аппаратного решения - не проблема, а в софтверном уровне - С

1)многое ты не сделаешь в железе и это очень-очень дорого. 2) разница с си очень и очень маленькая.

интересно, сколько можно выжать производительности из правильно завериложенного FPGA

это феноменально дорого будет.

это к вопросу о бизнес-требованиях.

1)многое ты не сделаешь в железе и это очень-очень дорого. 2) разница с си очень и очень маленькая.

1) вполне себе сделаешь, есть производители сетевых даже ASIC'ов, не говоря об FPGA 2) если вы там реально эту хню программите на го - то вы наркоманы

Больше оскорблений!!

Больше!!

:D

не, ну просто такие вещи пишутся только на си и только командой хороших низкоуровневых разрабов

А лучше на ассемблере

хипстеров на молодом языке с детскими болезнями туда подпускать, как минимум, странно

Так надежнее

это я не про моего собеседника, это я вообще, никого не хочу оскорбить