извините за тупой вопрос (сам от себя не ожидал), но легально ли использовать threadpoolexecutor в wsgi окружении?

Добрый вечер. Пишу микросервис, который должен отвечать на запросы вида example.com/<a>/<b>/<c> Протестировал несколько фреймворков (flask, bottle, aiohttp) и производительность не впечатлила: 2000 запросов в секунду - максимум. Я что-то делаю не так и можно ускорить или это типичная цифра?

Добрый вечер. Пишу микросервис, который должен отвечать на запросы вида example.com/<a>/<b>/<c> Протестировал несколько фреймворков (flask, bottle, aiohttp) и производительность не впечатлила: 2000 запросов в секунду - максимум. Я что-то делаю не так и можно ускорить или это типичная цифра?

посмотри hug.rest еще

извините за тупой вопрос (сам от себя не ожидал), но легально ли использовать threadpoolexecutor в wsgi окружении?

с трудом представляю задачу, когда бы для wsgi-хэндлера потребовались бы треды.

посмотри hug.rest еще

Если запросов мало, то 1500 RPS, а если много, то вообще подвисает и ab пишет "apr_socket_recv: Connection reset by peer (104)".

Но, возможно, это косяк ab, а не hug. Хотя с другими такого не было.

Добрый вечер. Пишу микросервис, который должен отвечать на запросы вида example.com/<a>/<b>/<c> Протестировал несколько фреймворков (flask, bottle, aiohttp) и производительность не впечатлила: 2000 запросов в секунду - максимум. Я что-то делаю не так и можно ускорить или это типичная цифра?

пробовал https://falconframework.org/?

Но, возможно, это косяк ab, а не hug. Хотя с другими такого не было.

так ты на дев-сервере что ли проверяешь? сделай нормальный сетап с uwsgi+nginx

так ты на дев-сервере что ли проверяешь? сделай нормальный сетап с uwsgi+nginx

Похоже, что да. До этого делал микросервисы только на Go, а там встроенный сервер, который 20 000 RPS из коробки выдаёт. Думал в python аналогично, а нет ( C gunicorn лучше: 3500 rps с одним воркером и 10 000 rps c четырьмя. Возможно с nginx+uwsgi будет ещё лучше, но

Как расшаривать общие данные между процессами?

Обычно путем использования базы данных для хранения этих самых общих данных. А так можно и mmap использовать, если очень хочется. Зависит от задачи

Есть multiprocessing.Queue, есть сокеты

Ясно, спасибо.

Похоже, что да. До этого делал микросервисы только на Go, а там встроенный сервер, который 20 000 RPS из коробки выдаёт. Думал в python аналогично, а нет ( C gunicorn лучше: 3500 rps с одним воркером и 10 000 rps c четырьмя. Возможно с nginx+uwsgi будет ещё лучше, но

gunicorn намного медленнее uwsgi. у тебя реально на продакшене такая нагрузка или просто так измеряешь?

у меня на продакшене до 3 млн хитов в час, там по одному не самому мощному серверу на сервис. на одном hug+uwsgi+nginx, на втором flask+uwsgi+nginx, справляются очень хорошо

ну так стандартно же, надо чтобы было 20к запросов в секунду, а на деле будет 5 в минуту ?

да ладно. я вот пилил пару поделок на питоне под нагрузки >10к запросов в секунду. обычно упирается все в разлапистую логику, работу с базой, производительность орма

ребят, писал кто-нибудь тут кейлогер на питоне? посоветуйте куда копать)

winapi

ребят, писал кто-нибудь тут кейлогер на питоне? посоветуйте куда копать)

Зачем тебе кейлогер на питоне?

Зачем тебе кейлогер на питоне?

Стало интересно как на питоне его реализовать) А вообще таккое на чем лучше писать? )

Стало интересно как на питоне его реализовать) А вообще таккое на чем лучше писать? )

На крестах

python: win32api + pyHook

python: win32api + pyHook

спасибо. сейчас буду пробовать)

python: win32api + pyHook

хмм, при помощ win32api пишут для windows x32, да? А более универсального варианта нет? Вообще целью является андроид. В плеймаркете не нашел нужный(да и не доверяю :) ). Вот думал попытаться написать на питоне и с помощью Kivy сделать приложение на андроид. Пока просто идея, но без понятия можно ли такое сделать.

нет, не для win32, и для 64 тоже на андроиде совершенно другое

хмм, при помощ win32api пишут для windows x32, да? А более универсального варианта нет? Вообще целью является андроид. В плеймаркете не нашел нужный(да и не доверяю :) ). Вот думал попытаться написать на питоне и с помощью Kivy сделать приложение на андроид. Пока просто идея, но без понятия можно ли такое сделать.

Такс такс что тут у нас

Опять мамкины кулхакеры

Универсальная библиотека кейлогинга под все платформы звучит крайне мало вероятно. Если и есть такое, то скорее всего на C.

Ну так хочет сам написать - уже прогресс.

Может вырастет новый Марк Руссинович

кейлоггер под андроид не возможен же)

кейлоггер под андроид не возможен же)

сама ос не позволяет?

да

Опять мамкины кулхакеры

ойвсе

чё-чё? пишешь свою клаву, подсовываешь вместо текущей. вот тебе и кейлогер

эт надо сделать клаву такую же как у пользователя)

а как угадать?)

эт надо сделать клаву такую же как у пользователя)

зачем? просто делаешь супер-пупер клаву, которую ставит сам пользователь, потом сам включает в настройках (видя предупреждение, что клаве будет доступно набираемое)

ну это все теоретические способы)

зачем? просто делаешь супер-пупер клаву, которую ставит сам пользователь, потом сам включает в настройках (видя предупреждение, что клаве будет доступно набираемое)

Я как-то ставил гуглоклаву, она и вправду всё запоминает, там в памяти было 40Мбайт

Типа её кэш

https://play.google.com/store/apps/details?id=com.androapps.keystroke.logger

Хотя все функции, синхронизации, подсказки, словарей я повырубал

https://play.google.com/store/apps/details?id=com.google.android.inputmethod.latin

подскажите

хочу хостить 15 гб файлов

где-нибудь

статики

гугл диск

там нет прямых ссылок, нинравится

яндекс диск

мега дает бесплатно 50 гб

точнее они по-моему есть, но уходят в прошлое

у яндекс диска вроде еще и вебдав есть

как раз

:D

Ребят, есть у кого промокод на фрилансим?

и что они дают?))

и надо прикрутить к нему веб морду на запуск\остановку

Черех пхп shell_exec, ахахахах)))))

Привет. Есть ли на питоне3 рабочий обфрускатор или минимизатор JS кода Angular. Кто чем пользовался?

ERROR: S client not available

Привет. Есть ли на питоне3 рабочий обфрускатор или минимизатор JS кода Angular. Кто чем пользовался?

а в чём проблема пользовать минификаторы под npm?

нужно динамически обрабатывать. страницы хранятся с БД. выдернул, обработал сохранил в другое поле, все опреации без использования жесткого диска. с npm не знаю как из питона вызывать.

https://pypi.python.org/pypi/UgliPyJS/0.2.1 Но я даже не знаю, насколько он outdated.

нужно динамически обрабатывать. страницы хранятся с БД. выдернул, обработал сохранил в другое поле, все опреации без использования жесткого диска. с npm не знаю как из питона вызывать.

подними сервис на ноде, который будет это делать, дёргай питоном из бд, и корми ему странички через очередь сообщений или http. хотя, может, сильный оверкилл.

всё, что я могу сказать тебе, что лучше, чем библиотека на js с этой задачей ничего не справится. нет ничего плохого в том, чтобы пользовать другую технологию, если она подходит для задачи лучше, чем твоя основная.

как не хотелось внешние вызовы делать, но видимо придется. благо twisted все это обслуживает, с асинхроностью справится. спасибо.

как не хотелось внешние вызовы делать, но видимо придется. благо twisted все это обслуживает, с асинхроностью справится. спасибо.

тут вопрос будет только в скорости работы. если subprocess медленно отрабатывать будет (из-за того, что приложение на ноде придётся для каждой странички запускать заново), придётся пилить прямо сервис на ноде, который в фоне будет работать и слушать либо очередь, либо порт. если хватит скорости, то почему бы и нет. пожалуйста )

Черех пхп shell_exec, ахахахах)))))

а есть еще варианты?

а есть еще варианты?

я в питоне для веба не шарю вообще, если честно, но этот вариант самый глупый и простой вроде

я в питоне для веба не шарю вообще, если честно, но этот вариант самый глупый и простой вроде

Ну так-то до сигналов и допизделись

http://www.oreilly.com/programming/free/

свежо

ребят, а slack android только дя команды? Общего чата нету что ли?

No handlers could be found for logger "keyedcache" кто-то знает что за ошибка?

в джанге

очевиднно криво настроена секция LOGGING в settings.py

очевиднно криво настроена секция LOGGING в settings.py

https://gist.github.com/anonymous/48b5fddb82f19ed414d67e8b9a185cba

ребятушки

Подскажите по пайпам а?

Я хочу из avconv звук в питон скрипт через пайп фигачить

в скрипте написал #!/usr/bin/python2.7 import sys for line in sys.stdin: print line + "321"

avconv -i http://stream.online.ru/hls/video.m3u8 -t 5 -acodec pcm_u8 -ar 22050 -f wav pipe:1 | ./writer.py

по идее должен бинарный поток принтить) ну крякозябры хоть что-то но нет:(

а он читает, пока не найдет перевод каретки

и ему очень повезет, если такой байт там найдется

читай бинарно

Use the -u command line switch to force Python 2 to treat stdin, stdout and stderr as binary unbuffered streams. C:> type mydoc.txt | python.exe -u myscript.py

и еще наверно вот это

https://gist.github.com/anonymous/48b5fddb82f19ed414d67e8b9a185cba

Ну добавь логер "keyedcache" и укажи ему хэндлер

Use the -u command line switch to force Python 2 to treat stdin, stdout and stderr as binary unbuffered streams. C:> type mydoc.txt | python.exe -u myscript.py

угу python2.7 -u начал чето читать