Command "/home/Downloads/test/bin/python3 -u -c "import setuptools, tokenize;__file__='/initrd/mnt/tmpfs/tmp/pip-install-oa8c_48m/cryptoapy/setup.py';f=getattr(tokenize, 'open', open)(__file__);code=f.read().replace('\r\n', '\n');f.close();exec(compile(code, __file__, 'exec'))" install --record /initrd/mnt/tmpfs/tmp/pip-record-10b26_vr/install-record.txt --single-version-externally-managed --compile --install-headers /root/Downloads/test/include/site/python3.7/cryptoapy" failed with error code 1 in /initrd/mnt/tmpfs/tmp/pip-install-oa8c_48m/cryptoapy/

О, кто хейтит винду?

Алекс

совет номер один - линукс говно

гг

а тут есть люди, у которых есть винда?

а тут есть люди, у которых есть винда?

у меня есть... я под ней элитку гоняю

а тут есть люди, у которых есть винда?

у меня есть

а тут есть люди, у которых есть винда?

+

я фоточки в винде делаю

на ноутбуке

и на компе

а тут есть люди, у которых есть винда?

+

а тут есть люди, у которых есть винда?

Да, я под виндой сижу. 90% разработки под виндой

и фотошопы с лайтрумами иногда

По моему на любой ос можно сделать любую задачу, вопрос лишь в способе подходящем для конкретной оси

и линукс есть

https://github.com/aragaer/channels/issues/1

По моему на любой ос можно сделать любую задачу, вопрос лишь в способе подходящем для конкретной оси

как на виндовсе создавать софт для мак?

как на виндовсе создавать софт для мак?

Мак не нужон

Мак не нужон

но тем не менее, гипотеза не подтвердилась

как зачем? во имя науки

Красивая буханочка, прям произведение искусства

Товарищи. Не могу одуплить где в developers.facebook.com получить acces token. Подскажете?

Красивая буханочка, прям произведение искусства

это концепт уаза буханки

так чо, кто запилит пуллреквест?

так чо, кто запилит пуллреквест?

Во имя науки конечно можно было бы. Но в обмен на установку плинтусов. (Заебался по одной палке вечерами ставить)

так чо, кто запилит пуллреквест?

Там же написано уже что можно юзать msvcчототам

Товарищи. Не могу одуплить где в developers.facebook.com получить acces token. Подскажете?

https://www.wikihow.com/Get-Access-Tokens-on-Facebook

@gloomy_philosopher ^

@aragaer ^

При использовании очередей (Redis Queue или Celery) создаются ли под таски отдельные большие треды (как в multithreading) или маленькие легкие треды (как в asyncio при передаче контроля туда-сюда)? Я имею ввиду, есть ли прирост в производительности при использовании очередей, вместо ручного создания тредов в Python?

При использовании очередей (Redis Queue или Celery) создаются ли под таски отдельные большие треды (как в multithreading) или маленькие легкие треды (как в asyncio при передаче контроля туда-сюда)? Я имею ввиду, есть ли прирост в производительности при использовании очередей, вместо ручного создания тредов в Python?

WUT?

шозанаркомания?

используемая очередь ничего не говорит о том как сообщения из очереди будут обрабатываться

WUT?

вооот, уже хорошо, значит я что-то очевидно понимаю не так :)

Треды бывают легкими и большими?

При использовании очередей (Redis Queue или Celery) создаются ли под таски отдельные большие треды (как в multithreading) или маленькие легкие треды (как в asyncio при передаче контроля туда-сюда)? Я имею ввиду, есть ли прирост в производительности при использовании очередей, вместо ручного создания тредов в Python?

В селери таски выполняются в отдельных процессах-воркерах

Треды бывают легкими и большими?

это разные вещи.

в celery таки будут выполнятся так как настроешь celery worker

это могут быть как процессы, так и gevent какой-нибудь с легковесными потоками

может быть вообще один процесс

это разные вещи.

Ну там написано" большие треды (как в multithreading) или маленькие легкие треды (как в asyncio"

Ну там написано" большие треды (как в multithreading) или маленькие легкие треды (как в asyncio"

ну да на если очень утрировать бывают треды ОС и корутины \ green threads \ еще сотня названий

может быть вообще один процесс

понял, очень внятно объяснили, "light-weight threading" как раз из gevent в голове подтянулось, да :) тогда уточнение - одну и ту же задачу можно написать через async/await и через отдавание ее в Celery, образно. что эффективнее? я разбираюсь с вопросом, очевидно могу не так его задать, но пока вы вполне понятно объясняете :)

понял, очень внятно объяснили, "light-weight threading" как раз из gevent в голове подтянулось, да :) тогда уточнение - одну и ту же задачу можно написать через async/await и через отдавание ее в Celery, образно. что эффективнее? я разбираюсь с вопросом, очевидно могу не так его задать, но пока вы вполне понятно объясняете :)

зависит от задачи.

ну да на если очень утрировать бывают треды ОС и корутины \ green threads \ еще сотня названий

Хех, а я даже не задумывался, ну тред он и в Африке тред)

если кратко - CPU-bound - смотрим в сторону multiprocessing IO-bound - async

если кратко - CPU-bound - смотрим в сторону multiprocessing IO-bound - async

это понятно, мне непонятно именно как в эту концепцию вписываются очереди. Ну то есть, RQ: from my_module import count_words_at_url result = q.enqueue( count_words_at_url, 'http://nvie.com') Он на уровне системы создаст тред/поток и сожрёт много CPU и это уже multiprocessing? Или наоборот, не будет жрать, а решение как-то завязано на асинхронное выполнение?

https://www.wikihow.com/Get-Access-Tokens-on-Facebook

Спасибо, но по факту фигня получается. В статье его там регают как Marketing API, сейчас я такого не нахожу. И вообще я чет не могу вкурить. Мне для того чтоб с питона в группе печатать посты реально надо создавать на фейсбуке приложение?

это понятно, мне непонятно именно как в эту концепцию вписываются очереди. Ну то есть, RQ: from my_module import count_words_at_url result = q.enqueue( count_words_at_url, 'http://nvie.com') Он на уровне системы создаст тред/поток и сожрёт много CPU и это уже multiprocessing? Или наоборот, не будет жрать, а решение как-то завязано на асинхронное выполнение?

ничего никуда не создаст. enqueue только положит сообщение в очередь. все.

Спасибо, но по факту фигня получается. В статье его там регают как Marketing API, сейчас я такого не нахожу. И вообще я чет не могу вкурить. Мне для того чтоб с питона в группе печатать посты реально надо создавать на фейсбуке приложение?

чтобы что-то делать с фейсбуком, нужно иметь доступ к апи

задача воркера \ консьюмера сообщение из очереди забрать и обработать

как и с любым другим сервисом

чтобы что-то делать с фейсбуком, нужно иметь доступ к апи

А чтоб иметь доступ к апи, надо брать сайт и заводить на сайт какие-то костыли

ну или можно еще попробовать как обычный пользователь входить через webdriver, но если капча всплывет, появятся проблемы

задача воркера \ консьюмера сообщение из очереди забрать и обработать

ок, то есть, зависит от того, как celery worker или redis worker это задание выполнит. Спасибо. И возвращаясь к первому вопросу - как это выполняется по умолчанию? Ну то есть, я настрою RQ или Celery, запущу стандартный воркер, как он эту задачу выполнит? Отдельным тредом, процессом, или каким-нибудь асинхроном? :)

это понятно, мне непонятно именно как в эту концепцию вписываются очереди. Ну то есть, RQ: from my_module import count_words_at_url result = q.enqueue( count_words_at_url, 'http://nvie.com') Он на уровне системы создаст тред/поток и сожрёт много CPU и это уже multiprocessing? Или наоборот, не будет жрать, а решение как-то завязано на асинхронное выполнение?

Он положит сообщение. Все

ок, то есть, зависит от того, как celery worker или redis worker это задание выполнит. Спасибо. И возвращаясь к первому вопросу - как это выполняется по умолчанию? Ну то есть, я настрою RQ или Celery, запущу стандартный воркер, как он эту задачу выполнит? Отдельным тредом, процессом, или каким-нибудь асинхроном? :)

смотри документацию к конкретному воркеру.

А чтоб иметь доступ к апи, надо брать сайт и заводить на сайт какие-то костыли

попробуй следовать шагам как тут сказано https://developers.facebook.com/docs/pages/getting-started#developer-account

А вообще, как это класть ссылку на функцию в очередь?

А вообще, как это класть ссылку на функцию в очередь?

скорее всего enquee просто сгенерирует import name этой функции и все

ERROR: S client not available

т.е. тут никаких проблем нет

ну я имею вввиду, воркеры могут быть процессы

а то и на разных тачках

ну я имею вввиду, воркеры могут быть процессы

и?

ну я имею вввиду, воркеры могут быть процессы

ну наверное предполагается что они запускаются из того же окружения

и вообще на разных языках написанные

и вообще на разных языках написанные

ну мы же говорим про celery \ rq

А вообще, как это класть ссылку на функцию в очередь?

# Tell RQ what Redis connection to use redis_conn = Redis() q = Queue(connection=redis_conn) # no args implies the default queue # Delay execution of count_words_at_url('http://nvie.com') job = q.enqueue(count_words_at_url, 'http://nvie.com') print(job.result) # => None # Now, wait a while, until the worker is finished time.sleep(2) print(job.result) # => 889 На фоне, отдельным процессом, запущен rq worker, который это съедает и отдает результат.

по крайней мере не на том, на котором ставится задача

ну мы же говорим про celery \ rq

а в celery нельзя ставитьт задачи не из питона?

нет

упс

это не клиент к очереди, а фреймворк поверх

тогда нафиг celery

Z-NJ ELVFK

я-то думал

ну а зачем? хочешь низкоуровневый клиент - берешь библиотеку для rabbitmq к примеру

тогда нафиг celery

ну можно сделать питоношную оберточку

ну я думал это некое соглашение об передаче отчетов о тасках

и формате

Всем привет! Может ли такой код вылетать с эксепшеном? while True: time.sleep(1) Один из потоков выполняет примерно такой код и собсна вылетает

а что пишет-то?

может

а что пишет-то?

:: устал

может

смотри документацию к конкретному воркеру.

Спасибо еще раз. Celery worker'ы по умолчанию создают процессы, но можно настроить eventlet'ы. То есть, таки CPU-bound по умолчанию.

KeyboardInterruptedException

KeyboardInterruptedException

что это за ислючение такое? Из-за чего она выскакивает?

если процесс SIGINT получает

Больше полудня убил на 17й день

KeyboardInterruptedException

что ж там за адище-то такое