какие пермишены поставить, не подскажете?

просто, я с этой ошибкой сюда и пришел

ругается на permission denied

логи

логи

сейчас

uwsgi://unix:/home/spotapov/repos/image-processor/src/wsgi.socket:", host: "localhost:8080" 2018/10/22 16:38:58 [crit] 3342#3342: *3 connect() to unix:/home/spotapov/repos/image-processor/src/wsgi.socket failed (13: Permission denied) while connecting to upstream, client: 127.0.0.1, server: localhost, request: "GET /check HTTP/1.1", upstream: "uwsgi://unix:/home/spotapov/repos/image-processor/src/wsgi.socket:", host: "localhost:8080" @pragus вот они

ну а при запуске uwsgi просто инфо лог, без варнингов

uwsgi://unix:/home/spotapov/repos/image-processor/src/wsgi.socket:", host: "localhost:8080" 2018/10/22 16:38:58 [crit] 3342#3342: *3 connect() to unix:/home/spotapov/repos/image-processor/src/wsgi.socket failed (13: Permission denied) while connecting to upstream, client: 127.0.0.1, server: localhost, request: "GET /check HTTP/1.1", upstream: "uwsgi://unix:/home/spotapov/repos/image-processor/src/wsgi.socket:", host: "localhost:8080" @pragus вот они

stat /home/spotapov/repos/image-processor/src/wsgi.socket

и запускать в хомяке - так себе идея

да, это я так, начал делать тут и уж не стал перекидывать, но если честно я пока не знаю, почему это плохо

в туториалах -так как у меня

Access: (0664/srw-rw-r--) Uid: ( 1000/spotapov) Gid: ( 1000/spotapov) Access: 2018-10-22 16:38:35.550829126 +0300 Modify: 2018-10-22 16:38:35.550829126 +0300 Change: 2018-10-22 16:38:35.550829126 +0300 Birth: -

uwsgi://unix:/home/spotapov/repos/image-processor/src/wsgi.socket:", host: "localhost:8080" 2018/10/22 16:38:58 [crit] 3342#3342: *3 connect() to unix:/home/spotapov/repos/image-processor/src/wsgi.socket failed (13: Permission denied) while connecting to upstream, client: 127.0.0.1, server: localhost, request: "GET /check HTTP/1.1", upstream: "uwsgi://unix:/home/spotapov/repos/image-processor/src/wsgi.socket:", host: "localhost:8080" @pragus вот они

а nginx у тебя под кем?

да, это я так, начал делать тут и уж не стал перекидывать, но если честно я пока не знаю, почему это плохо

запусти пока на tcp, чтобы не страдать с правами

а если у меня вся суть идеи в том, чтобы общаться с nginx wsgi сокетом?

я не ленивый, мне бы просто понять че делать, вот я сегодня с 10 утра занимаюсь поисками

nginx под sudo запускаю

я не ленивый, мне бы просто понять че делать, вот я сегодня с 10 утра занимаюсь поисками

советую прочитать документацию вместо того чтобы "заниматься поисками"

а если у меня вся суть идеи в том, чтобы общаться с nginx wsgi сокетом?

не понял. задача какая?

документацию uwsgi ? - я читал, там нет ничего про права документацию nginx? - я читал , там тоже нет про права

документацию чего?

задача такая: написать приложение, которое будет с внешним миром общаться по хттп через nginx, а с python приложением по wsgi через сокет

документацию uwsgi ? - я читал, там нет ничего про права документацию nginx? - я читал , там тоже нет про права

>там нет ничего про права ну есть же куча обзорной документации по unix file permissions, даже на русском https://ru.wikipedia.org/wiki/Chmod

задача такая: написать приложение, которое будет с внешним миром общаться по хттп через nginx, а с python приложением по wsgi через сокет

https://www.digitalocean.com/community/tutorials/how-to-set-up-uwsgi-and-nginx-to-serve-python-apps-on-ubuntu-14-04

@espdev вот я по нему и шёл, прямо один в один

Ладно, потыкаюсь

Спасибо, кто попытался помочь

Ладно, потыкаюсь

не надо тыкаться. говорю же, запусти uwsgi на tcp и пропиши uwsgi-апстрим тоже на tcp.

Окей, попробую

http://250bpm.com/blog:137

ага

http://250bpm.com/blog:137

Так что там с nanomsg? оно живо?

релизы выходят

релизы выходят

помню его хоронили. изначально он планировался как замена zeromq

всем привет а знает кто, что нужно реализовать у класса, чтоб его экземпляр можно было передавать в json.dumps()? можно, конечно, выйти из положения передавая туда его метод dict, но может есть решения поэлегантнее..

всем привет а знает кто, что нужно реализовать у класса, чтоб его экземпляр можно было передавать в json.dumps()? можно, конечно, выйти из положения передавая туда его метод dict, но может есть решения поэлегантнее..

Наверное, правильное решение — отдавать вместе с твоим классом кастомный сериализатор.

А так, учитывая как работают эти сериализаторы, объект должен откликаться на isinstanceof(dict, ...) и вести себя дальше как dict. Но это прям совсем грязный хак, не Python way.

А так, учитывая как работают эти сериализаторы, объект должен откликаться на isinstanceof(dict, ...) и вести себя дальше как dict. Но это прям совсем грязный хак, не Python way.

ну дааа, это как-то совсем не очень)

ну дааа, это как-то совсем не очень)

А, ещё вот такая штука есть же https://marshmallow.readthedocs.io/en/3.0/

ненене, про эту штуку знаю, она крутая) было интересно именно не используя внешие либы

Наверное, можно ещё посмотреть в сторону мета классов, но я про них мало что знаю, только сказки про магию.

Наверное, можно ещё посмотреть в сторону мета классов, но я про них мало что знаю, только сказки про магию.

в общем, переопределяется метод default у JSONEncoder и этот класс передаётся в параметре cls у фукнкции dumps

Нам нужен докладчик/расказчик на завтра. Я заболел. Кто может про что-нибудь интересное рассказать? https://spbpython.guru/news/2018/10/17/meetup-20181024-epam

Пустая Django management команда запускается 10 секунд Быстрый взгляд на резульататы профайлинга показывают что половину времени отъедает django_filters. Может кто-то сталвкивался?

Смотри own time

Смотри own time

спасибо там ничего интересного

Нам нужен докладчик/расказчик на завтра. Я заболел. Кто может про что-нибудь интересное рассказать? https://spbpython.guru/news/2018/10/17/meetup-20181024-epam

Я могу про виды тестирования рассказать. Недавно столкнулся, что у нескольких людей путаница с этим в голове. Да и с первым докладом вроде пересекается.

Это будет очень полезно кстати

Я тут пытаюсь картинку по http выкачивать приходит вот такой способ import http from http import client import PIL from PIL import Image import io h1 =http.client.HTTPConnection('host') h1.request("GET","image.jpg") conn = h1.getresponse().read() im = Image.open(io.BytesIO(conn)) im.show() print (conn.status, conn.reason) ———————————————— этот код работает. что здесь вызывает большие вопросы - это место, где я декодирую поток байт в картинку кто-нибудь может предложить более адекватное решение? -упор на скорость декодирования ps - вполне возможно, что я вообще что-то делаю не так, потому что чего-то не знаю

Я тут пытаюсь картинку по http выкачивать приходит вот такой способ import http from http import client import PIL from PIL import Image import io h1 =http.client.HTTPConnection('host') h1.request("GET","image.jpg") conn = h1.getresponse().read() im = Image.open(io.BytesIO(conn)) im.show() print (conn.status, conn.reason) ———————————————— этот код работает. что здесь вызывает большие вопросы - это место, где я декодирую поток байт в картинку кто-нибудь может предложить более адекватное решение? -упор на скорость декодирования ps - вполне возможно, что я вообще что-то делаю не так, потому что чего-то не знаю

https://stackoverflow.com/questions/13137817/how-to-download-image-using-requests

Я тут пытаюсь картинку по http выкачивать приходит вот такой способ import http from http import client import PIL from PIL import Image import io h1 =http.client.HTTPConnection('host') h1.request("GET","image.jpg") conn = h1.getresponse().read() im = Image.open(io.BytesIO(conn)) im.show() print (conn.status, conn.reason) ———————————————— этот код работает. что здесь вызывает большие вопросы - это место, где я декодирую поток байт в картинку кто-нибудь может предложить более адекватное решение? -упор на скорость декодирования ps - вполне возможно, что я вообще что-то делаю не так, потому что чего-то не знаю

Не надо читать весь респонс в память. В дальнейшем будет больно

@pragus а куда его лучше7

@pragus а куда его лучше7

На диск.

@espdev а как насчет The reason Requests is slower is because it does substantially more than httplib. httplib can be thought of as the bottom layer of the stack: it does the low-level wrangling of sockets. Requests is two layers further up, and adds things like cookies, connection pooling, additional settings, and kinds of other fun things. This is necessarily going to slow things down. We simply have to compute a lot more than httplib does.

@espdev Based on profiling both, the main difference appears to be that the requests version is doing a DNS lookup for every request, while the http.client version is doing so once.

?‍♂

м?

@pragus а куда его лучше7

Посмотри ответ на so

Картинка выкачивается прямо в файл и не надо никаких pillow

понял

спасибо!

@espdev Based on profiling both, the main difference appears to be that the requests version is doing a DNS lookup for every request, while the http.client version is doing so once.

requests это модуль для питона с удобным api. For humans tm ?

Я дятел, это да неужели скачивать картинку на диск и обрабатывать ее в Pillow очевидно быстрее, чем НЕ скачивать ее на диск?

@espdev

Я дятел, это да неужели скачивать картинку на диск и обрабатывать ее в Pillow очевидно быстрее, чем НЕ скачивать ее на диск?

а тебе не надо скачивать на диск? что вообще ты хочешь делать с картинкой?

Я дятел, это да неужели скачивать картинку на диск и обрабатывать ее в Pillow очевидно быстрее, чем НЕ скачивать ее на диск?

Плюсую вопрос, тож интересно

Я могу про виды тестирования рассказать. Недавно столкнулся, что у нескольких людей путаница с этим в голове. Да и с первым докладом вроде пересекается.

го в личку )

расскажу про свой ресерч сегодня на встрече, если это интересно кому-то

а тебе не надо скачивать на диск? что вообще ты хочешь делать с картинкой?

Плюсую вопрос, тож интересно

пока что это подходит в категорию забавный фейл)

Я дятел, это да неужели скачивать картинку на диск и обрабатывать ее в Pillow очевидно быстрее, чем НЕ скачивать ее на диск?

Сколько весит картинка?

минимум 5 мб

минимум 5 мб

А максимум?

до 12ти

до 12ти

оукей. в любом случае, читать респонс целиком в память - плохая практика(если ты только не имеешь гарантий что там совсем мало данных)

оукей. в любом случае, читать респонс целиком в память - плохая практика(если ты только не имеешь гарантий что там совсем мало данных)

можно же читать чанками

с лимитом по памяти

можно же читать чанками

да, тоже вариант. но вот читать целиком - самоубийство. на той стороне вам могут и dvd iso отдать

@delimitry а можно какую-нибудь ссылку на то, как это делается7

если это тот ответ на SO, что я думаю, то там есть

сейчас гляну

вот тут последний вариант https://stackoverflow.com/a/13137873

stream=True и .iter_content(...)

@delimitry а можно какую-нибудь ссылку на то, как это делается7

там в ответе на SO есть

stream=True и .iter_content(...)

угу. а то requests все равно внутри буферизует )

@stvlpotapov можешь попробовать читать/писать картинки библиотекой imageio http://imageio.github.io/ там прямо с http можно Но у неё pillow как бэкенд, поэтмоу скорость декодирования/кодирования будет та же самая. Хотя я сомневаюсь, что хоть что-то в этом смысле работает быстрее чем pillow

есть вопросец идеологического плана

есть такой модуль ipcqueue

https://github.com/seifert/ipcqueue/blob/master/ipcqueue/posixmq.py#L132

там гвоздями прибит pickle

а хочется кастомных сериализаторов ))

глядя на код хочется сделать что-то вроде class PickleSerializer: @staticmethod def dumps(obj): return pickle.dumps(obj, protocol=1) @staticmethod def loads(data): return pickle.loads(data)

или лучше сделать хурму с инстанцированием? ))

там гвоздями прибит pickle

Что им мешало передавать сериализатор в виде параметра в конструктор этой очереди, например? А так получается, что на той стороне тоже должен быть pickle-десериализатор. Может там вообще не python-реализация этой штуки