Tishka17
чтобы он его не переподнимал
Sergey
Насчет API методов, ну если хочешь от DDOS защитить, то стоит, ибо IP-шники наружу не палишь
Sergey
Если на них начнут флудить, ты умрешь, а CF нет
alexcher
Ну и пусть забирают, тебе то он зачем, если можешь без него потоки запускать
Повесить как-то релиз гила сразу при его получении?
twisted.sonnet
https://www.cloudflare.com/products/cloudflare-workers/
не могу понять как мне это поможет... сервис не мой - забыл про это уточнить Мне надо обгонять конкурентов, которые делают покупки на площадке
Sergey
Повесить как-то релиз гила сразу при его получении?
тебе не нужен гил, если ты не изменяешь питоновские объекты
alexcher
тебе не нужен гил, если ты не изменяешь питоновские объекты
Да, Но как сказать питону о том, чтобы гил не мешался
Sergey
https://docs.python.org/3/c-api/init.html#c.Py_BEGIN_ALLOW_THREADS
Sergey
не могу понять как мне это поможет... сервис не мой - забыл про это уточнить Мне надо обгонять конкурентов, которые делают покупки на площадке
ну если твой код запускается на стороне endpointа CDN, то не тратится время на передачу данных от proxy к бекенду
Sergey
Ты спросил, как максимально ускорить - вот один из способов. Наверно, если у тебя много всего уже понаписано, то не выйдет так просто
Sergey
HTTP2 кстати можно включить
Sergey
между прокси и бекендом
Sergey
Ну и поближе, да
Sergey
а что с ним не так?
twisted.sonnet
ну если твой код запускается на стороне endpointа CDN, то не тратится время на передачу данных от proxy к бекенду
я просто не совсем понимаю что этот сервис делает... там можно свой код разместить и таким образом сократить дистанцию запроса или как? сегодня у площадки claudflare с канзасовским ip, месяц назад сан-франциско... разве этот сервис будет постоянно премещать мой код по разным серверам?
twisted.sonnet
я надеюсь ты asyncio выкинул уже?
из-за чего у тебя возник такой вопрос?)
Tishka17
а что с ним не так?
он может повысить задержку при выполнении конкретных запросов за счет того, что все выполняются в одном потоке
Sergey
Там даже вроде есть сторейдж свой и eventual consistency
twisted.sonnet
@Tishka17 конкретно в этом коде я не использую asyncio, там просто слушается вебсокет и при необходимости делается запрос... мой сервер -> cloudflare -> площадка
Sergey
ну питон вообще со своим gc может давать неожиданные результаты)
Sergey
окей, я просто отел уточнить что asyncio vs threads могут давать неожиданные результаты
Расскажи пожалуйста подробнее, что ты имеешь ввиду под неожиданными результатами?
twisted.sonnet
окей, я просто отел уточнить что asyncio vs threads могут давать неожиданные результаты
из логов вижу, что есть такие же умники как я, у которых запросы выполняются быстрее, вот я и думаю как мне ускориться
Sergey
просто ради интереса, быстрее это сколько?
Sergey
сколько у тебя и сколько у них?
twisted.sonnet
requests.Session юзаешь?
нет, просто requests.get там апи по токену и 2fa коду
Tishka17
Расскажи пожалуйста подробнее, что ты имеешь ввиду под неожиданными результатами?
я говорю, что asyncio позволяет меньшими ресурсами обеспечивать большее число соединений за счет более редких переключений. Это может привести к увеличению задержек
Tishka17
нет, просто requests.get там апи по токену и 2fa коду
ну блин. Юзай сессии, они соединение до сервера сохраняют между запросами
Tishka17
у тебя на каждый запрос новое TCP соединение
Tishka17
не удивлюсь, если ещё dns резолвится
Tishka17
и TLS устанавливается не мгновенно
Sergey
я говорю, что asyncio позволяет меньшими ресурсами обеспечивать большее число соединений за счет более редких переключений. Это может привести к увеличению задержек
Дело не в редких переключениях, а в том, что у event loop внутри пользовательского кода нет столько накладных расходов на синхронизацию между user space и kernel space.
Sergey
@Tishka17 конкретно в этом коде я не использую asyncio, там просто слушается вебсокет и при необходимости делается запрос... мой сервер -> cloudflare -> площадка
так о каких цифрах идет речь? а то вдруг у тебя там 500ms, и тебе все эти сетевые оптимизации как мертвому припарка
Georgy
Чат кто знаком с zeep ? Разбираю чужой код. и у меня в одном месте создается client из zeep.Client. Далее вызывается такая штука r = self.client.service.Send(self.mnemonic, msg.build()) но в zeep.Client нет функции service.Send и вроде как нигде она такая не определена в проекте. мне надо получить сырой запрос. а я не могу посмотреть эту функцию service.Send. https://python-zeep.readthedocs.io/en/master/client.html#creating-new-serviceproxy-objects The ServiceProxy object client = Client('http://my-endpoint.com/production.svc?wsdl') # service is a ServiceProxy object. It will check if there # is an operation with the name `X` defined in the binding # and if that is the case it will return an OperationProxy client.service.X() вот дока на эту тему. как узнать что делает операция X и как ее поменять?
Sergey
это какая нибудь магия с __call__ наверно
Sergey
смотри в эту сторону
twisted.sonnet
так о каких цифрах идет речь? а то вдруг у тебя там 500ms, и тебе все эти сетевые оптимизации как мертвому припарка
у всех методов их апи разное время ответа, я сейчас засеку пару раз тот, что мне нужен, пару мин
Sergey
Ну чтобы что-то оптимизировать, надо сначала это померить
Sergey
суть в том, что гил принудительно переключает контекст даже если какая-то числодробилка работает
Sergey
по тикам, а asyncio этого не делает и тупо блокируется, пока не начнется любая асинхронная операция
Sergey
поэтому не надо писать тяжелый блокирующий код прям внутри работающего event loop
alexcher
https://docs.python.org/3/c-api/init.html#c.Py_BEGIN_ALLOW_THREADS
Немного не понял, че оно дает?)
Sergey
Немного не понял, че оно дает?)
Можешь запускать свой поток параллельно с гилом и делать в нем что то очень нехорошее
twisted.sonnet
просто ради интереса, быстрее это сколько?
Ну вообщем так... Запрос покупки, который мне нужно ускорить отрабатывает в среднем от 2.1 до 4.5 сек(в основном за 2.5). Так же я засёк запрос к этой же площадке, но с другим методом апи, который просто возвращает баланс кошелька - он отрабатывает от 0.7 до 1.1сек Итого: у них чё-то там происходит на бэке при запросе на покупку - мне на это похер, а вот то время, за которое делается мой коннект(выходит, что это в среднем 1сек) надо ускорять т.к меня кто-то обгоняет =)
alexcher
Можешь запускать свой поток параллельно с гилом и делать в нем что то очень нехорошее
Хмммм, сяп. Я пока до сишного апи так и не добрался, Но, думаю, пора
Sergey
Коннект одну секунду? Wat?
Sergey
А на что конкретно время тратится?
Sergey
Повтыкай туда логи со временем
Georgy
Там можно debug включить, все запросы в консоли будут выводиться
А мне не надо запрос сдать. Мне надо просто получить raw файл.
Александр
self.mnemonic(msg.build())
Georgy
Просто строку xml. А потом её направить в другое место. (положить в бд) Как это сделать?
twisted.sonnet
А на что конкретно время тратится?
та откуда мне знать чё они там считают... я тебе привёл пример с замером лёгкого запроса и тяжёлого к одному и тому же сервису... мне надо понять - стоит ли покупать сервак для того, чтобы ускорить время тяжёлого запроса, хер знает как ещё объяснить
Sergey
Оке, тогда что ты подразумеваешь под тратится на коннект?
twisted.sonnet
Оке, тогда что ты подразумеваешь под тратится на коннект?
requests.get() kansas -> kansas быстрее, чем jopa mira -> kansas
Chern
Всем привет, подскажите плиз, как пересохранить зип файл в другой директории? Например zip_file лежит в директории С:/TEST/ZipFile.zip А есть желание его сохранить в директорию C:/TEST/TEST/ Заранее благоадарен!
Georgy
self.mnemonic(msg.build())
Ээээ. По моему это так не работает...
Александр
Ээээ. По моему это так не работает...
self.mnemonic - тип объекта, msg.build() данные для его сериализации
twisted.sonnet
так ещё раз: ты с сессией пробовал?
нет ещё, но я засейвил тот совет, попробую... мой основной вопрос заключался просто в другом: есть ли приемущество у софта_1 перед софтом_2 если claudflare площадки, на которую делается запрос находится в канзасе, софт_1 работает на vds в канзасе, а софт_2 работает на vds в заднице сатаны
Chern
правкой кнопкой мышки: вырезать, потом вставить
А реально как можно такой сделать?
Georgy
Tishka17
А реально как можно такой сделать?
я все ещё не понял задачу. Перемести один файл в другое место можно тысячей способов. И пряд ли ты пишишье клон консольной команды mv
Georgy
Да нет же. Self mnemonic это просто строка.
Это мнемонистика предприятия.
alexcher
Хочу шарить память нампи массивов, а память менеджить самому, чтобы не инвалидировать указатель раньше времени
Если что юз кейс: у меня есть поток с контекстом opengl, а загрузка моделей из файлов занимает некоторое время, потому хочу вынести загрузку на другое ядро, однако там я только могу подготовить данные, а вот залить на видеокарту можно только в потоке с опенглом
Tishka17
С питоном месяц как знаком, еще не могу понять принцип работы (
я говорю: можешь ли ты задачу целиком сформмулировать
alexcher
Копировать массив не хочу, достаточно передать указатель и размер в нужный поток
Chern
я говорю: можешь ли ты задачу целиком сформмулировать
Как переместить zip файл с директории №1 в директорию№2