Alex
Этот вариант с GIL решает вопрос заодно... Но есть ли смысл, если не он узкое место
эм... в варианте нескольких event loop в одном процессе это станет узким местом.
Alex
Ну да. Нет смысла получается, в трэдах...
для начала стоило бы узкое место локализовать
/home/aleksandr/
почему так?(
.
Спасибо за инфу. Будем думать
Alex
Спасибо за инфу. Будем думать
потому как вполне может оказаться что вы банально дергаете где-то блокирующий вызов тем самым блокируя весь ивент луп.
Дядька Бартоломей
Нравится. А в чём прикол еду? Она что-то объясняет?
Там вроде всякие примеры встроены
.
Такое тоже может быть. Но у меня все вызовы неблокирующие. Они однотипные, по шаблону спавнятся.
.
Asks реквесты и websockets к внешним api
/home/aleksandr/
Подскажите пожалуйста, в чем может быть проблема?
Tishka17
а там точно utf-8?
.
Да тут с кодировкой проблема. Дальше гуглить, так сходу вряд-ли тыкнет кто, где именно ее починить.
Alex
ну почему же. вангую ровно два места: кодировка файла. кодировка консоли.
Никита
Всем привет, вопрос: Нужно подключить прокси сервис в bas таким образом, чтобы при загрузке браузера я мог выбрать нужную страну, и загружались прокси именно этой страны, подскажите как сделать? Сталкивался кто нибудь? Подмена устройства, например я в боте выбираю страну жму начать, она подключается к прокси, и в открытом браузере выдаёт уже например андроид телефон с подключённым к той стране. Там много поток, т.е открывается 3-5 стран на 10 минут, и на каждом свой юзер агент, от поставщика апи
/home/aleksandr/
Не знаю, в файле не указано в метаданных, но когда я туда вставил кодировку, сломалась все почему-то
std::slavik
поэтому я всем рекомундую научиться делать чертовы бенчмарки
/home/aleksandr/
Но когда открываешь файл, то да utf-8
std::slavik
а не заниматься бесполезным надрачиванием непонятно чего
/home/aleksandr/
Но просупить не могу
std::slavik
лучше сделайте бенчмарк и оцените сложность алгоритма и оптимизируйте то что быстрее всего даст наибольший эффект
/home/aleksandr/
А в Firefox кодировка сбита
/home/aleksandr/
Тоже хрень показывает
/home/aleksandr/
Только Гугл нормально показывает
Philipp
Ребят, кто с marshmallow_mongoengine работал, почему может не работать my_schema.update(my_obj, {"azaza":"ololo"})?
twisted.sonnet
для добавления датаклассов в сет нужно описать только __hash__? или __eq__ тоже необходим?
twisted.sonnet
в общем случае не нужно ни то ни другое. frozen=True
у меня там одно мутабельное поле
Alex
у меня там одно мутабельное поле
оно участвует в подсчете хеша?
twisted.sonnet
оно участвует в подсчете хеша?
нет.. но тогда выходит что __hash__ нужен по-любому
Alex
нет.. но тогда выходит что __hash__ нужен по-любому
тоже не обязательно но как вариант
twisted.sonnet
тоже не обязательно но как вариант
frozen=True позволит мне потом изменять значение поля?
Alex
frozen=True позволит мне потом изменять значение поля?
нет, емнип в датаклассе нельзя сделать все поля иммутабельными и лишь некоторые мутабельными, которые не участвуют в хеше. но я не уверен.
Alex
в общем-то да тебе нужно реализовать оба __hash__ и __eq__ в таком случае.
Alex
либо же unsafe_hash=True и в том поле, которое не участвует в хеше compare=False
Dima
Всем привет! Вопрос: локальный сервер(aiohttp) получает от другого локального сервера файл, который надо записать в нужную директорию. Как это можно сделать(тут про запись файла на диск), если все работает асинхронно ?
twisted.sonnet
вынести запись в отдельный поток \ thread pool executor
я видел либу aiofile, она так и реализована скорее всего, не смотрел, но зато протестирована
Alex
aiofiles действительно реализована поверх тред пула
Alex
aiofile пытается использовать aio там где это возможно. со всеми вытекающими проблемами.
twisted.sonnet
да, ты прав
Dima
вынести запись в отдельный поток \ thread pool executor
Ты имеешь ввиду run_in_executor ? или прям из модуля concurrent.futures ThradPoolExecutor ?
std::slavik
или без блокировок
Dima
оба варианта рабочие.
Понял, спасибо, буду ковырять 👍
std::slavik
а в чем собственно проблема?
Alex
или без блокировок
ну блокировки нужны если будет конкуррентная запись в один и тот же файл
std::slavik
ну асинхронно и асинхронно
Alex
а в чем собственно проблема?
проблема в том что асинхронной записи на диск в общем случае не существует
Dima
Да
Dima
В моем случае можно без блокировок
Alex
поясните
файловые операции с regular файлами по-определению блокирующие.
Alex
да
ну вот.
std::slavik
а - понял, вопрос тогда немного другой - как записать файл сохранив асинхронную обработку
std::slavik
ну создать поток
Alex
либо же aio со всеми вытекающими проблемами.
std::slavik
либо создать заранее потоки и через менеджер в них пихать
Alex
+- в зависимости от того хочешь ли ты использовать тот же пул, с теми же параметрами, хочешь переопределить стандартный для asyncio либо же использовать свой.
std::slavik
на самом деле - по моему опыту работы с asyncio + потоки возникает куча нюансов
Dima
А какие ?
Dima
Я пока новичек с асинхронщиной, интересно)
Alex
на самом деле - по моему опыту работы с asyncio + потоки возникает куча нюансов
ну ты не поверишь но половина aio* библиотек — просто врапперы над блокирующими вызовами в треде \ тредпуле.
Alex
сказав половина — я несомненно несколько преувеличил, но дофига их
std::slavik
А какие ?
честно говоря - сейчас рубит уже, могу глупостей наговорить, а уточнять сил уже нет - если вкратце - у меня есть сервис-загрузчик с Telegram API работающий, который многопоточно загружает файлы, ускоряя загрузку до 240мбит/с примерно. Попытавшись сделать это через asyncio и thread pool - не получалось добиться результатов таких же, вроде бы там квант времени неравномерно распределяется
std::slavik
и получается что потоки конечно есть, но производительность в итоге проседает в разы
std::slavik
ну и мне просто лень тогда стало с этим возиться, учитывая что на потоках чисто все прекрасно по сей день работает так что скажу что есть нюансы
Dima
Хм, понятно)
Ilyas
Можно ли в миграциях алембика каким-либо образом заполнять поля таблиц (не server_default или какой-то константой, а, например, записывать хэш другого значения таблицы)?