twisted.sonnet
mongodb AsyncIOMotorClient python3.7.7 закомментированный вариант работает нормально. asyncio.run() - валит RuntimeError https://stackoverflow.com/questions/55425797/asyncio-run-fails-when-loop-run-until-complete-works нашёл вот такое решение, там предлагают инициализировать бд во время работы цикла событий... но я хз, стоит ли так делать? похоже на велосипед...
twisted.sonnet
Создавай клиент монги в корутине. Ибо run новый луп создаёт
Тоесть вариант из коммента на sf норм? Ещё дело том, что у меня основная программа синхронная, цикл запускается периодически
Alex
кстати интересный факт. from x import y работает медленнее, чем import x. timeit так сказал. Вопрос: нахуя нам from?
и что? зато обращение к аттрибуту модуля x.y при import x работает чуть медленней чем при from .. import. только ты забыл что импорты в общем случае выполняются один раз при загрузке модулей, редко когда динамически и практически никогда по миллиону раз в секунду. с вероятностью стремящейся к 1, скорость импортов в твоем проектке НИКОГДА не будет узким местом.
twisted.sonnet
Создавай клиент монги в корутине. Ибо run новый луп создаёт
тоесть каждая корутина будет по новой создавать коннект? это нормально вообще?
su
тоесть каждая корутина будет по новой создавать коннект? это нормально вообще?
ну если она не будет держать коннект открытым продолжительное время, потому что не будет повторного использования, как мне кажется, это же разные процессы, ил я ошибаюсь, в пределах потоков одного процесса возможно использовать одно соединение, насчет процессов я не знаю, может кто уточнить?
su
где разные процессы?
корутины в отдельную нить выделяются или поток но не процесс верно?
Alex
корутины в отдельную нить выделяются или поток но не процесс верно?
эм... нет, все корутины в пределах одного event loop работают в том же потоке ОС что и сам event loop.
Alex
иными словами ни какой отдельный поток (thread) или процесс не выделяется для их выполнения.
su
иными словами ни какой отдельный поток (thread) или процесс не выделяется для их выполнения.
то есть никакой отдело коннекшн создаваться н буде и он будет переиспользовать существущий в идеале
twisted.sonnet
эм... нет, все корутины в пределах одного event loop работают в том же потоке ОС что и сам event loop.
просто у меня сейчас получается, что в рамках одного цикла событий каждая корутина инициализирует AsyncIOMotorClient идивидуально для себя.. и я хз нормально ли это или нет
twisted.sonnet
ну это уже от библиотеки зависит. я хз как motor работает.
когда я возился с aiosqlite там создавать отдельный отдельный коннект для каждой корутины считалось нормальной практикой и в доках было написано об этом
Alex
о сколько нам открытий чудных. motor работает тоже через тредпул.
Pavel
кстати интересный факт. from x import y работает медленнее, чем import x. timeit так сказал. Вопрос: нахуя нам from?
1. Какая разница сколько времени будет импотироваться объект? Ты бьешься за миллисекунды. 2. Получать объект через атрибут модуля дольше, чем просто обращаться по имени. Так что ситуация противоположная
Alex
mongodb AsyncIOMotorClient python3.7.7 закомментированный вариант работает нормально. asyncio.run() - валит RuntimeError https://stackoverflow.com/questions/55425797/asyncio-run-fails-when-loop-run-until-complete-works нашёл вот такое решение, там предлагают инициализировать бд во время работы цикла событий... но я хз, стоит ли так делать? похоже на велосипед...
да, совет со stackoverflow правильный, потому как у тебя судя по всему конфликт происходит из-за того что motor вызывает get_event_loop в кишках, что создает новый event loop, не тот в котором ты выполняешь корутины когда запускаешь asyncio.run().
Alex
клиент полагаю достаточно создать один, потому как клиент != подключение и вероятнтно клиент управляет подключениями самостоятельно
Alex
Что за мотор?
клиентская библиотека для монги
Alex
не.. клиент тоже надо создавать по новой, пробовал)
обсуждать конкретные шаги можно только в том случае если есть конкретный код и лог ошибки
Tishka17
клиентская библиотека для монги
А. Что-то видел. Бессмысленый и беспощадный асинк в питоне
Alex
А. Что-то видел. Бессмысленый и беспощадный асинк в питоне
как обычно. тебя это удивляет? они вон aiosqlite тащат.
twisted.sonnet
Я хочу вызывать _is_enabled_async из is_enabled в случае если async_connect=True. В этот момент будет запущен цикл событий. Мозгов не хватает понять как это сделать. Стоит ли вообще это делать или лучше оставить два отдельных метода?
Tishka17
о сколько нам открытий чудных. motor работает тоже через тредпул.
Чёт не могу найти инфу. Увидел где-то что в отличие от торнадо нужен aiohttp, но в итоге хз
Alex
да, спасибо
Tishka17
В смысле, у меня декоратор, который в зависимости от режима оборачивает код в корутину
twisted.sonnet
то есть никакой отдело коннекшн создаваться н буде и он будет переиспользовать существущий в идеале
короче если создавать коннект в каждой корутине, которая работает с бд, то скорость выполнения как у синхронного кода... откажусь от asyncio.run.. слишком много гемороя из за этой красивой строчки
twisted.sonnet
Не надо в каждой. Надо по одному коннекту на конкурентную корутину
сейчас я создал один коннект и пользуюсь loop = asyncio.get_event_loop()
Tishka17
у меня их много, это парсер
Зачем тебе асинкио для парсеров?
Tishka17
Ой, не хочу вникать, забей
âDêšwu öBipci
ШОБ БЫСТРЕЕ ПАРСИЛО
Nikolay
🌚
twisted.sonnet
5.5к страниц
Проксимов
ШОБ БЫСТРЕЕ ПАРСИЛО
Ну по факту будет быстрее
Tishka17
5.5к страниц
Владелец сайта в курсе?
Tishka17
неа
По тонкому льду ходишь
twisted.sonnet
По тонкому льду ходишь
не, это сайт для торговли и ботоводов там хватает)
Nikolay
Парсите сайт гидры?
twisted.sonnet
Парсите сайт гидры?
нет, в моём случае торговля это просто торговля, а не перестрелки/погони/наркотики
MLKot
Ребята, в питоне можно параметры передаваемые в конструктор автоматически назначить переменным класса через self. Просто по 100 раз переприсваивать как-то не круто, может что придумали для этого?
👑OGURCHIK🖤
Меджик🤔
Alex
но ты можешь написать например датакласс
MLKot
dataclass
Пасиб, почитаю щас че за зверь
Alex
Ребята, в питоне можно параметры передаваемые в конструктор автоматически назначить переменным класса через self. Просто по 100 раз переприсваивать как-то не круто, может что придумали для этого?
с другой стороны если у тебя вагон параметров которые возникаает необходимость присваивать, следует задуматься об SRP и соблюдает ли твой класс этот принцип.
Alex
dataclass
вангую очередную волшебную пилюлю и посвеместное пихание датаклассов по поводу и без
Alex
заставь дурака богу молиться — он и лоб расшибет
MLKot
@pvlzhr вот видишь
По моему огонь эта штука.
Tishka17
Я бы пихнул бы его везде если оно норм. Щас посмотрим
Не надо. Это для хранения данных. Пихать бизнес логику в датаклассы - такая себе идея
Alex
намек он не понял
MLKot
намек он не понял
Понял я все.
Tishka17
Пытаюсь говорить понятным языком
MLKot
Не надо. Это для хранения данных. Пихать бизнес логику в датаклассы - такая себе идея
Ну что делать если бизнес класс имеет данных больше чем дата-класс.
Tishka17
Ну что делать если бизнес класс имеет данных больше чем дата-класс.
Возможно, стоит его разделить на датакласс и класс именно логики
Tishka17
Или даже на несколько классов
MLKot
Или даже на несколько классов
Может так и сделаю. Задача уйти от повторения кода
Nikolay
можно посмотреть в сторону setattr(self, 'variable name', value))
я такой дичи насмотрелся. только было getattr
MLKot
Или даже на несколько классов
Сделаю класс с параметрами как структура и он будет передаваться в конструктор бизнес класса