Jonny
6й пункт правил.
Тут да, не правельне оформил, сори.
Bogdan (SirEdvin)
Я понимаю, что немного нарушаю nometa.xyz, но кто-то вообще пользовался aiochan? Я втащил на один маленький проект, выглядит довольно круто, если научится правильно думать, жаль что без type hints, интересно, кто-то еще такой безумный есть?)
Александр
🔥🔥🔥Всем привет, кто умеет настраивать Nginx + Flask? Есть Почти настроенный сервак, надо запустить скрипт. Где то ошибся при настройке, не могу найти. За вознаграждение:)
R
где может быть утечка памяти? на ubuntu за день отжирает 700мб именно этот кусок кода. Уже все перепробовал... https://dpaste.org/THEU
Andrew
А нахуй пересоздавать луп?
Скорее всего он это из синхронного кода запускает как умеет
R
Что такое: config.*** ?
константа обычная, строка
Pavel
константа обычная, строка
Разве звездочки могут быть часть индефикатора?
R
суть в том, что на винде все ок. в linux почему-то утечка.
Pavel
это я замазал)))
Ответь на вопрос про ивентлуп
Pavel
Ух. Кажется, этот код просто пронизан глобальными переменными
Я не заметил ни одного global. С чего ты это взял?
Tishka17
for j in range(len(urls)): Parser(responses[j], j, is_carousel, Database.get_price_for_carousel(urls[j]), urls[j]) ​ ​ Меня вот это смущает. Ты создал парсер и что дальше?
👑OGURCHIK🖤
Парсить
Tishka17
Парсить
Так он создал инстанс и выкинул
R
Database.get_items() что это?
@staticmethod def get_items(): with contextlib.closing(sqlite3.connect("database.db", timeout=10)) as conn: with conn: with contextlib.closing(conn.cursor()) as cursor: cursor.execute("SELECT url FROM items") return [i[0] for i in cursor]
Pavel
Database.get_items() что это?
Это очень странно, но больше ничего нет
👑OGURCHIK🖤
🤔🤔🤔 зачем
👑OGURCHIK🖤
А. У тебя хардкод пути к базе, окей
Кст а лучше на каждый запрос конект или все же лучше пулл
👑OGURCHIK🖤
Часто вижу виз конект
Pavel
Мне, кстати, интересно, зачем вообще могут понадобится несколько ивентлупов
Pavel
Не только в этой программе, а вообще
Tishka17
Гил же
Да. Но теоретически это позволит разделить логику на случай блокировки одного из лупов
Tishka17
Как он может заблокирвоаться, CPU-bound задачей?
Угу. Например, у тебя есть луп для работы с сетью и луп, для всякой другой фигни, частично имеющей cpu bound
Tishka17
А зачем тебе тогда лупы нужны? Не проще просто треды использовать?
Ты можешь более контролируемо переключаться между тасками, это может чуть упростить код или ускорить
Tishka17
Но реально это нафиг все не надо
Pavel
Мне кажется, что со всей этой асинхронщиной питон пошел куда-то не туда
Tishka17
Мне кажется, что со всей этой асинхронщиной питон пошел куда-то не туда
Это просто кооперативная многозадачность, ничего особенного
Tishka17
Просто надо понимать зачем это тебе вообще
Tishka17
где может быть утечка памяти? на ubuntu за день отжирает 700мб именно этот кусок кода. Уже все перепробовал... https://dpaste.org/THEU
В общем, вопросы такие: 1. Что за фигня с созданием парсера и не использованием его потом 2. Зачем много лупов? 3. А может просто много данных и они в памяти раздуваются?
Alex
Мне кажется, что со всей этой асинхронщиной питон пошел куда-то не туда
Тут еще надо понимать что языку и сообществу питоноистов приходится конкурировать с другими технологиями и сообществами. Одно время очень остро стоял вопрос того что язык был не особо эффективен в вопросах parallelism/concurrency. Все тот же гил например. Чтобы добиться существенных улучшений по этой части пришлось бы пережить еще один переход уровня 2to3, а это уже стало бы фатальным.
Pavel
где может быть утечка памяти? на ubuntu за день отжирает 700мб именно этот кусок кода. Уже все перепробовал... https://dpaste.org/THEU
И еще, asyncio.run() не просто так существует, луп еще надо правильно закрыть. Может быть генераторы открытые отстаются и они текут. Текут внутренности asyncio то есть
Alex
А асинхронщина в этом плане стала малой платой.
Иван
Зачем? Он же делает gather
Он только дожидается выполнения. Но объекты то остаются в памяти
Иван
Если создавать таски в цикле то точно утечка
Tishka17
Он только дожидается выполнения. Но объекты то остаются в памяти
Кажется, это верно только если будет исключение
Иван
https://docs.python.org/3/library/asyncio-task.html
Tishka17
Не слышал чтобы завершенные таски надо было кэнселить
Иван
И где там?
Чуть ниже, cancel()
Andrew
Чуть ниже, cancel()
Кажется ты что то путаешь
Иван
Ну ок. Можно и не кенселлить. В данном случае да попутал
Иван
При выходе надо да )))
а
Sublime text интересно..
а
А через какую консоль нужно запускать код?
Pavel
Да, но в плане конкаренси мы получили async
Получили, только это все равно один поток и все
Pavel
Асинк еще плох тем, что он усложнаяет вход в многозадачность
Pavel
Я не работал с C-API, но не похоже, чтобы оно должно было после этого изменится без обратной совместимости
Pavel
И в этом не нужно переписывать библиотеки внутри питона, как стало с асинхронностью
Alex
Мой штатный телепат по прежднему в отпуске. А сам я мысли читать не умею.
Alex
Хотя мой начальник похоже хотел бы чтобы я это умел.
Alex
Откуда это?
Alex
а вот писать в личку мне не надо
su
а вот писать в личку мне не надо
а что, так можнааааа ????
su
ничоси, в личку незнакомому человеку писать
Alex
Потому что это не приветствуется. У меня есть своя жизнь и не хочу чтобы меня дергали все кому не попадя.