У меня в одну группу человек по 10-20 в день приходят. На всех триггерить сообщение? Это похуже спама будет

делать приглашения в чат по инвайтам и раздавать их на митапе

в рудепитон говорят combot умеет хотя бы джойн-сообщения убивать

то есть хотя бы пячить не будет, а админы удалять по возможности из мемберов

в рудепитон говорят combot умеет хотя бы джойн-сообщения убивать

О, правда? Надо попробовать, не видел этой фичи

можно комбот, можно взять antispam из pip: это баес. встроенный классификатор этого китайца на 0.9981127483246774 признает спамом

Только никнеймом одинаковым, эти боты не пишут ничего пока Они дня три уже в этой группе сидят тихо

в рудепитон говорят combot умеет хотя бы джойн-сообщения убивать

Все умные такие. Combot уже настроен. Лишнее режет. Капча не зашла. Пока всё норм.

всем привет, что происходит, если не вызывать join при использовании потоков? хочется сделать определённую логику, которая не блокировала бы основной поток программы

всем привет, что происходит, если не вызывать join при использовании потоков? хочется сделать определённую логику, которая не блокировала бы основной поток программы

В общем, ничего страшного. Ты не обязан вызывать джойн, если не собираешься останавливать поток.

В общем, ничего страшного. Ты не обязан вызывать джойн, если не собираешься останавливать поток.

меня больше волнует освобождение памяти, которую использует этот поток, поток остановится, когда target-функция выполнится?

всем привет, что происходит, если не вызывать join при использовании потоков? хочется сделать определённую логику, которая не блокировала бы основной поток программы

Наверное ты уже думал об этом, но возможно тебе больше подходит встроенный Multiprocessing

Или celery/RQ

Не знаю контекста, но это всегда имеет смысл обдумать

меня больше волнует освобождение памяти, которую использует этот поток, поток остановится, когда target-функция выполнится?

Нет, память не освободится.

меня больше волнует освобождение памяти, которую использует этот поток, поток остановится, когда target-функция выполнится?

поток то остановится, но чтобы точно память вернуть используй multiprocessing

спасибо!

поток то остановится, но чтобы точно память вернуть используй multiprocessing

multiprocessing, чтобы вернуть память? о_О Не улавливаю логику.

multiprocessing, чтобы вернуть память? о_О Не улавливаю логику.

ну типа завершится процесс - память освободится - не так?

ну типа завершится процесс - память освободится - не так?

Насколько я помню, пока родитель не подтвердит смерть потомка (всё тот же join), ОС не убирает его из памяти.

Или celery/RQ

не хочется их тянуть в проект) а так да, это выход конечно)

ну типа завершится процесс - память освободится - не так?

ага

@irtimir а на is_alive ты смотрел? Можно проверить, работает ли ещё поток, и, если уже нет, то стопать.

ага

Я просто помню ситуацию, когда у меня десяток потомков висел в zombie состоянии, пока одиннадцатый дорабатывал (я их все скопом гасил). Но не помню, сколько они памяти занимали, плюс код уже похоронен, не могу воспроизвести.

@irtimir а на is_alive ты смотрел? Можно проверить, работает ли ещё поток, и, если уже нет, то стопать.

Плюс можно завести поток-супервизор, который можно спокойно заблочить до окончания работы воркеров.

Я просто помню ситуацию, когда у меня десяток потомков висел в zombie состоянии, пока одиннадцатый дорабатывал (я их все скопом гасил). Но не помню, сколько они памяти занимали, плюс код уже похоронен, не могу воспроизвести.

у тебя не было join-а?)

у тебя не было join-а?)

Там было что-то вроде for process in pool: process.join() Соответственно, если в начале списка оказывался долгоиграющий, до остальных джоин доходил долго.

ааа понятно

Там было что-то вроде for process in pool: process.join() Соответственно, если в начале списка оказывался долгоиграющий, до остальных джоин доходил долго.

Почему не: pool.close() pool.join() У меня на 11 потоках работает довольно шустро

в общем, пока выполняется метод run в Thread, то метод is_alive возравщает True, когда run завершается, даже без join is_alive начинает возвращать False

значит ли это что поток больше не жрёт память?

хоть он и завершился, но память не факт, что уже почистилась, т.к. GC мог и не вызваться. Ты можешь вызвать gc.collect() сам, но та память которая была выделена, будет доступна для переиспользования, и вернуть память в систему не завершив процесс не получится. плиз поправьте меня если я ошибаюсь.

Почему не: pool.close() pool.join() У меня на 11 потоках работает довольно шустро

pool - это просто список процессов, а не честный пул. Не спрашивай, почему я не использовал пул, не помню)

значит ли это что поток больше не жрёт память?

Ну, чисто теоретически, если поток жрёт очень много памяти из-за специфики кода, ты можешь в конце run() очищать условный список с вагоном данных, и, когда придёт GC, память освободится. Но останется некоторый оверхед самого потока, там не так уж много.

Но вообще весь разговор пахнет XY проблемой ? Какую задачу ты решаешь?

@irtimir ??

Дайте промо на it global meetup плз

Но вообще весь разговор пахнет XY проблемой ? Какую задачу ты решаешь?

на самом деле задача фигня, там просто запрос на брокер сообщений kafka

Дайте промо на it global meetup плз

спроси у @nazarov_tech

спроси у @nazarov_tech

спс

на самом деле задача фигня, там просто запрос на брокер сообщений kafka

А почему ты так переживаешь из-за расхода памяти, и зачем тебе для запроса многопоточность?

А почему ты так переживаешь из-за расхода памяти, и зачем тебе для запроса многопоточность?

потому что запросов много, а расход памяти - это скорее больше вопрос для понимания

Дайте промо на it global meetup плз

https://t.me/spbpythonnews/34

https://t.me/spbpythonnews/34

кстати, https://www.meetup.com/spbpython/events/252399389/

Оно похоже выбрало светлую сторону;)

«Правда всегда страшнее, чем то, что позволяет Telegram работать в России

Мальчишки и девчонки, нам нужна для сайта spbpython.guru летняя фотка участника/цы/ков сообщества. Наличие улыбающихся лиц и солнца обязательно:)

ERROR: S client not available

или я чето не то делаю?

spbpython.guru ?

Ну чё там, многие идут на ITGM?

Ну чё там, многие идут на ITGM?

Из моей конторы 4 лица точно, включая меня

Неплохо.

Ещё один пока думает)

Голосовалку создайте/запиньте)

Я думаю тоже ехать. Можно было бы конечно на VKFest послушать LG,Feduk,Гречка))

Голосовалку создайте/запиньте)

Зачем? Всегда много кто идёт.

Есть вот https://www.meetup.com/spbpython/events/252399389/

Я думаю тоже ехать. Можно было бы конечно на VKFest послушать LG,Feduk,Гречка))

Дорого жесть

spbpython.guru ?

Да;) Спасибо

Я думаю тоже ехать. Можно было бы конечно на VKFest послушать LG,Feduk,Гречка))

гречку лучше есть

гречку лучше есть

Гречка пища богов. Ем ее каждый день

греча!

А вот смотрите уже появляются анонсы спикеров PiterPy Conf

Let us introduce the speaker of #PiterPy conference 2018 > Lynn Root​ @roguelynn / Spotify / USA. New York City ​---- asyncio in Practice: We Did It Wrong ​---- https://piterpy.com/materials/2426

Спешите! Регистраия на ITGM #13 закрывается завтра (27 Июля) в 17:00. Что нужно знать про ITGM #13: * IT Global Meetup #13 под открытым небом, 28 июля, "Райвола" * Регистрация тут http://piter-united.ru * Промокод для регистрации H5gsU79 * Можно доехать дружно на электричке https://www.meetup.com/spbpython/events/252399389/ Следите за новостями, подписывайтесь на @SPbPythonNews! #itgm #itgm13

ребята пытаюсь взять товар в интернет магазине и с помощью bs4 + requests беру необходимые данные (размер, id) и т.д потом делю post запрос на js который добавляет в корзину (add.js) подгружаю header + data, (знаю что именно этот js потому что делаю в браузере replay xhr и всё работает.) затем захожу в корзину и делаю r.text(вытаскиваю содержимое страницы) и пытаюсь там найти свой товар (ctr+f) который взял и его там нет почему так? Python, 3.6+ Pycharm session = requests.session() r = session.post('https://www.deadstock.ca/cart/add.js', headers=headers, data=checkout) r = session.get('https://www.deadstock.ca/cart') print(r.text)

ребята пытаюсь взять товар в интернет магазине и с помощью bs4 + requests беру необходимые данные (размер, id) и т.д потом делю post запрос на js который добавляет в корзину (add.js) подгружаю header + data, (знаю что именно этот js потому что делаю в браузере replay xhr и всё работает.) затем захожу в корзину и делаю r.text(вытаскиваю содержимое страницы) и пытаюсь там найти свой товар (ctr+f) который взял и его там нет почему так? Python, 3.6+ Pycharm session = requests.session() r = session.post('https://www.deadstock.ca/cart/add.js', headers=headers, data=checkout) r = session.get('https://www.deadstock.ca/cart') print(r.text)

https://curl.trillworks.com/ возможно чем-то помжет

возможно товары в https://www.deadstock.ca/cart подгружаются аяксом?

В смысле запрос на Js ?