Ребят, нужен совет. threading или multiprocessing ?

😂

Ребят, нужен совет. threading или multiprocessing ?

Зависит от конкретной задачи. В одних задачах удобнее и правильнее использовать одно, в других другое. В третьих ... третье)

К примеру - у меня была задача сделать службу, в которой крутятся несколько обработчиков, при этом один из них мониторит остальные и должен следить за их работой, если что то не так - перезапускать. Пробовал использовать multiprocessing - но тут возникла проблема с общением между процессами и зомбаками, и с родственными связями между "перезапускаемыми" процессами, поэтому перешел на asyncio, ибо с тасками удобнее работать.

Ну моя задача более проще. Хочу реализовать запуск воркера в трех и более потоках. Сейчас приходится запускать ручками один и тот-же файл трижды.

результаты собирать нужно там же где запускаешь?

Воркер выполняет роль воркера для rabbitmq + сокет сервера (ну это сильно сказано. Просто есть функция для отправки). Получает данные из очередей rabbitmq, обрабатывает и отсылает результат через сокет на другой хост.

я бы через multiprocessing pool сделал

я бы через multiprocessing pool сделал

Я тоже смотрю в его сторону. Но так, как ты написал выше про "перезапуск"

а зачем тебе перезапуск? создаешь процессы, они выполняются, освобождают память создаешь следующие

у меня субпроцесс пересоздавал, поэтому получилась говняга

Мне нужно было в реалтайме мониторить другие субпроцессы. И когда субпроцесс мониторинга перезапускал их, он становился их родителем, и терялась связь с основным процессом, а потом рождались зомби, которые не убивались до смерти основного процесса

а зачем тебе перезапуск? создаешь процессы, они выполняются, освобождают память создаешь следующие

Бывает что при выполнении может вывалится ошибка (правда ооочень редко, но бывает). Поэтому лучше обезопасить заранее

@terehinAV ты реализовал на asyncio ?

в итоге - да

в итоге - да

Можно глянуть на сорсы? Интересно как реализовано

с шаред мемори все проще - реализуешь класс, а обработчики-методы становятся корутинами

Можно глянуть на сорсы? Интересно как реализовано

К сожалению, нет, не имею права рабочий код шарить

К сожалению, нет, не имею права рабочий код шарить

Понял))

Я просто мониторю состояние корутин через атрибуты класса, если что то не так - меняю флаг, корутина сама выходит из бесконечного цикла, и в рабочий цикл событий добавляется новый таск

Я просто мониторю состояние корутин через атрибуты класса, если что то не так - меняю флаг, корутина сама выходит из бесконечного цикла, и в рабочий цикл событий добавляется новый таск

Угу, понял.

Возможно немного костыльно, зато работает и все под контролем

У меня стояла задача написать самовосстанавливающуюся службу

Спасибо за совет 👍 Пойду курить доку по asyncio

Спасибо за совет 👍 Пойду курить доку по asyncio

На здоровье)

У меня стояла задача написать самовосстанавливающуюся службу

Ну, мне этот пункт тоже нужно проработать 😄

Для начала попробую на multiprocessing, потом asyncio. Хоть что-то новое узнаю:D

Я и то и то использую в разных задачах, понимание что где использовать должно прийти в процессе курения док) на крайняк при реализации)

@terehinAV multiprocessing pool

То что надо:D

Как получить из потока ответ от функции?🤔

И возможно ли вообще

И возможно ли вообще

Наверное это оно https://stackoverflow.com/questions/6893968/how-to-get-the-return-value-from-a-thread-in-python

Наверное это оно https://stackoverflow.com/questions/6893968/how-to-get-the-return-value-from-a-thread-in-python

threadpool он вроде осёвый?

Ребят, подскажите как объединить два воркера в один файл, и запускать их с указанием количества процессов на воркер? https://pastebin.com/Uv9TYAQc

Был бы рад вашей помощи, а то уже второй день сижу с этой проблемой

print(" [x] Sent Update app " + data + "") Это вообще законно?

print(" [x] Sent Update app " + data + "") Это вообще законно?

А в чем проблема?

А в чем проблема?

Нехорошая практика. Есть же f-strings, ну и print(' Sent update app %s' % data) - по крайней мере в случае чего не напоретесь на exception

Нехорошая практика. Есть же f-strings, ну и print(' Sent update app %s' % data) - по крайней мере в случае чего не напоретесь на exception

К чему был вопрос вообще?

Думал, так сто 💯 лет уже не делают

Думал, так сто 💯 лет уже не делают

Мало кода видели

Не приведи г-сподь

Думал, так сто 💯 лет уже не делают

А сильно грешно, когда плюсами склеиваешь 2-3 строки?

https://softwareengineering.stackexchange.com/a/304447

В общем лучше сразу привыкать к правильному и + для склейки не использовать.

Ребята не вкатываю, как я понимаю grequests умеет только статус код показывать, код страницы не вытаскивает?

Код страницы?

Нехорошая практика. Есть же f-strings, ну и print(' Sent update app %s' % data) - по крайней мере в случае чего не напоретесь на exception

Кстати и правда. f-strings удобнее. Спасибо за наводку:3

Кстати и правда. f-strings удобнее. Спасибо за наводку:3

есть еще .format(), если питон ниже 3.6

Всем привет! Префикс "pro." в названии канала указывает на проф. аудиторию? :)

Всем привет! Префикс "pro." в названии канала указывает на проф. аудиторию? :)

На участие проф. аудитории)

Всем привет! Префикс "pro." в названии канала указывает на проф. аудиторию? :)

да это просто сеть чатов такая

да это просто сеть чатов такая

Ну и ещё это

https://t.me/proDOT

Ага, ясно. Как в старые времена: "comp.lang.*" или "SU.*" :)

🤔

Я просто в Телеграме не ориентируюсь пока что :) Что вы хотите от человека, который до сих пор в IRC сидит! %)

Ну так в IRC же питонисты тоже сидят

Ну, а так я понял

Сидят. А мне стало интересно, не пропускаю ли я чего важного, избегая все это время телеграм :)

Не сильно упускаешь

Вот интересно, а куда все ушли-то? В IRC мало людей. Каналы по программированию на Телеграме тоже как-то не особенно активны. Где все? В контакте и фейсбуке?

все в гугле сидят), а те кому общаться нужно сидят в вк/телеграмм

Кстати, по поводу общения. Сюда кто-нибудь из присутствующих собирается? https://conf.python.ru/2018

ну если б я в москве был

🐈

Вот интересно, а куда все ушли-то? В IRC мало людей. Каналы по программированию на Телеграме тоже как-то не особенно активны. Где все? В контакте и фейсбуке?

Все в тг

Все в тг

и эйчары кстати, тоже сюда перелезли

О, и что сейчас модно спрашивать на собеседованиях по Питону? :)

О, и что сейчас модно спрашивать на собеседованиях по Питону? :)

Как обычно. Всякий дебилизм.

Pythot😆

Годно

Pythot😆

В стикеры добавь

Годно

Tornado)

gevent