Roman
Почему супервизором не может быть сам воркер?
Alex
поэтому в идеале это вообще должны быть два процесса
Alex
Roman
2 вокюркера смотрящиз друг за другом
Tishka17
соединение же требует кипэлайвов тоже
Alex
Tishka17
@satrum и какой у нас стек?
Tishka17
собственно любой брокер должен как-то понимать, что сообщение нужно повторно отправить.
Roman
Брокер тут действительно не особо важен. Воркеры многопоточные. Использкю artemismq. Один из потоков вокрера начал вычисления. И завис в процессе.
Tishka17
ну если у вас многопоточные воркеры, сами следите за своими потоками
Alex
ну и эм... это уже проблема, потому что "зависший" поток прибить будет проблематично
Alex
лучше бы делать сразу нормально
Tishka17
собственно если у вас поток повис, а основной продолжает с брокером нормально общаться, брокер ничего не узнает
Roman
Мне и не нужно я стейт хочу в бд хранить.
Tishka17
при чем тут стейт?
Roman
Воркеры посылают ack если задание завершилось нормально
Roman
Стейт о том что задание в процессе
Tishka17
если задание было в процессе, а воркер упал, задание надо перезапустить
Roman
Вот и как узнать? В питоне?
Roman
Просто по таймауту и больше нет способов?
Tishka17
как вариант, брокер может определять по разрыву соединения
Roman
Разрыв не говорит что задание повисло. Оно может завершиться. Установить новое соединение. И отдать ответ.
Tishka17
разрыв говорит, что воркер работает некорректно
Tishka17
что взаимодействие с воркером
Roman
Не обязательно. Разрыв мог инициировать сам брокер. По своим таймингам или причинам.
Tishka17
конечно, если посичтал что воркер не ответил вовремя
Tishka17
короче, вопрос какие гарантии тебе нужны
Alex
тут уже надо смотреть спецификацию на свой конкретный брокер
Tishka17
at least once, at most once
Alex
Tishka17
если at least once, ты должен сам уже разбираться что будет если второй раз пришло сообщение
Tishka17
если at most once - что делатьелси ни разу не дошло
Tishka17
Alex
@Tishka17 похоже шилди не справляется уже.
Tishka17
выглядит смешно
Roman
Гарантии того чтобы задание не запустилось параллельно на двух воркерах. Так как оно ресурсоемко, работает с одной и той же таблицей в бд и т.п.
Tishka17
как будто диалог, а на саомм деле обрывки фраз
Tishka17
Tishka17
Anonymous
UPD: отмена вопроса, он всё равно не умеет прерывать сисколл.
UPD: отмена отмены вопроса, там и нет долгих сисколлов.
Вообще, чтобы не задавать A/B question: есть библиотека, в ней есть функция, которая может очень долго выполняться. Нужно как-то поставить ей таймаут. Бибилотека такой функциональности толком не предусматривает.
Tishka17
Anonymous
Слишком сурово. Нужно таймаутить одну функцию, а не весь процесс.
Tishka17
k
Добрый день!
Разбираюсь с оф документацией и один кусочек меня поставил в тупик:
Написано, что НЕЯВНЫЙ поиск приводит к вызову ____getattribure___ и приведен кусок кода, который делает с точностью да наоборот:
Вроде стандарный ход - дергаешь атрибут и он вызывает __getattribute___
Но почему он не дергает в случае использования синтаксического сахарка не очень понятен
Источник:
https://docs.python.org/3.8/reference/datamodel.html#special-method-look
Roman
а если оно ни разу не зпустится?
если в БД нет записи о том что задание стартовало - оно запуститься. Если второй воркер смотртит в базу и видит что задание стартовано на воркере 1, он может его запустить только ... и вот тут условие, которое должно гарантировать что на двух воркерах не будет запущено.
Tishka17
Anonymous
в общем случае это невозможно
Гарантируется, что функция не совершает длинных сисколлов и проводит большую часть времени на стороне питона.
Tishka17
Anonymous
Ну, например «бросить в тред эксепшн» даст ему время всё за собой почистить
Anonymous
Собственно, kthread это и делает
Tishka17
Anonymous
Ну, все finally-блоки и __exit__ контекстных менеджеров выполнится
Все деструкторы тоже
Roman
https://doc.qt.io/qtforpython/PySide2/QtCore/QThread.html#more - вот это?
Alex
Alex
если задание стартовало - то предполагается что оно запущено, пока не произойдет слеующее
Anonymous
Anonymous
Alex
какой-либо компонент системы не отменит это задание и пометит его как завершившееся с ошибкой \ таймаутом
Roman
Т.е. лучше всего просто прибивать зависший надолго воркер и не париться?
Anonymous
Если бросать какой-нибудь KeyboardInterrupt, то программа в любом случае должна это ожидать в любой момент
Це пиздос
Це пиздос
Подскажите пожалуйста, как убрать сервер из хеадера?
Alex
Nikita
Alex
Це пиздос
Nikita
Це пиздос
зачем?
Хочу скрыть сервер
Це пиздос
Arthur
Поделитесь мнением, кто в курсе, как долго перейти с java на python для веб-разработки и стоит ли?
Roman
для тестирования посмотри aiohttp, requests
Roman
а если хочеться что-то с батарейками - смотри django, django-rest-framework, django-channels
Arthur
Anonymous