Народ, а как я могу получить лайв лог из приложения на фласке, если я запускаю через gunicorn app:app то выводится лог гуникорна, а мне нужен лог именно app.py

Ты логи чем ведёшь? Если logging, то просто добавь вывод в файл и всё.

https://vk.com/durov?w=wall1_1967550

Если просто выводишь на stdout, то есть такой грязный хак import sys sys.stdout = sys.stderr = open('exec.log', 'w')

Ещё можно запускать gunicorn со флагом --capture-output, тогда вывод пойдёт туда же, куда и лог самого gunicorn

@Vaderoff Короче, тьма вариантов

А что можно сделать за 140 к в мес в России?

А что можно сделать за 140 к в мес в России?

Россия большая

И как квартиру в городе купить за такую за ? Сколько собирать?

И как квартиру в городе купить за такую за ? Сколько собирать?

В каком городе?

Не в Москве например

Если один живёшь, то вообще спокойно

И вообще в @pyflood

Не в Москве например

Не Москва - это что?

Город с населением около 1000 000

Есть такие там? Нижний Новгород ростов на дону

Там таких зарплат нет))

Ясно..спасибо

Ребзи

А если у мне в requirements.txt надо вписать git-репозиторий, у которого порт нестандартный, то какой будет синтаксис?

Там просто после : уже указывается путь к репе, и поставить перед ним ещё :порт не прокатило.

Ругается на синтаксис.

17:16 < kosc_job> Hello! How should I write in requirements.txt if I want to get python module from git with custom port? 17:17 < tech2> kosc_job: why not tell your IT group exactly where they can stick their broken firewalling configuration? :(

Ахахах

ну как бы логично он тебе сказал)

имхо, можно поправить ~/.ssh/config

как грязное решение

вот тут есть пример https://stackoverflow.com/questions/1558719/using-a-remote-repository-with-non-standard-port

Да, я сейчас себе так получаю.

Но я же не буду вместе с requirements.txt в репе хранить ssh-конфиг.

Надо же, что бы у всех работало.

Наверное.

Ещё можно запускать gunicorn со флагом --capture-output, тогда вывод пойдёт туда же, куда и лог самого gunicorn

Мне наверное это подойдет

по-моему работает если гит работает по ssh-протоколу, то можно указать ssh://some-host:12345/some/path/to.git

ssh+git, не?

Нужно много видео скачивать, есть ли смысл использовать tornado?

Есть такие там? Нижний Новгород ростов на дону

Если живёшь один и не шикуешь, то года за два норм студию с ремонтом осилишь с такой зарплатой

Нужно много видео скачивать, есть ли смысл использовать tornado?

Возможно, тебе больше подойдёт celery.

Но я же не буду вместе с requirements.txt в репе хранить ssh-конфиг.

в репе нет, в системе управления конфигурацией, которая его деплоит - запросто

но вообще да, надо побить тех, кто гит на нестандартный порт повесил

Возможно, тебе больше подойдёт celery.

С celery будет скачиваться файлы друг за другом в очереди?

очередь если одна то да )

С celery будет скачиваться файлы друг за другом в очереди?

Celery это очередь задач. Ты в брокер закидываешь задачи в очереди, а workerы их выполняют. От количества воркеров зависит, по очереди или параллельно. Воркеры могут быть даже на разных машинах.

а так можно и huey юзать, попроще будет чем сельдерей

и название huey приятно уху))

Celery это стандарт в индустрии. Он немного сложноват для старта, но знания будут очень полезны.

Celery это стандарт в индустрии. Он немного сложноват для старта, но знания будут очень полезны.

сглсен

Celery это стандарт в индустрии. Он немного сложноват для старта, но знания будут очень полезны.

в индустрии чего? очередей задач примерно сотня-другая, десяток можно набрать быстрых и хороших разной степени сложности

в индустрии чего? очередей задач примерно сотня-другая, десяток можно набрать быстрых и хороших разной степени сложности

В вебе на питоне.

В вебе на питоне.

очередь задач в общем может быть написана на чем угодно, и питон может работать с любой другой. так что странный стандарт.

очередь задач в общем может быть написана на чем угодно, и питон может работать с любой другой. так что странный стандарт.

Я разве сказал что-то типа: «celery — единственный и неповторимый»?

Альтернативы есть. Но большинство сидит на celery.

Я разве сказал что-то типа: «celery — единственный и неповторимый»?

ну так не стандарт а просто популярная весьма древняя очередь задач с тяжелой наследственностью

Альтернативы есть. Но большинство сидит на celery.

большинство кого? питонистов? среди знакомых?

CELERY

большинство кого? питонистов? среди знакомых?

Ты споришь просто, чтобы поспорить? Вроде согласился же с популярностью.

Ты споришь просто, чтобы поспорить? Вроде согласился же с популярностью.

я про стандарт в индустрии удивился

Да целари самая популярная, даже больше других звезд на гитхабе

я про стандарт в индустрии удивился

ну я вот навскидку из альтернатив знаю только rq

либо велосипед ваять

так что, да, по сути, один из стандартов

либо велосипед ваять

каждая новая очередь сообщений (задач) появляется строго по одной причине - нужно быстрее. при этом не нужно миллиарда того что умеют старички. поэтому годных и довольно простых реализаций масса

каждая новая очередь сообщений (задач) появляется строго по одной причине - нужно быстрее. при этом не нужно миллиарда того что умеют старички. поэтому годных и довольно простых реализаций масса

если нужно быстрее - берешь rq + redis и у тебя быстро, еще круче разогнаться вряд ли получится в реальной задаче

а “старички” набили кучу шишек и за тебя решили массу проблем

для простых задач вполне может сойти python-rq

если нужно быстрее - берешь rq + redis и у тебя быстро, еще круче разогнаться вряд ли получится в реальной задаче

да брось, регулярно появляются ребята работающие быстрее на порядок

ERROR: S client not available

для простых задач вполне может сойти python-rq

про него и говорю ж, ну

мастерам алембика. Есть задача применять миграции при запуске скрипта. Стоит .basicConfig(), логи пишутся. Добавляю flask_migrate.upgrade() - в аутпут пишется инфа от алембика, что мол миграция применена, и мои логи писаться после этого перестают внутри этот фласк-мигрейт дергает alembic.comand.upgrade: https://github.com/miguelgrinberg/Flask-Migrate/blob/6439eb8254818ee690431d69270f77b9cbaf5491/flask_migrate/__init__.py#L259

для чего-то средней и выше сложности уже можно смотреть в сторону RabbitMQ

да брось, регулярно появляются ребята работающие быстрее на порядок

да брось, у тебя есть редис, хоть ты усрись, но быстрее него ты внешнюю очередь вряд ли получишь, как не изголяйся

ipyparallel неплох, но это немного другого уровня штука

мастерам алембика. Есть задача применять миграции при запуске скрипта. Стоит .basicConfig(), логи пишутся. Добавляю flask_migrate.upgrade() - в аутпут пишется инфа от алембика, что мол миграция применена, и мои логи писаться после этого перестают внутри этот фласк-мигрейт дергает alembic.comand.upgrade: https://github.com/miguelgrinberg/Flask-Migrate/blob/6439eb8254818ee690431d69270f77b9cbaf5491/flask_migrate/__init__.py#L259

мне пора уходить от basicConfig, да?)

мне пора уходить от basicConfig, да?)

то есть что-то в миграции перезаписывает параметры логгинга?

это прям странно

то есть что-то в миграции перезаписывает параметры логгинга?

я хз, но скрипт работает, просто в атупут больше ничего не пишется

я хз, но скрипт работает, просто в атупут больше ничего не пишется

ну, ты же через свой логгер пишешь с уникальным именем?

да

а не напрямую через logging?

тогда очень странно

надо грепать по слову logging

чем заменить basicConfig? addHandler?

да все в порядке с basicConfig

надо искать, что перезаписывает настройки

но можно и хэндлер попробовать

# Interpret the config file for Python logging. # This line sets up loggers basically. fileConfig(config.config_file_name)

# Interpret the config file for Python logging. # This line sets up loggers basically. fileConfig(config.config_file_name)

ну вот

выглядит подозрительно

смотри, чего там

так а че смотреть

я ж либу править не буду

def configure_logger(): # Log messages formatter to output to console consoleFormatter = colorlog.ColoredFormatter('%(threadName)16s:%(log_color)s%(levelname)8s' '%(reset)' 's<%(cyan)s%(asctime)s%(reset)s> %(message)s', reset=True, log_colors={'INFO': 'green', 'WARNING': 'yellow', 'ERROR': 'red'}) # Log messages formatter to output to file logFormatter = logging.Formatter('%(threadName)16s:%(levelname)8s <%(asctime)s> %(message)s') fileHandler = RotatingFileHandler('cryptobot.log', encoding='utf-8', maxBytes=cfg.log_max_size, backupCount=cfg.log_max_count) fileHandler.setFormatter(logFormatter) rootLogger.addHandler(fileHandler) consoleHandler = logging.StreamHandler() consoleHandler.setFormatter(consoleFormatter) rootLogger.addHandler(consoleHandler) У меня в своё время работал вот этот отрывок кода. Ни на что не претендую, но вроде норм.

смотри, из какого конфига она берет это говно

Ааа, секунду, залью нормально

https://gist.ttv.one/en/view/59a5825607623

смотри, из какого конфига она берет это говно

# this is the Alembic Config object, which provides # access to the values within the .ini file in use. config = context.config

# this is the Alembic Config object, which provides # access to the values within the .ini file in use. config = context.config

А, то есть он в alembic.ini ждёт параметры

Ну, попробуй свой хэндлер

спасиб