Его попробуй что-ли

какой тип возвращает r.headers.get('content-disposition')?

<class 'str'>

обязатенльно

И?

когда не могу юзать pip

Блин, вопрос, с чего начать учить?

Имхо пробуй что-то писать, попутно смотря ролики того курса. Ну и когда что-то будет не хватать, смотри в документацию.

Скачай билд

И сам собери

Или что там, wheel вроде

Еще проще тогда

бля

я вщ хз как объяснить

<class 'str'>

тогда дофига странно. получается что requests получил bytes и декодировал их в unicode какой-то кривой кодировкой (наверное utf). И это сработало, но теперь буквы поломались. А попробуй действительно делать print(r.headers.get('content-disposition').encode('utf-8').decode("cp-1251")) и заодно глянь на все заголовки import pprint pprint.pprint(r.headers)

тогда дофига странно. получается что requests получил bytes и декодировал их в unicode какой-то кривой кодировкой (наверное utf). И это сработало, но теперь буквы поломались. А попробуй действительно делать print(r.headers.get('content-disposition').encode('utf-8').decode("cp-1251")) и заодно глянь на все заголовки import pprint pprint.pprint(r.headers)

1) print(r.headers.get('content-disposition').encode('utf-8').decode("cp-1251")) LookupError: unknown encoding: cp-1251) 2) <class 'NoneType'> {'Server': 'nginx', 'Date': 'Sun, 21 Jul 2019 23:45:45 GMT', 'Content-Type': 'text/html; charset=UTF-8', 'Transfer-Encoding': 'chunked', 'Connection': 'keep-alive', 'Keep-Alive': 'timeout=20', 'Expires': '0', 'Pragma': 'no-cache', 'Last-Modified': 'Sun, 21 Jul 2019 23:45:45 GMT', 'Cache-Control': 'no-cache,no-store,max-age=0,s-maxage=0,must-revalidate', 'X-Frame-Options': 'SAMEORIGIN', 'X-XSS-Protection': '1; mode=block', 'X-Content-Type-Options': 'nosniff', 'Set-Cookie': 'lastdl=1563752745; expires=Fri, 19-Jul-2024 23:45:45 GMT; Max-Age=157680000; path=/; domain=.sendspace.com', 'Content-Encoding': 'gzip', 'Vary': 'Accept-Encoding'} Здесь почему-то показывает content-type html, скорее всего нужно как-то указать, чтоб редиректы работали Вот url: https://fs13n2.sendspace.com/dl/076abf9fa1aa4310a4098c42e1f60ca7/5d34f89c0bc9a849/hs91ng/%D0%B8%D0%BC%D1%8F%20%D1%84%D0%B01%D0%BB%D0%B0%202782%20%D0%B8%D0%BC%D1%8F.zip

1) print(r.headers.get('content-disposition').encode('utf-8').decode("cp-1251")) LookupError: unknown encoding: cp-1251) 2) <class 'NoneType'> {'Server': 'nginx', 'Date': 'Sun, 21 Jul 2019 23:45:45 GMT', 'Content-Type': 'text/html; charset=UTF-8', 'Transfer-Encoding': 'chunked', 'Connection': 'keep-alive', 'Keep-Alive': 'timeout=20', 'Expires': '0', 'Pragma': 'no-cache', 'Last-Modified': 'Sun, 21 Jul 2019 23:45:45 GMT', 'Cache-Control': 'no-cache,no-store,max-age=0,s-maxage=0,must-revalidate', 'X-Frame-Options': 'SAMEORIGIN', 'X-XSS-Protection': '1; mode=block', 'X-Content-Type-Options': 'nosniff', 'Set-Cookie': 'lastdl=1563752745; expires=Fri, 19-Jul-2024 23:45:45 GMT; Max-Age=157680000; path=/; domain=.sendspace.com', 'Content-Encoding': 'gzip', 'Vary': 'Accept-Encoding'} Здесь почему-то показывает content-type html, скорее всего нужно как-то указать, чтоб редиректы работали Вот url: https://fs13n2.sendspace.com/dl/076abf9fa1aa4310a4098c42e1f60ca7/5d34f89c0bc9a849/hs91ng/%D0%B8%D0%BC%D1%8F%20%D1%84%D0%B01%D0%BB%D0%B0%202782%20%D0%B8%D0%BC%D1%8F.zip

ну в урле имя файла в utf8, по заголовкам тоже, вроде, utf-8. Странно как-то. Может таки консоль странная и питон этого не понля? Что 'set | grep LC' показывает? А попробуй имя файла из content-disposition закодировать в utf-8, напечатать и посмотреть - будет ли с именем файла из url совпадать

ну в урле имя файла в utf8, по заголовкам тоже, вроде, utf-8. Странно как-то. Может таки консоль странная и питон этого не понля? Что 'set | grep LC' показывает? А попробуй имя файла из content-disposition закодировать в utf-8, напечатать и посмотреть - будет ли с именем файла из url совпадать

Возможно, скрипт на сервере просто. MAILCHECK=60 for i in $(LC_ALL=C $prog --help); for i in $(LC_ALL=C $prog --usage); local LC_CTYPE=C; __grubcomp "$(LC_ALL=C $prog --help | awk -F ":" '/available formats/ { print $2 }' | sed 's/, / /g')"; __grubcomp "$(LC_ALL=C $prog --help | awk -F "[()]" '/--target=/ { print $2 }' | sed 's/|/ /g')"; COMPREPLY+=($( compgen -W "$( { LC_ALL=C ifconfig -a || ip addr show; } 2>/dev/null | command sed -ne 's/.*addr:\([^[:space:]]*\).*/\1/p' -ne 's|.*inet[[:space:]]\{1,\}\([^[:space:]/]*\).*|\1|p' )" -- "$cur" )) local argtype=$( LC_ALL=C $1 --help 2>&1 | command sed -ne "s|.*$prev\[\{0,1\}=[<[]\{0,1\}\([-A-Za-z0-9_]\{1,\}\).*|\1|p" ); COMPREPLY=($( compgen -W "$( LC_ALL=C $1 --help 2>&1 | command sed -ne 's/.*\(--[-A-Za-z0-9]\{1,\}=\{0,1\}\).*/\1/p' | sort -u )" -- "$cur" )); COMPREPLY+=($( { LC_ALL=C ifconfig -a || ip link show; } 2>/dev/null | command sed -ne "s/.*[[:space:]]HWaddr[[:space:]]\{1,\}\($re\)[[:space:]].*/\1/p" -ne "s/.*[[:space:]]HWaddr[[:space:]]\{1,\}\($re\)[[:space:]]*$/\1/p" -ne "s|.*[[:space:]]\(link/\)\{0,1\}ether[[:space:]]\{1,\}\($re\)[[:space:]].*|\2|p" -ne "s|.*[[:space:]]\(link/\)\{0,1\}ether[[:space:]]\{1,\}\($re\)[[:space:]]*$|\2|p" LC_ALL=C "$( dequote "$cmd" )" ${2:---help} 2>&1 LC_ALL=C "$( dequote "$cmd" )" ${2:---usage} 2>&1

> А попробуй имя файла из content-disposition закодировать в utf-8, напечатать и посмотреть - будет ли с именем файла из url совпадать Просто скопировать кракозябры и кодировать в utf-8?

Возможно, скрипт на сервере просто. MAILCHECK=60 for i in $(LC_ALL=C $prog --help); for i in $(LC_ALL=C $prog --usage); local LC_CTYPE=C; __grubcomp "$(LC_ALL=C $prog --help | awk -F ":" '/available formats/ { print $2 }' | sed 's/, / /g')"; __grubcomp "$(LC_ALL=C $prog --help | awk -F "[()]" '/--target=/ { print $2 }' | sed 's/|/ /g')"; COMPREPLY+=($( compgen -W "$( { LC_ALL=C ifconfig -a || ip addr show; } 2>/dev/null | command sed -ne 's/.*addr:\([^[:space:]]*\).*/\1/p' -ne 's|.*inet[[:space:]]\{1,\}\([^[:space:]/]*\).*|\1|p' )" -- "$cur" )) local argtype=$( LC_ALL=C $1 --help 2>&1 | command sed -ne "s|.*$prev\[\{0,1\}=[<[]\{0,1\}\([-A-Za-z0-9_]\{1,\}\).*|\1|p" ); COMPREPLY=($( compgen -W "$( LC_ALL=C $1 --help 2>&1 | command sed -ne 's/.*\(--[-A-Za-z0-9]\{1,\}=\{0,1\}\).*/\1/p' | sort -u )" -- "$cur" )); COMPREPLY+=($( { LC_ALL=C ifconfig -a || ip link show; } 2>/dev/null | command sed -ne "s/.*[[:space:]]HWaddr[[:space:]]\{1,\}\($re\)[[:space:]].*/\1/p" -ne "s/.*[[:space:]]HWaddr[[:space:]]\{1,\}\($re\)[[:space:]]*$/\1/p" -ne "s|.*[[:space:]]\(link/\)\{0,1\}ether[[:space:]]\{1,\}\($re\)[[:space:]].*|\2|p" -ne "s|.*[[:space:]]\(link/\)\{0,1\}ether[[:space:]]\{1,\}\($re\)[[:space:]]*$|\2|p" LC_ALL=C "$( dequote "$cmd" )" ${2:---help} 2>&1 LC_ALL=C "$( dequote "$cmd" )" ${2:---usage} 2>&1

о боже, что там с настройками кодировки то, должно быть что-то в духе LC_CTYPE=en_US.UTF-8, а у тебя 'С' стоит, которая, вроде ascii, хотя я тут не очень

> А попробуй имя файла из content-disposition закодировать в utf-8, напечатать и посмотреть - будет ли с именем файла из url совпадать Просто скопировать кракозябры и кодировать в utf-8?

print(r.headers.get('content-disposition').encode('utf-8'))

print(r.headers.get('content-disposition').encode('utf-8')) AttributeError: 'NoneType' object has no attribute 'encode'

там еще функция get_filename_from_cd

она парсит именно имя файла из заголовка

print(r.headers.get('content-disposition').encode('utf-8')) AttributeError: 'NoneType' object has no attribute 'encode'

так, тут, ожидаемо, написанно что content-disposition у тебя нет в заголовках (а его там нет, я думал может request его симулирует)

а в консоли print('Привет') выдает нормально

Вот так принт выдает кракозябры. Если заенкодить filename в utf-8, то получается нормально. Значит, filename - в кодировке отличной от utf-8? filename = get_filename_from_cd(r.headers.get('content-disposition')) print(filename)

Вот так принт выдает кракозябры. Если заенкодить filename в utf-8, то получается нормально. Значит, filename - в кодировке отличной от utf-8? filename = get_filename_from_cd(r.headers.get('content-disposition')) print(filename)

сори, я потерялся. То r.headers.get(..) выдает None, то строку Что возвращает sys.getdefaultencoding()?

можно просто в консоли

можно просто в консоли

utf-8

> сори, я потерялся. То r.headers.get(..) выдает None, то строку Разные url были. Вообще странно, 1 url выдает None, другой другое

разные url одного сервиса sendspace.com

сори, я хз что у тебя :( мои идеи кончились

сори, я хз что у тебя :( мои идеи кончились

:( Все равно спасибо за помощь :)

сори, я хз что у тебя :( мои идеи кончились

Воспользуюсь wget, есть опция --content-disposition, протестировал, работает. :)

Добро пожаловать, X! Не забудь ознакомиться с правилами чата. https://t.me/ru_python/802295

Парсеры на месте? :D

curl может как-то вытянуть html и на лету перекодировать его?

Все, нашел iconv

iconv -f cp1251 -t utf8 /Video/somefile.srt -o /Video/subtitles.srt

Аля такого

Добро пожаловать, @yarfuo! Не забудь ознакомиться с правилами чата. https://t.me/ru_python/802295

curl может как-то вытянуть html и на лету перекодировать его?

А флагов в curl нету никаких?

Ну я за флаги спрашивал, мб кто юзал

Лень было в мане красноглазить

Лень было в мане красноглазить

man curl Жмякаешь \ ( то ли /, с телефона не вспомню) и вбиваешь кейворды

ну, смотря какой пейджер используется. На сколько помню, в убунте less(или more)

Добро пожаловать, Аня Коваленко! Не забудь ознакомиться с правилами чата. https://t.me/ru_python/802295

Всем привет! Есть два компьютера в пределах одной локальной сети. На оба компьютера одновременно поступает команда, но выполнится она должна только на одном из них. Как это можно сделать? Я пока смотрю в сторону алгоритма raft, планирую сделать его реализацию используя twisted, но текущая программа представляет собой виндовую службу с синхронным кодом - не придумал пока как это все красиво подружить.

Привет. Подскажите в чем проблема. Декоратор не считает время - при первом запуске выдал рез , каждый последующий всегда нули в формате 0:00:00 http://dpaste.com/0BCZP14

Используй time.monotonic() для вычисления дельты

Всем привет! Есть два компьютера в пределах одной локальной сети. На оба компьютера одновременно поступает команда, но выполнится она должна только на одном из них. Как это можно сделать? Я пока смотрю в сторону алгоритма raft, планирую сделать его реализацию используя twisted, но текущая программа представляет собой виндовую службу с синхронным кодом - не придумал пока как это все красиво подружить.

Зачем усложнять поставь http и nginx самый простой round robin решает твою проблему

Зачем усложнять поставь http и nginx самый простой round robin решает твою проблему

Да, round robin - вполне решение. Но надо слушать команды от opc сервера.

Друзья - это обучение - то что вы говорите , я ещё не проходил...((

Так что, увы не вариант

Привет. Подскажите в чем проблема. Декоратор не считает время - при первом запуске выдал рез , каждый последующий всегда нули в формате 0:00:00 http://dpaste.com/0BCZP14

@ru_python_beginners

Добро пожаловать, Stay Lazy! Не забудь ознакомиться с правилами чата. https://t.me/ru_python/802295

парни подскажите самые самые эвенты на территории снг по питону в 20 году))

Всем привет! Есть два компьютера в пределах одной локальной сети. На оба компьютера одновременно поступает команда, но выполнится она должна только на одном из них. Как это можно сделать? Я пока смотрю в сторону алгоритма raft, планирую сделать его реализацию используя twisted, но текущая программа представляет собой виндовую службу с синхронным кодом - не придумал пока как это все красиво подружить.

А нет ли случайно условия, что пока первая команда выполняется, любая другая игнорится? Если так, то без распределённых локов пожалуй не обойтись.

А нет ли случайно условия, что пока первая команда выполняется, любая другая игнорится? Если так, то без распределённых локов пожалуй не обойтись.

Нет, такого условия нет. Но локи - решение проходящее. Как лучше сделать?

Нет, такого условия нет. Но локи - решение проходящее. Как лучше сделать?

Есть спец. решения для этого, такие как ZooKeeper, etcd и др. А можно банально использовать Redis

Спасибо, попробую

Если у тебя винда, то с Redis будет наверное проще, не уверен можно ли в винде запустить etcd

Ок, попробую с redis. Спасибо ещё раз!

Реализация локов через редис всяко есть готовая. Если и не в самом адаптере для редиса, то в сторонних пакетах точно.

Тогда вообще отлично! А то я думал с нуля (почти) писать надо.

Всем привет! Есть два компьютера в пределах одной локальной сети. На оба компьютера одновременно поступает команда, но выполнится она должна только на одном из них. Как это можно сделать? Я пока смотрю в сторону алгоритма raft, планирую сделать его реализацию используя twisted, но текущая программа представляет собой виндовую службу с синхронным кодом - не придумал пока как это все красиво подружить.

А нельзя передавать команду через кафку?

А нельзя передавать команду через кафку?

А если она с двух машин одновременно придёт - не задублируется?

Эм. С двух машин одна команда на две машины?

Давай-ка подробнее

А если она с двух машин одновременно придёт - не задублируется?

Ну вообще встанет в очередь

Эм. С двух машин одна команда на две машины?

Да, команда на обе машины приходит идентичная. А выполнить надо только на одной из них.

На или с?

На

Ну тогда норм

Правда тут вопросы: 1. Почему нельзя при отправке сообщений сразу решить на какой машине выполнять? 2. А что если машина выйдет из строя? Надо ли все равно команду выполнить на первой? 3. А не окажется ли завтра 10 машин?

Ребят, а кто то работает с kubernetes?

Правда тут вопросы: 1. Почему нельзя при отправке сообщений сразу решить на какой машине выполнять? 2. А что если машина выйдет из строя? Надо ли все равно команду выполнить на первой? 3. А не окажется ли завтра 10 машин?

1. Источнику команд неизвестно, кто из них живой ; 2. Выполнять можно на любой и в облом порядке; 3. Нет, не окажется.

Ребят, а кто то работает с kubernetes?

В кубер чатик

Тут надо уточнить, что команды прилетают редко, реже чем раз в день. И скорость выполнения не особо важна, надо чтобы только выполнилось один раз и гарантировано. Поэтому, чем меньше сторонних сущностей - тем лучше. Но если проще всего через redis или Kafka - то я попробую.

В кубер чатик

оки

Тут надо уточнить, что команды прилетают редко, реже чем раз в день. И скорость выполнения не особо важна, надо чтобы только выполнилось один раз и гарантировано. Поэтому, чем меньше сторонних сущностей - тем лучше. Но если проще всего через redis или Kafka - то я попробую.

Ну попробуй тогда редис

Кафка выглядит перебором для такого

Блин, такой спор про аннотации пропустил :(

В догонку скажу, если не забанят конечно. Если ошибки нужно отлавливать только в рантайме и аттрибут_еррор нестрашны, то зачем виндузы сделали ts поверх js?!

В догонку скажу, если не забанят конечно. Если ошибки нужно отлавливать только в рантайме и аттрибут_еррор нестрашны, то зачем виндузы сделали ts поверх js?!

В жс ты не отловишь. Там слабая типизация

Тут надо уточнить, что команды прилетают редко, реже чем раз в день. И скорость выполнения не особо важна, надо чтобы только выполнилось один раз и гарантировано. Поэтому, чем меньше сторонних сущностей - тем лучше. Но если проще всего через redis или Kafka - то я попробую.

Хм, а вот условие "гарантированно выполнилось" локами как таковыми не предоставляется. Тут надо либо использовать "очереди" с подтверждением обработки "сообщения" + какой-то механихм дедупликации (например сохранять в базе дату выполненной команды и не запускать вторую с такой же датой (если команды раз в день приходят). Либо на "втором" сервере ждать пока не будет снят лок, и проверять что "первый" сервер действительно успешно выполнил команду. После этого либо завершать обработку, либо самому запускать обработку команды. В случае сихнронной реализации серверов получится, что оба сервера будут "заняты" пока идёт обработка команды.

Если команды такие редкие. Можно просто сохранять их в базу данных (с уникальным ключём для дедупликации). И запускать "по крону" задачку (например раз в 10 минут), которая будет искать в базе ещё не выполненые задачи и выполнять их.

Если в проекте уже есть база данных, то последний вариант выглядит как менее требовательный. Хотя он не исключает использования локов, т.к. запускать "крон" задачу надо на обеих серваках на случай если один из них "сломается".

Хм, а вот условие "гарантированно выполнилось" локами как таковыми не предоставляется. Тут надо либо использовать "очереди" с подтверждением обработки "сообщения" + какой-то механихм дедупликации (например сохранять в базе дату выполненной команды и не запускать вторую с такой же датой (если команды раз в день приходят). Либо на "втором" сервере ждать пока не будет снят лок, и проверять что "первый" сервер действительно успешно выполнил команду. После этого либо завершать обработку, либо самому запускать обработку команды. В случае сихнронной реализации серверов получится, что оба сервера будут "заняты" пока идёт обработка команды.

Я в принципе думал делать локи плюс проверку выполнения - этого вполне достаточно.

Если команды такие редкие. Можно просто сохранять их в базу данных (с уникальным ключём для дедупликации). И запускать "по крону" задачку (например раз в 10 минут), которая будет искать в базе ещё не выполненые задачи и выполнять их.

Нет, время выполнения не критично, но выполнять надо сразу. Крон не желательно использовать.

Тогда видимо придётся на "втором" сервере ждать "подтверждения", что задача была до конца выполнена на "первом", дабы быстро среагировать на поломку "первого".