в интернетах девушек нет

Есть.

перешёл на python 3 в надежде, что избавился раз и навсегда от ошибок вида "'ascii' codec can't encode characters in position 64-67: ordinal not in range(128)", но рано обрадовался. Получаю b64 json-строку. делаю b64decode(string).decode('UTF-8') и для этого уже делаю json.loads(string), который уже вылетает с этой ошибкой.

а зачем делать b64decode к уже b64 cтроке?

а зачем делать b64decode к уже b64 cтроке?

А он разве не в bytearray*** декодит?

в bytes декодит

но человеку, насколько я понял, приходит b64 строка

и он к ней делает ещё раз b64decode

плюс я не очень секу в base64, но мне кажется в этот набор символов никакой жсон и ютф не поместится

и он к ней делает ещё раз b64decode

Так он ж ее декодировать хочет, а потом в str

Так он ж ее декодировать хочет, а потом в str

ага, всё, дошло

перешёл на python 3 в надежде, что избавился раз и навсегда от ошибок вида "'ascii' codec can't encode characters in position 64-67: ordinal not in range(128)", но рано обрадовался. Получаю b64 json-строку. делаю b64decode(string).decode('UTF-8') и для этого уже делаю json.loads(string), который уже вылетает с этой ошибкой.

Пробуй: json.loads(b64decode(data))

Пробуй: json.loads(b64decode(data))

json.loads не ест байты

Посоветуйте книги/лекции по алгебре логики. На русском/английском.

json.loads не ест байты

?

decode вовращает байт-стринг

Вопрос, а в декодированных байтах точно utf-8?

вот в этом и есть мой вопрос

И какой точно эксепшен вылетает?

как в base64 может поместиться ютф

как в base64 может поместиться ютф

Очень просто и легко: https://ru.m.wikipedia.org/wiki/Base64

то что utf-7?

b64 кодирует любой поток байтов, который получает на входе

хм, логично

Этот поток байтов он и получакт потом назад при декодировании. Но вопрос остается - в этом потоке точно utf-8, а не чтото другое?

Этот поток байтов он и получакт потом назад при декодировании. Но вопрос остается - в этом потоке точно utf-8, а не чтото другое?

даже если что-то другое, откуда там вообще ascii?

ну жсон бы ругнулся мол, не жсон это вовсе

даже если что-то другое, откуда там вообще ascii?

Так какой точно эксепшен?

сидим тут друг с другом спорим)

угу... затролили ))))

хех... а может быть есть бот, который питон умеет эвалить ?

а то даже с планшетом и клавиатурой ой как не хочется лезть на сервер... )))

b64encode('kommen hier ass Scheiße'.encode()) Out[5]: b'a29tbWVuIGhpZXIgYXNzIFNjaGVpw59l' b64decode(_) Out[6]: b'kommen hier ass Schei\xc3\x9fe' _.decode('utf-8') Out[7]: 'kommen hier ass Scheiße'

хех... а может быть есть бот, который питон умеет эвалить ?

есть

вот @rextester_bot

вот @rextester_bot

Тык, ща посмотрим...

а ещё хотелось бы предложить человеку bson

может быть это то что ему нужно

человек то пропал...

вообще, с py2 у меня тоже постоянный гемор был с этим

а вот с py3 уже норм

мне и с py2 норм

нормально делай, нормально будет

вот @rextester_bot

Спасибо большое! Почти то, что нужно, за исключением того, что надо каждый раз команду вводить, нельзя включить язык по умолчанию и не париться

мне и с py2 норм

после того, как я заценил asyncio, никаких ризонов оставаться на py2 нет... очень люблю асинхронное программирование, но в связи с тем, что появилось новое апи - старые фреймворки сейчас очень быстро уйдут в legacy

до 2020 есть время :)

а толку то...

просто по внутренним ощущениям стремно будет оставаться на py2

я какой-то криворук не смог в асинхронное, сложно

под ту же tornado нет нормального клиента для redis, например...

и, видимо, уже не будет

под aio - уже штуки 3 точно постоянно поддерживаемых

это только один из примеров

я какой-то криворук не смог в асинхронное, сложно

Надо 1 раз свернуть себе мозг слегка. И дальше все будет шикарно.

Ты только себе представь - все в одном процессе, стейты и данные можно хранить локально прямо в питоне, нет задержек на запуск, экономится память... Красота да и только!

Я не пропал. Просто поехал домой с работы. Дома посмотрю, что вы там насоветовали.

Если интересно, то такой json закодированный base64 отдаёт битрикс.

Причём каждый раз разный порядок, хотя исходные данные не менялись.

в смысле порядок?)

порядок ключей?

Ну, например, 10 раз обычный дикт принтани и он 10 раз одинаково напечатается, а тут не так.

Ну, например, 10 раз обычный дикт принтани и он 10 раз одинаково напечатается, а тут не так.

чего-чего

Если я не ошибаюсь. Нет возможности проверить сейчас.

в "обычном дикте" в python точно также никак не сохраняется порядок ключей

Я и не говорил, что он что-то сохраняет. Я сказал что он выведет одинаково.

?

Я и не говорил, что он что-то сохраняет. Я сказал что он выведет одинаково.

если не изменять этот словарь - то он выведет одинаково

под aio - уже штуки 3 точно постоянно поддерживаемых

asyncio медленный.

ERROR: S client not available

но если его туда сюда покопировать (к примеру передать по жсону или просто .copy), или добавить-убрать туда данные, то (насколько я понимаю) хэш-таблица пересоздаётся в памяти под новый словарь и там уже порядок будет такой же случайный

И медленнее торнадо/твистед/гевент

если не изменять этот словарь - то он выведет одинаково

Об этом я и говорил. Тут словарь тоже не меняется, но выводит по-разному

как это не меняется?

он же каждый раз новый создаётся

asyncio медленный.

uvloop

И медленнее торнадо/твистед/гевент

Есть циферки?

он же каждый раз новый создаётся

т.е. порядок ключей при создании случайный, даже если данные одни и те же - выведет ключи каждый раз в разном порядке

temp.py d = {'a':'b', 'c':'d', 'x':'y', 'n':'m'} print(d)

По идее подобные запросы кэшировать должно

Большие.

python temp.py {'c': 'd', 'x': 'y', 'n': 'm', 'a': 'b'} python temp.py {'x': 'y', 'a': 'b', 'n': 'm', 'c': 'd'} python temp.py {'c': 'd', 'a': 'b', 'n': 'm', 'x': 'y'} python temp.py {'a': 'b', 'n': 'm', 'x': 'y', 'c': 'd'} python temp.py {'x': 'y', 'n': 'm', 'c': 'd', 'a': 'b'} python temp.py {'x': 'y', 'n': 'm', 'c': 'd', 'a': 'b'} python temp.py {'n': 'm', 'x': 'y', 'a': 'b', 'c': 'd'} python temp.py {'n': 'm', 'a': 'b', 'c': 'd', 'x': 'y'}

Ок

Верю

Причём каждый раз разный порядок, хотя исходные данные не менялись.

а разный порядок в json'e или уже при принте результата от json.loads()?

json.loads не делается

На нём падает

угу

Вот пытаюсь понять почему падает. Я думал, что эта проблема в python 3 не проявляется...

ну мы тут уже поспорили и выяснили что там конкретно этой ошибке неоткуда взяться вообще

Что не так с символами. Там нет ничего необычного. Кириллица, слеши, обратные слеши. Даже ни одного спецсимвола нет. Позже могу привести пример.

Что не так с символами. Там нет ничего необычного. Кириллица, слеши, обратные слеши. Даже ни одного спецсимвола нет. Позже могу привести пример.

давай ты пример жсон+код+трейсбек приведешь, потому что сильное подозрение что дело там совсем не в этом

Ок. Позже.

uvloop

И? Можно побенчить

И? Можно побенчить

Так я и говорю - цифры есть в каком месте aio медленный?

Есть циферки?

Да. Сейчас не найду, но нагуглить свежие бенчи нетрудно.

"мопед не мой"

Так я и говорю - цифры есть в каком месте aio медленный?

Ну, давай в эхо-сервер

Можно еще про днс вспомнить в asyncio

Днс там есть

Днс там есть

Какой именно? Пул тредов?

Хотя для моих задач - это не такая большая проблема.