Vorug
Подскажите плиз в чём может быть бок, через requests отправляю запрос в ответ получаю данные в формате json, но конкретно в случае этого запроса когда делаю requests.get(url).json() вываливается ошибка ValueError: No JSON object could be decoded Вот полный ответ на запрос от сервера: HTTP/1.1 200 OK Server: nginx Date: Mon, 16 Sep 2019 06:35:12 GMT Content-Type: text/html; charset: iso-8859-1;charset=UTF-8 Transfer-Encoding: chunked Expires: Thu, 19 Nov 1981 08:52:00 GMT Cache-Control: no-store, no-cache, must-revalidate, post-check=0, pre-check=0 Pragma: no-cache Connection: keep-alive {"success":true,"message":"Succesfully added","videoid":941943} Впервые с таким сталкиваюсь.
Tishka17
"да вы ох*ели такой ох*енный сервис делать?"
- ну и за счёт чего мы их победили? - да мы с ХХХ просто *** в них запустили - да вы охуели! - а то!
Vorug
Ну вот сервер сказал что это не json, вон смотр Content-Type
а разве заголовки настолько важны? я думал он конкретно с телом работает, если там json то он его обрабатывает
Tishka17
Да, важны
Vorug
понял, всем спасибо, прийдётся теперь проверки лепить
Tishka17
Хм. Не, там щас не написано, найду
SetazeR
так разве можно?
SetazeR
там же в тексте именно стринг
Kop
так разве можно?
Не тестил, но вдруг там энкод есть
Vorug
Requests.get(url).text.json()
r = r.text.json() AttributeError: 'unicode' object has no attribute 'json'
SetazeR
'unicode'? ты ещё и второй питон чтоли юзаешь?
Kop
Тогда вручную чекай и конверть в джсон
SetazeR
F
Kop
F
Его аватарка себя оправдывает
Vorug
блин дичь какая-та, если делаю r = requests.get(url) r = json.loads(r.text) получаю ValueError: No JSON object could be decoded а вручную работает: >>> r = '{"success":true,"message":"Succesfully added","videoid":941950}' >>> json.loads(r) {u'message': u'Succesfully added', u'videoid': 941950, u'success': True}
Tishka17
Ты уверен что там именно такой текст?
SetazeR
ыыы
SetazeR
кому-то нужен энкодинг, да?
SetazeR
потому что питон 2, да?
Vorug
Ты уверен что там именно такой текст?
>>> print r.text {"success":true,"message":"Succesfully added","videoid":941961}
Vorug
Сделай плиз print repr(r.text)
u'\ufeff{"success":true,"message":"Succesfully added","videoid":941969}'
Vorug
что это?=)
Tishka17
Ну вот
Tishka17
Какая-то хрень перед жсоном
Vorug
Какая-то хрень перед жсоном
вижу, сенкс ) попробую стрипом её убрать
SetazeR
это BOM
Tishka17
Это BOM, только мудаки его ставят
👑OGURCHIK🖤
Кек
Vorug
а как его убрать? стрип не помог
Richard
encoding='utf-8-sig'
Richard
Попробуй
Vorug
Попробуй
request() got an unexpected keyword argument 'encoding'
Richard
request() got an unexpected keyword argument 'encoding'
Не R= request... R.encoding="utf-8-sig"
Richard
Language: py2 Source: d= u'\ufeff{"success":true,"message":"Succesfully added","videoid":941969}' s = d.encode("utf-8") print s Result: {"success":true,"message":"Succesfully added","videoid":941969}
Vorug
Language: py2 Source: d= u'\ufeff{"success":true,"message":"Succesfully added","videoid":941969}' s = d.encode("utf-8") print s Result: {"success":true,"message":"Succesfully added","videoid":941969}
>>> r = requests.get(url).text >>> print repr(r) u'\ufeff{"success":true,"message":"Succesfully added","videoid":941984}' >>> r = r.encode("utf-8") >>> print repr(r) '\xef\xbb\xbf{"success":true,"message":"Succesfully added","videoid":941984}'
Richard
r = requests.get().text.encode("utf-8") я же сказал сделать
Dogma
Vorug
я так и сделал
Richard
Ещё один ебущийся в глаза.
А как тогда правильно?
Dogma
поясни
Чо, последние две строчки репра не так же выглядят?
SetazeR
???
Richard
Чо, последние две строчки репра не так же выглядят?
А мне можешь объяснить, что у меня не так?
SetazeR
Не R= request... R.encoding="utf-8-sig"
я про вот это вообще
SetazeR
и после этого уже R.text брать
Vorug
Егор я сделал как ты и написал только в несколько действий, не помогло
Vorug
ща сек
Vorug
>>> r = requests.get(url).encoding="utf-8-sig" 'utf-8-sig'
SetazeR
чоты делаешь блэд
SetazeR
сделай запрос, потом поменяй энкодинг
Richard
Richard
repr вроде не нужен
SetazeR
r = requests.get(url) r.encoding = 'utf-8-sig' j = json.loads(r.text)
Vorug
repr вроде не нужен
да я им просто смотрю результат, в результате та хрень спереди просто теперь в другой кодировке стала, а мне её убрать надо полностью
Vorug
r = requests.get(url) r.encoding = 'utf-8-sig' j = json.loads(r.text)
вот теперь спасибо, всё сработало
SetazeR
*укоризненно смотрит на @yui_meow*
Tishka17
u'\ufeff{"success":true,"message":"Succesfully added","videoid":941969}'
Где ты вообще такой сервер откопал? Найти автора и набить морду не вариант?
Vorug
Где ты вообще такой сервер откопал? Найти автора и набить морду не вариант?
не вариант к сожалению, причём походу таких серверов у него много и с большой посещалкой
Richard
Я во это нашел Символ Юникода U+FEFF является значком байтового байта или спецификацией и используется для указания разницы между big- и кодировкой маленького конца UTF-16. Если вы декодируете веб-страницу с помощью правильно декодора
Tishka17
А не фича юникода?
Нет. Фича гениев, придумавших что в утф8 можно байты местами поменять
Tishka17
А что в этом плохого?
В том, это бессмысленно.
Tishka17
В итоге у нас всегда один вариант утф8, но некоторые добавляют бом
Tishka17
Более того, есть хэдер в котором указана кодировка
Tishka17
А они пихают эти данные в текст
Alexander
Explicit is better than implicit
Tishka17
Explicit is better than implicit
There should be one— and preferably only one —obvious way to do it.
Сережа
Ребят, привет, есть вопрос. Предположим дан массив, в нем все значения повторяются, кроме одного, как найти уникальное значение за линейное время без использования dict и set. Пример массива [1, 2, 1, 3, 2]