Напиши в поддержку биржи

Забей, он всегда ругается

Забей, он всегда ругается

https://i.ytimg.com/vi/rURxRng5rxw/maxresdefault.jpg

@YouProgrammist_ghost а я, как бы могу здесь спрашивать всё про пайтон?

Нет , только си и ассемблер

Шо это?

как пайтон, но не пайтон

Я просто, новичок в програмировании

как пайтон, но не пайтон

Спасибо

@YouProgrammist_ghost а я, как бы могу здесь спрашивать всё про пайтон?

https://t.me/ru_python/802295

тут написано, что можно, а что нет

Да я уже читал

как пайтон, но не пайтон

А чем они отличаются?

Да я уже читал

@ru_python_beginners

А чем они отличаются?

Stackoverflow.com

Спасибо большое

ах да, хотелось бы поблагодарить человека, который мне дал ссылку на видео где чел говорит:"да пофигу на DE в линухе", я дошел до момента:"python is slow" и обиделся... ="(

ах да, хотелось бы поблагодарить человека, который мне дал ссылку на видео где чел говорит:"да пофигу на DE в линухе", я дошел до момента:"python is slow" и обиделся... ="(

у меня нет DE

@raizanshine будет жить. Поприветствуем!

гельветика? а он разве clear-type? а чего 14я-то? или "работает - не трогай"?

оформил DO сегодня, они денег сняли, вернули и заблочили аккаунт "до выяснений" =D

@Ghusto будет жить. Поприветствуем!

Всем привет.

нужно спарсить картинки, но у них в url нет расширения, не получается скачать через urllib

как можно это реализовать?

а что не так-то? все равно в теге же, нет?

не записывает в файл

а что не так-то? все равно в теге же, нет?

в теге ссылка, в которой нет вконце расширения файла, как обычно у картинок

как можно это реализовать?

ай донт ноу, бат хэв ю трайд гугл сёрч? https://stackoverflow.com/questions/11145531/download-jpg-from-website-with-no-extension

Выниси приватки в модуль

Всё равно

ребята не подскажите в чем проблема? хочу с помощью requests залогинится на сайт и оттуда получить кое что. есть учетка все такое. но никак не могу залогинится. пишу через with requests.Session() as session: post_login = session.post(url_login, data=log_pass, headers=header) print(post_login) print('\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n') urlget = session.get(url_get).text print(urlget) пишет что неправильный логин пароль или вообще ничего не пишет. короче не логинюсь. в чем может быть проблема?

Всё равно

Так удобнее pastebin.com и prtscrn

попробовал кстати на разных сайтах где есть учетка, нигде не логинится

Language: py2 Source: False = True print False==True Result: True

ай донт ноу, бат хэв ю трайд гугл сёрч? https://stackoverflow.com/questions/11145531/download-jpg-from-website-with-no-extension

второй вариант не пробовал, который по ссылке. странно что не попал на эту страницу. весь день в разных вариациях гуглил. спасибо.

Так удобнее pastebin.com и prtscrn

в любом случае нужен доступ для работы, поэтому код бесполезен как по мне. В итоге пошёл в файл ошибки библиотеки и закомментил её, теперь её нет))

второй вариант не пробовал, который по ссылке. странно что не попал на эту страницу. весь день в разных вариациях гуглил. спасибо.

держи на будущее https://www.google.com/search?client=firefox-b-d&q=no+picture+extension+how+to+parse+urllib

Language: py2 Source: False = True print False==True Result: True

метаморфоза

@VeLeSlAvA61 будет жить. Поприветствуем!

ребята не подскажите в чем проблема? хочу с помощью requests залогинится на сайт и оттуда получить кое что. есть учетка все такое. но никак не могу залогинится. пишу через with requests.Session() as session: post_login = session.post(url_login, data=log_pass, headers=header) print(post_login) print('\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n\n') urlget = session.get(url_get).text print(urlget) пишет что неправильный логин пароль или вообще ничего не пишет. короче не логинюсь. в чем может быть проблема?

Ты делаешь не так.

Ты делаешь не так.

а как надо?)

держи на будущее https://www.google.com/search?client=firefox-b-d&q=no+picture+extension+how+to+parse+urllib

ничего не сработало

нужно спарсить картинки, но у них в url нет расширения, не получается скачать через urllib

?скачай страницу найди все теги картинок и получи их скр

?скачай страницу найди все теги картинок и получи их скр

не могу забрать по ссылке. вот одно из них http://i.siteapi.org/F0BRbbdtYCvtqaifyy9ot-deDfw=/fit-in/330x/top/f1ca8c691ed28c2.ua.s.siteapi.org/img/t3l7lq22wf4gwgcgw00co0408s8c4k

?скачай страницу найди все теги картинок и получи их скр

нужно больше 1000 штук скачать

не могу забрать по ссылке. вот одно из них http://i.siteapi.org/F0BRbbdtYCvtqaifyy9ot-deDfw=/fit-in/330x/top/f1ca8c691ed28c2.ua.s.siteapi.org/img/t3l7lq22wf4gwgcgw00co0408s8c4k

siteapi.org/img это не общее у всех?

siteapi.org/img это не общее у всех?

даже если так, то что это меняет?

даже если так, то что это меняет?

?стоп. надо ссылки спарсить или скачать картинки по ссылкам?

?стоп. надо ссылки спарсить или скачать картинки по ссылкам?

картинки скачать, ссылки спарсил

нужно спарсить картинки, но у них в url нет расширения, не получается скачать через urllib

почему не получается?

что за ошибка?

почему не получается?

f.write(logo) TypeError: a bytes-like object is required, not 'HTTPResponse'

почему не получается?

Делаю так: url_img = "http://i.siteapi.org/COV_B9cM9ppXxTEH0Ce3EnHtiDg=/fit-in/1024x/top/f1ca8c691ed28c2.ua.s.siteapi.org/img/t3l7lq22wf4gwgcgw00co0408s8c4k" logo = urllib.request.urlopen(url_img) format_img = logo.info()["Content-Type"].split('/')[1] file_name = str(url.split('/')[-1])+'.'+format_img f = open('data/images/'+file_name, 'wb+') f.write(logo) f.close()

Делаю так: url_img = "http://i.siteapi.org/COV_B9cM9ppXxTEH0Ce3EnHtiDg=/fit-in/1024x/top/f1ca8c691ed28c2.ua.s.siteapi.org/img/t3l7lq22wf4gwgcgw00co0408s8c4k" logo = urllib.request.urlopen(url_img) format_img = logo.info()["Content-Type"].split('/')[1] file_name = str(url.split('/')[-1])+'.'+format_img f = open('data/images/'+file_name, 'wb+') f.write(logo) f.close()

import requests url_img = "http://i.siteapi.org/COV_B9cM9ppXxTEH0Ce3EnHtiDg=/fit-in/1024x/top/f1ca8c691ed28c2.ua.s.siteapi.org/img/t3l7lq22wf4gwgcgw00co0408s8c4k" r = requests.get(url_img, stream=True) if r.status_code == 200: with open("path.jpg", 'wb') as f: for chunk in r: f.write(chunk)

?а за urllib

WARNING: Security researches have found several poisoned packages on PyPI, including a package named urllib, which will 'phone home' when installed. If you used pip install urllib some time after June 2017, remove that package as soon as possible.

import requests url_img = "http://i.siteapi.org/COV_B9cM9ppXxTEH0Ce3EnHtiDg=/fit-in/1024x/top/f1ca8c691ed28c2.ua.s.siteapi.org/img/t3l7lq22wf4gwgcgw00co0408s8c4k" r = requests.get(url_img, stream=True) if r.status_code == 200: with open("path.jpg", 'wb') as f: for chunk in r: f.write(chunk)

для себя привел к такому виду url_img = "http://i.siteapi.org/COV_B9cM9ppXxTEH0Ce3EnHtiDg=/fit-in/1024x/top/f1ca8c691ed28c2.ua.s.siteapi.org/img/t3l7lq22wf4gwgcgw00co0408s8c4k" logo = urllib.request.urlopen(url_img) format_img = logo.info()["Content-Type"].split('/')[1] file_name = str(url.split('/')[-1])+'.'+format_img r = requests.get(url_img, stream=True) if r.status_code == 200: with open(file_name, 'wb+') as f: for chunk in r: f.write(chunk)

import requests url_img = "http://i.siteapi.org/COV_B9cM9ppXxTEH0Ce3EnHtiDg=/fit-in/1024x/top/f1ca8c691ed28c2.ua.s.siteapi.org/img/t3l7lq22wf4gwgcgw00co0408s8c4k" r = requests.get(url_img, stream=True) if r.status_code == 200: with open("path.jpg", 'wb') as f: for chunk in r: f.write(chunk)

спасибо за помощь!

ну так тоже не помогает)

ERROR: S client not available

ну так тоже не помогает)

Вообще, не на всех сайтах так можно.(( Я так и не придумал, как ещё можно.

для себя привел к такому виду url_img = "http://i.siteapi.org/COV_B9cM9ppXxTEH0Ce3EnHtiDg=/fit-in/1024x/top/f1ca8c691ed28c2.ua.s.siteapi.org/img/t3l7lq22wf4gwgcgw00co0408s8c4k" logo = urllib.request.urlopen(url_img) format_img = logo.info()["Content-Type"].split('/')[1] file_name = str(url.split('/')[-1])+'.'+format_img r = requests.get(url_img, stream=True) if r.status_code == 200: with open(file_name, 'wb+') as f: for chunk in r: f.write(chunk)

?

Вообще, не на всех сайтах так можно.(( Я так и не придумал, как ещё можно.

то есть получается на всех сайтах можно как то залогинится через requests? и придется все таки расчехлять selenium\scrapy?

?

там форматы картинок один jpg, другой jpeg, третий png. нужно сохранить форматы картинок

то есть получается на всех сайтах можно как то залогинится через requests? и придется все таки расчехлять selenium\scrapy?

Не уверен, что на всех можно, видимо, толбко селениум. Печаль. Сам долго искал варианты.

то есть получается на всех сайтах можно как то залогинится через requests? и придется все таки расчехлять selenium\scrapy?

На некоторых сайтах в формах есть CSRF токен. Тогда перед логином надо будет гет запросом забрать страницу с формой и вставить токен в последующий пост-запрос.

На некоторых сайтах в формах есть CSRF токен. Тогда перед логином надо будет гет запросом забрать страницу с формой и вставить токен в последующий пост-запрос.

так и сделано. но это не помогает(

там форматы картинок один jpg, другой jpeg, третий png. нужно сохранить форматы картинок

r.headers.get('Content-Type').split('/')[1]

так и сделано. но это не помогает(

Надо не за селениум хвататься, а в консоль браузера смотреть и отлаживать запрос.

не делать же запрос ради типа картинки же

как это так

Надо не за селениум хвататься, а в консоль браузера смотреть и отлаживать запрос.

весь вечер сижу в консоли браузера) все уже перерыл. может подскажите куда копать там?

весь вечер сижу в консоли браузера) все уже перерыл. может подскажите куда копать там?

https://t.me/roboxv/22

Переносишь запрос в постман и добиваешься того, чтобы он работал там.

не делать же запрос ради типа картинки же

исправил. спасибо! ?

А еще аутентификация может состоять из нескольких запросов. Первый дает токен, вторым запросом надо повышать себе привелегии. Например. Короче, премудростей много существует. Отгадывать все это нет смысла. Надо смотреть в консоль и отлаживать.

А еще аутентификация может состоять из нескольких запросов. Первый дает токен, вторым запросом надо повышать себе привелегии. Например. Короче, премудростей много существует. Отгадывать все это нет смысла. Надо смотреть в консоль и отлаживать.

в консоли постмана вы имеете в виду?)

в консоли постмана вы имеете в виду?)

Браузера

ну в браузере я уже все перерыл и не понимаю, что я еще могу найти

ну в браузере я уже все перерыл и не понимаю, что я еще могу найти

Ну ты видишь запрос, в котором передаешь логин и пароль?

Ну ты видишь запрос, в котором передаешь логин и пароль?

да

да

Ну теперь самый примитивный вариант — переноси в постман и попробуй повторить запрос.

ну хорошо, счас попробую

Ну теперь самый примитивный вариант — переноси в постман и попробуй повторить запрос.

ладно у меня получилось таким образом, что в пост запросе в хедере убраны куки. а как теперь это сделать в сессии в requests?

ладно у меня получилось таким образом, что в пост запросе в хедере убраны куки. а как теперь это сделать в сессии в requests?

Получилось авторизоваться в постмане?

ладно у меня получилось таким образом, что в пост запросе в хедере убраны куки. а как теперь это сделать в сессии в requests?

что сделать?

Получилось авторизоваться в постмане?

да

да

В ответ тебе приходит какой-то сессионный токен. В set cookie заголовке, скорее всего. Вот его и подставляй в последующие запросы.

В ответ тебе приходит какой-то сессионный токен. В set cookie заголовке, скорее всего. Вот его и подставляй в последующие запросы.

я чего то не понимаю, а как передать то этот параметр, если он в куках прилетает? он же в сессии должен как то сам автоматом передаться, нет?

я чего то не понимаю, а как передать то этот параметр, если он в куках прилетает? он же в сессии должен как то сам автоматом передаться, нет?

cookies = dict(cookies_are='working') r = requests.get(url, cookies=cookies)`