Я когда через aiohttp пытался получить мне тоже что-то про геопозицию писало, загуглил - что-то невалидное типо wp-heopos

Поставь уже fiddler ну.

Поставь уже fiddler ну.

Я через devtools вижу ок

Так вердикт - куки генерит скрипт какой-то?

ASP скорее всего

Ничего ты не видишь, Джон Сноу. :)

там ещё CMS какая-то ебанутая

Ничего ты не видишь, Джон Сноу. :)

А ты?

Я уверен, что у тебя там нет никаких пиздец сложных мудрёных систем. А ты что-то банально упускаешь из виду.

кэп! =)

Если там JS — почисти и еваль через ноду, делов-то. Если JS меняется — тогда ебашишь фингерпринты этих скриптов и евалишь.

Я уверен, что у тебя там нет никаких пиздец сложных мудрёных систем. А ты что-то банально упускаешь из виду.

Сайт говноподелка даунов на цмс, не думаю что они что-то городили Либо асп либо они сломали что-то

Если там пиздец каждый раз новый алгоритм генерируется — ебануться, для такой мелочёвки — хочу посмотреть!

Сайт говноподелка даунов на цмс, не думаю что они что-то городили Либо асп либо они сломали что-то

Так я потому и говорю, что зевнул какую куку которая меняется и всё.

Там же чай не амазон какой. :)

Я тоже хочу такую защиту уметь делать, даже если разрабы сайта такого не делали

Ой, на каждую жопу, знаешь.

прикольно что curl-ом если даже без хедеров вообще - выдается нормальный сорец

я чот только одного понять не могу - какого хера так долго думает питоний. в фиддлере вижу что всё уже пришло - покажи и всё. нет, он молчит и ничего не выводит

то есть получается requests-говно

видимо =)

прикольно что curl-ом если даже без хедеров вообще - выдается нормальный сорец

Лол, а че так?

Лол, а че так?

чо как?

чо как?

Ну я хочу так же

С питона

я понял да

просто меня этот факт взволновал

import urllib.request with urllib.request.urlopen('http://www.kompan-russia.ru/') as response: html = response.read()

бери urllib-овый

это в 3.5

не первый знак уже про requests

Я чаще урллиб старый манкипатчил на легасях, чем риквесты трогал, а чего — с ним головняки уже стали системой?

Я чаще урллиб старый манкипатчил на легасях, чем риквесты трогал, а чего — с ним головняки уже стали системой?

с реквестс - часто беда

да, частенько бывает

Эх. Не получается мультитул.

он видимо при каких-то условиях ждет чего-то в сокет или чтото такое, ладно бы он хоть падал

Слышь. А это.

Принудительно ему запрети кипалайв.

кстати

а короч нормально с урллибом всё пашет

Кипалайв на хуй, стриминг на хуй, хттп0.9 выставить. YaFromWindows95 mode короче.

У меня чот в памяти такое отложилось с каким-то говнопатченным апачем в прошлом году и риквестами.

бля, уже 7 вечера а я ещё трезв

бля, уже 7 вечера а я ещё трезв

Это риквестс виноват.

Зайку бросила хозяйка — уебись об монгу, на-ка.

Кипалайв на хуй, стриминг на хуй, хттп0.9 выставить. YaFromWindows95 mode короче.

И только юзер-агент Mozilla/5.0 (Macintosh; Intel Mac OS X 10_12_0) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/56.0.2924.87 Safari/537.36 выдавал Штирлица...

А я специально куки связываю с проксями и юзерагентами.

> зайку бросила хозяйка какое отличное описание rabbitmq, заебавшего девопсов

=DD

> зайку бросила хозяйка какое отличное описание rabbitmq, заебавшего девопсов

в голос :D

import urllib.request with urllib.request.urlopen('http://www.kompan-russia.ru/') as response: html = response.read()

Пиииздец

И правда работает

Так и aiohttp не работает, пичалька

Придется мультитрединг какой брать и урллиб

Ты пробовал что я сказал?

Ты пробовал что я сказал?

Ща, ищу как кипэлайв обрубить

>>> requests.get('http://www.kompan-russia.ru/') <Response [200]> ЧЯДНТ?!

Зайку бросила хозяйка — уебись об монгу, на-ка.

там же другая рифма

там же другая рифма

Нормально про кролика зашло зато.

олсо то что кто-то не знает про умбрако, не делает её хуевой цмс...

>>> requests.get('http://www.kompan-russia.ru/') <Response [200]> ЧЯДНТ?!

Да ну не

Не работает

печалька

In [1]: import requests In [2]: requests.get('http://www.kompan-russia.ru/') Out[2]: <Response [200]>

=/

Чобля

Вы шутите

ERROR: S client not available

он вроде ж этот код от нас изначально хотел проверить?

он вроде ж этот код от нас изначально хотел проверить?

Да!

Только

Почему у вас работает

Дело в тебе.

потому что у нас нет убитых проксей?

Задумайся уже наконец как ты и чем живёшь по жизни.

потому что у нас нет убитых проксей?

Но-но, у меня каждые тридать минут всё валидируется.

реквестс наверняка смотрит на http_proxy переменную

Так это че второй питон умеет ?

А, думаешь он у меня тухлые взял? =D

Так это че второй питон умеет ?

gevent

эм.... а какая разница в версии?

эм.... а какая разница в версии?

Хочет пацан пороху нюхнуть.

Так нет же прокси на мне

Отвечаю

requests.get('http://www.e1.ru/')

ну-ка покеж

а забавно. 3.5й чтото призадумался

чо, повторил?

requests.get('http://www.e1.ru/')

import requests requests.get('http://www.e1.ru/') <Response [200]>

еще не

бля пацаны(((((((

=DDD

import requests requests.get('http://www.e1.ru/') <Response [200]>

хидер Connection: close сунь

?

хидер Connection: close сунь

s.headers['Connection'] = 'close' s.get('http://www.e1.ru/') <Response [200]>

Python 2.7.12 (default, Nov 19 2016, 06:48:10) [GCC 5.4.0 20160609] on linux2 Type "help", "copyright", "credits" or "license" for more information. >>> import requests >>> requests.get('http://www.kompan-russia.ru/') <Response [200]>

Я выпал...