если её удалить, то при запуске запустится чистый браузер без кешей мешей и прочего мусора что он насобирал при пред запуске

возможно на первых порах тебя он зачекал что ты левый, и по кешу определял

а такие флаги как await page.setCacheEnabled(false); и в аргументах делают кеш с размером = 1 ит.д толком не рабят

у меня остались две проблемы, главная в том, что не могу пройти капчу

пробовал либу, но она решает 2captcha

а у инсты recaptcha гугла

тут как я понял квадратик это фрейм, пытался кликнуть по нему, не удалось

И не кликниш)

Капчу нужно решать чепещ сервис)

Та понял я уже )

Почитай на зенопостер форуме и по сети про анонимизацию. Много вопросов исчезнет. (Сам их софт уже не испольщую т.к. дырявый он)

Мб кто сталкивался с такой же проблемой: https://github.com/puppeteer/puppeteer/issues/6578 Если есть идеи или решение этой проблемы - заделитесь плиз =)

проблема такая

Please wait a few minutes before you try again.

инстграмм

всего один запрос

page.waitForTimeout(2000);

уже 2 сервера поменял

локально все работает с северов хостинга вот такая ошибка

так же другие сайты с хостинга тоже работает

Не думал что ип дц это не лучший вариант?

думал

но какие альтернативы

прокси

я новичок в теме так что пишу сюда

куда копать ?

Чуть левее и вниз

на какой хостинг ставить что ставить на сервер облакочный хост какие есть решения

поставил прокси резидентный в итоге сервер зависает

не выдает ни каких ошибок

но и не отрабатывает

Хехе

requestfailed response error

ни одно событие не дает реакции

прокси проверен и работает но puppeteer не дает реакции

Через прокси работают другие ресурсы?

page.authenticate вот это когда убираю начинает реагировать

Error: Protocol error (Network.getResponseBody): No data found for resource with given identifier

Пост гет?

page.goto(url

гет

page.on('requestfailed вот тут падает

А на компе все норм?

запускаю на сервере

Ну тут думаю сам уже понял

HTTPRequest { _failureText: 'net::ERR_TUNNEL_CONNECTION_FAILED', _response: HTTPResponse { _contentPromise: Promise { <pending> }, _headers: { 'proxy-authenticate': 'Basic realm="proxy"', 'content-length': '30' }, _client: CDPSession { eventsMap: [Map], emitter: [Object], _callbacks: Map(0) {}, _connection: [Connection], _targetType: 'page', _sessionId: '7D4FB5D6816B9B4A0758ECFDB958D1B2' }, _request: [Circular *1], _bodyLoadedPromiseFulfill: [Function (anonymous)], _bodyLoadedPromise: Promise { null }, _remoteAddress: { ip: '', port: 0 }, _status: 407, _statusText: 'Proxy Authentication Required',

понимаю что авторицию просит

но когда ее ставлю вообще нет ни каких реакций

может через заголовки авторизировать а не через page.authenticate

https://github.com/Cuadrix/puppeteer-page-proxy

Попробуй

Error: Response body is unavailable for redirect responses

уже что то

page.setRequestInterception убираю опять зависает

получается что теперь каждый ресурс через прокси идет

все скрипты внешщние стили и тд

page.on('response' уже 300 раз сработал на 1 запрос

Нуда

не пойму что происходит

если на 1 сайте делается 1 запрос - 300 скриптов то пока puppeteer все не прогонит не остановится так получается

ошибка страницы Error: Page crashed! at Page._onTargetCrashed

в итоге

page.on('error'

page.on('requestfailed' 50 раз сработал

все кажись забанили

Please wait a few minutes before you try again.

Бывает)

как победить HTTP 429 Too Many Requests в puppeteer ? page.waitForTimeout(2000);

может есть еще нюансы

page.goto(url, {waitUntil: 'networkidle2'});

TimeoutError: Navigation Timeout Exceeded: 30000ms exceeded

прокси могут забанить ?

естественно

в таком случае каждый раз новый прокси покупать ?

Нет

Не банить просто ее. Сначала я бы на вашем месте начал с сторонних сайтов чтрбы вообще заработало)

сторонние работают

все парсит без проблем и без прокси

с того же самого сервера тот же самый скрипт