а где плюсы

добрый день, подскажите, пожалуйста, через puppeteer запускаю браузер dolphin, не могу получить iframe , возвращает null если запускаю через Chromium c аргументами ('--no-sandbox’, '--disable-setuid-sandbox’, '--disable-web-security’, ) то все работает

Можно ли как-то юзать https proxy в puppeteer?

Если не получится, попробуйте вариант с прокси на самом сервере. Например Tinyproxy.

Проблема в том, что я эти прокси закупил на сервисе и прямого доступа к серверам не имею)))). А имеет ли смысл рассматривать вариант просто купить VPN браузерный и прописать, чтобы при каждом запуске браузер к впну подключался перед выполнением действий основного скрипта?)

Проблема в том, что я эти прокси закупил на сервисе и прямого доступа к серверам не имею)))). А имеет ли смысл рассматривать вариант просто купить VPN браузерный и прописать, чтобы при каждом запуске браузер к впну подключался перед выполнением действий основного скрипта?)

Можно ли как-то юзать https proxy в puppeteer?

Полно примеров видел. Задаешь прокси в настройках браузера без логина и пароля. И делаешь basic-авторизацию: типа: await page.authenticate(proxy);

А как задавать, «вручную» или есть какой-то способ получить https с помощью кода?

У меня есть много прокси такого формата: http://user:pass@ip:port Однако когда указываю один из прокси в —proxy-server, то в итоге получаю http подключение к сайту, а нужно, чтобы было защищенным

как вы получаете http соединение? Открываете в адресной строке https://2ip.ru а вам открывается http://2ip.ru ?

Да

http://2ip.ru не открывается, как у многих уважающих себя сайтов установлен редирект с http на https. Пришлите скрин, бразурной адресной строки, что у вас открывается http://2ip.ru

параллельно, у вас 2ip показывает адрес прокси?

Если у вас не расшаренные прокси конечно 🌚

Есть такие продавцы официальные, что вот такие расшаренные продают)))

Как можно взаимодействовать с расширением из puppeteer?

Как можно взаимодействовать с расширением из puppeteer?

Проблема в том, что я эти прокси закупил на сервисе и прямого доступа к серверам не имею)))). А имеет ли смысл рассматривать вариант просто купить VPN браузерный и прописать, чтобы при каждом запуске браузер к впну подключался перед выполнением действий основного скрипта?)

Вам дельный совет сказали. Есть плагины которые открывают локально делается легко а там хоть в сокс5 пихайте. У вас получится прослойка котоая будет открывать на локал хосте порт до вашего прокси

Hai guys hot to bypass cloudfire using puppeteer i have use stealth mode but is not help any solution? 😢

Use goood proxy

Hai guys hot to bypass cloudfire using puppeteer i have use stealth mode but is not help any solution? 😢

Здравствуйте. Подскажите, можно ли каким-то образом использовать мобильную версию браузера chrome с помощью puppeteer? или подменять в puppeteer значения параметров, например window.performance.memory. Или запустить puppeteer на мобильном телефоне, чтобы использовать браузер chrome на android? С заголовками понятно, что можно подменять, а вот параметры, которые JS собирает, шифрует и отправляет зашифрованными, отличаются в мобильной версии браузера и десктоп версии.

но с чего ты взял что твое управление мобильной версией не детектится

если у нее есть websocket с remote - конечно

Кто может помочь с запуском пупитер кластера )) запускаю простой проект с гет страрта: Node.js v21.6.2 PS C:\Users\Admin\Downloads\pup\pup_clus> node .\index.js ERROR: The process "8952" not found. C:\Users\Admin\Downloads\pup\pup_clus\node_modules\puppeteer-cluster\dist\Worker.js:41 throw new Error('Unable to get browser page'); ^ Error: Unable to get browser page at Worker.<anonymous> (C:\Users\Admin\Downloads\pup\pup_clus\node_modules\puppeteer-cluster\dist\Worker.js:41:31) at Generator.next (<anonymous>) at fulfilled (C:\Users\Admin\Downloads\pup\pup_clus\node_modules\puppeteer-cluster\dist\Worker.js:5:58) at process.processTicksAndRejections (node:internal/process/task_queues:95:5) Node.js v21.6.2

вопрос еще в том на кой черт ему cluster, если никто не мешает открыть несколько браузеров с одного процесса, а они по большому счету с нодой не связаны и эвентлуп не убивают оно же просто процессы спавнит и по WS коннектится к remote dev tools

Я бы с радостью выпилил это гребанный кластер так как он памяти жрет много да еще и не подчищает за собой сессии. за пару часов работы остается мертвых 200-300 процессов

Я бы с радостью выпилил это гребанный кластер так как он памяти жрет много да еще и не подчищает за собой сессии. за пару часов работы остается мертвых 200-300 процессов

taskkill /F /IM chrome.exe /T В кроне задайте или по определённому времени, будет полная чистка)

Sometimes working in headless = false mode helps. To work on a VPS without a GUI in this mode, you can use xvfb

taskkill /F /IM chrome.exe /T В кроне задайте или по определённому времени, будет полная чистка)

Taskkill сделает это разом и сразу же разгрузит систему)))

Тоже вариант, но иногда надо оставить нужные и убить мертвые.

Приветвствую собираю puppeteer в докер и есть установка браузера такой строкой RUN apt-get update \ && apt-get install -y wget gnupg \ && wget -q -O - https://dl-ssl.google.com/linux/linux_signing_key.pub | gpg --dearmor -o /usr/share/keyrings/googlechrome-linux-keyring.gpg \ && sh -c 'echo "deb [arch=amd64 signed-by=/usr/share/keyrings/googlechrome-linux-keyring.gpg] http://dl.google.com/linux/chrome/deb/ stable main" >> /etc/apt/sources.list.d/google.list' \ && apt-get update \ && apt-get install -y google-chrome-stable fonts-ipafont-gothic fonts-wqy-zenhei fonts-thai-tlwg fonts-khmeros fonts-kacst fonts-freefont-ttf libxss1 \ --no-install-recommends работало, сегодня обнаружил ошибку и увидел что сайт откуда тянется репозиторий выдает 404 (http://dl.google.com/linux/chrome/deb/) Как решить эту проблему? Спасибо