Но я не пользовался таким способом, код этот откуда-то извне поступает? Или зачем это нужно?

В JSON даешь скрипт который хочеь запустить, url. И получаешь ответ

В JSON даешь скрипт который хочеь запустить, url. И получаешь ответ

Я такое делал, только по-другому. Мне нужно было не просто evaluate в контексте страницы выполнять, но ещё и в контексте кукловода. Там через eval создаёшь функцию и выполняешь.

Я такое делал, только по-другому. Мне нужно было не просто evaluate в контексте страницы выполнять, но ещё и в контексте кукловода. Там через eval создаёшь функцию и выполняешь.

Не понял, кукловода ?

Не понял, кукловода ?

Puppeteer.

Puppeteer.

А в чём разница ?

А в чём разница ?

Чтобы можно было использовать весь API Puppeteer'а.

А понял

Ну я думаю что пока хватит и так

Возможно дальше надо будет тоже так сделать ъ

Кто подскажет как бороться с такими капчами ?

https://rucaptcha.com/blog/captcha-tiktok

Если там только сдвинуть надо, то можно и самому наверное. Находишь верхние левые углы у обоих пазлов (если рамка у пазлов всегда одного цвета, то думаю нетрудно будет найти), считаешь дельту между ними и сдвигаешь на нужное количество пикселей.

/puppeteer/.local-chromium/linux-869685/chrome-linux/chrome: error while loading shared libraries: libcairo.so.2: cannot open shared object file: No such file or directory

Устанавливаю библиотеки уже устал как всё скачать ?

Устанавливаю библиотеки уже устал как всё скачать ?

сама скачивается

ты может не под той OS сидишь

и файл не видит

сидел под виндой установил npm i

он под винду установил тебе браузер хромиум

а запустил под докером а там linux

и он не видит, скорей в этом ошибка

Лол а почему npm не решает такие проблемы ?

Это ж пиздец

какие?

он качает правильно все. Естественно, что нельзя копировать пакеты для винды на линукс.

🧐🧐 а где спасибо

🧐🧐 а где спасибо

Спасибо

он качает правильно все. Естественно, что нельзя копировать пакеты для винды на линукс.

Не ну он то качает правильно, а мне то что с того? Он же должен быть вроде как cross platform.

бинарник не может быть кросс платформ

тебе надо его под каждую платформу скомпилить

Так а почему бинарник

Я же по новому модули устонавливаю

поэтому в зависимости от платформы он качает нужную

Не ну он то качает правильно, а мне то что с того? Он же должен быть вроде как cross platform.

Он и есть. Но чтоб не билдить каждому локально качает только для платформы

потому что в node_modules - могут быть и бинарники

потому что в node_modules - могут быть и бинарники

ну да но я же не копирую их в докер

я устанавливаю новые

ну да но я же не копирую их в докер

Ну тогда ошибка в чем то другом

если прям в докере делаешь npm i и проблемы, то проблема в чем-то другом

может быть user error 🤷‍♀️

sudo apt install -y gconf-service libasound2 libatk1.0-0 libc6 libcairo2 libcups2 libdbus-1-3 libexpat1 libfontconfig1 libgcc1 libgconf-2-4 libgdk-pixbuf2.0-0 libglib2.0-0 libgtk-3-0 libnspr4 libpango-1.0-0 libpangocairo-1.0-0 libstdc++6 libx11-6 libx11-xcb1 libxcb1 libxcomposite1 libxcursor1 libxdamage1 libxext6 libxfixes3 libxi6 libxrandr2 libxrender1 libxss1 libxtst6 ca-certificates fonts-liberation libappindicator1 libnss3 lsb-release xdg-utils wgetя вот так сделал и теперь работает апхапхах

если не секрет - для чего вам puppeteer? нужен.

sudo apt install -y gconf-service libasound2 libatk1.0-0 libc6 libcairo2 libcups2 libdbus-1-3 libexpat1 libfontconfig1 libgcc1 libgconf-2-4 libgdk-pixbuf2.0-0 libglib2.0-0 libgtk-3-0 libnspr4 libpango-1.0-0 libpangocairo-1.0-0 libstdc++6 libx11-6 libx11-xcb1 libxcb1 libxcomposite1 libxcursor1 libxdamage1 libxext6 libxfixes3 libxi6 libxrandr2 libxrender1 libxss1 libxtst6 ca-certificates fonts-liberation libappindicator1 libnss3 lsb-release xdg-utils wgetя вот так сделал и теперь работает апхапхах

А ты хотел прям хром скачать? Или может докер alpine?

ывахывахывахы

Я докер нашёл как пофиксить

Не мог на wsl запустить

а для чего вам нужен эта программа с хромиум? что пишите - если не секрет? @arthasm

а для чего вам нужен эта программа с хромиум? что пишите - если не секрет? @arthasm

Какая программа ?

а для чего вам нужен эта программа с хромиум? что пишите - если не секрет? @arthasm

Которую я написал ?

ну вы же пишите там что-то, вот пытаетесь ее в докере запустить, вот и спрашиваю, интересно.

Да, делаю АПИ, чтобы через рест можно было скрапить

Выше по чату есть вся инфа )) Я там спрашивал что-то уже

sudo apt install -y gconf-service libasound2 libatk1.0-0 libc6 libcairo2 libcups2 libdbus-1-3 libexpat1 libfontconfig1 libgcc1 libgconf-2-4 libgdk-pixbuf2.0-0 libglib2.0-0 libgtk-3-0 libnspr4 libpango-1.0-0 libpangocairo-1.0-0 libstdc++6 libx11-6 libx11-xcb1 libxcb1 libxcomposite1 libxcursor1 libxdamage1 libxext6 libxfixes3 libxi6 libxrandr2 libxrender1 libxss1 libxtst6 ca-certificates fonts-liberation libappindicator1 libnss3 lsb-release xdg-utils wgetя вот так сделал и теперь работает апхапхах

На будущее, вдруг пригодится кому. У кукловода на гитхабе есть официальный мануал по разворачиванию в докере.

но легче конечно отдельно развернуть browserless/chrome

Подскажите, у кого есть опыт обхода Гугл блокировщика на сайте. На сайте установлена рекапча, обойти её не проблема, но вот Гугл начинает IP блокировать, пробовал через прокси Tor, немного времени работает и затем снова блокируют доступ. Пробовал сторонние прокси подключать, менять их перебором и тоже отлавливают. Прям беда, какая-то.

Ещё вопрос, немного не в тему, кто через какой сервис получает СМС для авторизации на сайте?

Подскажите, у кого есть опыт обхода Гугл блокировщика на сайте. На сайте установлена рекапча, обойти её не проблема, но вот Гугл начинает IP блокировать, пробовал через прокси Tor, немного времени работает и затем снова блокируют доступ. Пробовал сторонние прокси подключать, менять их перебором и тоже отлавливают. Прям беда, какая-то.

У тора ограничено колличество айпи насколько я знаю. Ну и если по айпи блокируют то наверное никак не обойти. Разве что сделать так чтоб вообще не блокировали

Решать капчу)

И брать много прокси

Решать капчу)

Капча решается без проблем, но при заходе несколько раз Гугл ограничивает доступ.

Рейтинг ип низкий

Фри прокси?

И брать много прокси

Пробовал с сотню, один хрен эту сотню быстро блокирует )

100 это мало)

Фри прокси?

Да, пока фри пробовал

Выбрось. И забудь. Если чисто под парсинг купи резиденты на люминати

Выбрось. И забудь. Если чисто под парсинг купи резиденты на люминати

Цены конечно STARTER Residential - $12.50/GB, $500/month

Или мобильные) но там задержки

Здравствуйте ! Пытаяюсь залогиниться в инстаграм через то находит селекторы то не находит хотя прописываю wait for x path, код await page.goto('https://www.instagram.com/accounts/login/', { waitUntil: 'networkidle2' }); await page.waitForXPath('//*[@id="loginForm"]/div/div[3]') await page.type("#loginForm > div > div:nth-child(1) > div > label > input", env.login, { delay: 200 }) //*[@id="loginForm"]/div/div[1]/div/label/input await page.type("#loginForm > div > div:nth-child(2) > div > label > input", env.instapassword, { delay: 200 }) let submitButton = await page.$('#loginForm > div > div:nth-child(3) > button') submitButton.click() в чем может быть дело ?

А id статичные?

А id статичные?

блин , не знаю , вполне могут быть и динамичные ((

Вот это нужно проверить

спасибо !

И привязываться тогда к классам или еще к чему

Id это самый хороший варик но в большом количестве современного фрейма они динамические

😢

если я хочу удостовериться что все элементы которые мне нужны прогружены, достаточно будет написать waitForselector самого нижнего элемента ?

сейчас кажись это будет waitForFunction

при обновлении