Надо начать с того что превратить headless в обычный) скрыть все. Добавить webgl нормальго разрешение и прочее.
Ты так говоришь, когда знаешь ) Что посоветуешь почитать?
Egor
Egor
Потому что пока мой уровень такой, что я могу только пупитир юзать и дергать нужные методы пейджа
Sasha
Везде кусками)
Egor
Egor
Egor
Egor
Egor
Всё красное?
Alex
Egor
ну вот, если этот сайтик задетектил вебдрайвер, то что там про инстаграм говорить )
Egor
Egor
там где ниже еще текста нужно смотреть их?
Игорь
а как это фиксится в puppeteer
Игорь
так
Egor
Решил попробовать быстренько, как видишь получилось
Игорь
инсту парсит ?
Egor
А вот создавать акки новые можно
Egor
Правда всё никак не найду способа пройти recaptcha гугловскую, может кто знает как?
Игорь
попробуй страницу поста загрузить
Игорь
https://www.npmjs.com/package/puppeteer-extra-plugin-stealth это ?
Egor
Попробуй у себя, должно работать
Игорь
можешь скинуть код какие параметры ты пофиксил
Игорь
и то и другое было бы хорошо
Игорь
что то мало инфомации на сайте
Egor
Там 2 строчки кода
Egor
Что там искать?)
Игорь
то есть puppeteer.use(StealthPlugin());
Игорь
и все
Egor
Игорь
Egor
первые строчки возьми просто
Игорь
ок пробую
Игорь
Egor
Игорь
да
Egor
значит неверно
Egor
покажи код
Игорь
puppeteer то есть точно
Игорь
Egor
пупитир екстра надо еще
Игорь
да все увидел
Egor
npm install puppeteer puppeteer-extra
Игорь
Игорь
что тут
Игорь
на скрине результат теста миссинг
Egor
это твой скриншот?
Игорь
мой
Egor
а, все, работает
Egor
миссинг - отсутствует, значит драйвер не видится
Игорь
красный пункт все же есть
Egor
а, я хз
Egor
у меня зеленое
Игорь
спасибо в любом случае
Игорь
Игорь
Игорь
может есть догадки
Игорь
'fb-error-description': '"This endpoint may only be called from an HTTPS Origin."'
Sasha
Видимо с https проблемы
Sasha
Доброго дня. Может кто объяснить local storage и куки обязательно ли их использовать вместе или достаточно 1 куки?
Alex
Доброго дня. Может кто объяснить local storage и куки обязательно ли их использовать вместе или достаточно 1 куки?
это разное, локал сторедж хранилищие key-value, и там есть особенности, это не замена кукам
Alex
Доброго дня. Может кто объяснить local storage и куки обязательно ли их использовать вместе или достаточно 1 куки?
на практике все еще хуже, есть local storage, session storage, cookies, и еще https://javascript.info/indexeddb
Игорь
и еще как можно трафик снизить ? не грузить стили например картинки а чисто js и html ? перехватывать request ?
Alex
Sasha
Можно не все грузить через них)
Suicide Liza
Привет. может знайте почему когда я делаю page.$$ или page.evaluate или page.type фризиться весь page?
Игорь
А что нужно сделать чтобы не все грузить
Sasha
Ловить и грузить через прокси)
Игорь
На события
Игорь
Реквкст
Игорь
Или как
Sasha
А это уже магия).
Игорь
Магия это хорошо но с помощью какой волшебной палочкой