Я как то работал в конторе, которая делала такую штуку

для телефонов. Вичисляла ботов, которые кликали по рекламе

Ну я думаю все, кто несут убытки от ботов, начинают рано или поздно с ними бороться.

Одно дело когда это просто скрэперы, другое когда спам/скликивание/накрутки и т.д.

Ну тут самые крупный клиент гугл. Хотя им в принципе выгодны скликивания. Поэтому сильно они не ломятся решать проблему

Ну тут самые крупный клиент гугл. Хотя им в принципе выгодны скликивания. Поэтому сильно они не ломятся решать проблему

как раз наоборот. Можно гуглу доказать, что по рекламе кликнул бот, тогда за такой клик не нужно платить. Поэтому по идее гуглу выгодней всего, чтоб ботов не ловили. Но открыто они этого конечно не могут продвигать.

Я так понимаю, что по финалу на сегодняшний день все что можно сделать это притянуть стелс к пупитеру, привязать умные клики (с движение эм курсора мышки без стандартных кликов по элементах). А дальше вопрос фингерпринта, айпишки

как раз наоборот. Можно гуглу доказать, что по рекламе кликнул бот, тогда за такой клик не нужно платить. Поэтому по идее гуглу выгодней всего, чтоб ботов не ловили. Но открыто они этого конечно не могут продвигать.

Так я именно про тоже. Гуглу выгодно не блочить бот клики. По принципу не пойман не вор. Это их деньги. А ты доказывай что это бот траффик

@nazarkk кстати, а ты как-то работаешь с фингерпринтом?

Кроме юзерагента

вот сейчас сделал папку с user-data-dir, и подключил гугл ак туда.

у меня наоборот, проблема не в анонимности. Нужно показать что это реальный пользователь Я, а не скрытый какой то, подозрительный.

Тут выше в чате писали еще про apify. Это стоящая вещь?

самому интересно. Я не пробовал

ухх.. теперь apify проблема сбилдить с помощью webpack-а, когда просто puppeteer был - проблем не было.

Ты там шаманил с apify. Стоит влазить? Увидел плюсы?

маскимально скрыть это apify + puppeteer stealth plugin

Может расскажешь так ли хорош apify по твоему опыту?

Ты там шаманил с apify. Стоит влазить? Увидел плюсы?

я его юзаю так же как и puppeteer, только ланчер - из коробки всякие там вещи есть, но типы так себе проставлены в ts, не все проставлены ...

поэтому не очень понятно кушает конфиг или нет

но всяко я считаю лучше с ним

А что он дает

больше всяких опций из коробки

Какие штуки крутые из коробки

есть доп опции всякие для браузера чтоб скрыть бота

больше флажков всяких

я запарился и сделал, на всякий случай

я запарился и сделал, на всякий случай

поделишься?

есть доп опции всякие для браузера чтоб скрыть бота

Вот это интересно

А apify лаунчится на любом браузере? Я юзаю антидетект удаленно. Он мне дает рандомизацию фингерпринта с коробки

там флажок и можно менять либо chrome или chromium

с firefox там запарсы какие-то

надо не puppeteer использовать а другой пакет, там говорят с этим проще

но у меня pupetter

надо не puppeteer использовать а другой пакет, там говорят с этим проще

Что советуют юзать

https://github.com/jsoverson/hackium

Hackium simulates human behavior for mouse movement and keyboard events, vs moving in straight lines or typing rapidly all at once.

https://bot.incolumitas.com/

Может расскажешь так ли хорош apify по твоему опыту?

Ну он мне помог, но это временно было

Работает как надо. Наверное ошибка в логике была.

Не он мажет иногда

Вот я всё жду когда все сайты, по крайней мере крупные, начнут анализировать движение курсора, нажатия клавиш с помощью ML/AI. Вот тогда и для ботов придётся что-то такое использовать для генерации тех же событий. Вот заживём тогда. 😂

Такое уже есть (Akamai) посмотрите

А apify лаунчится на любом браузере? Я юзаю антидетект удаленно. Он мне дает рандомизацию фингерпринта с коробки

А что за антидетект?

Такое уже есть (Akamai) посмотрите

Akamai это же аналог клаудфлэра? Я слышал в каком-то докладе что они даже порядок заголовков проверяют. Но про AI не слышал. Вот Distil Networks утверждают что чуть ли не всех ботов отлавливают.

Akamai это же аналог клаудфлэра? Я слышал в каком-то докладе что они даже порядок заголовков проверяют. Но про AI не слышал. Вот Distil Networks утверждают что чуть ли не всех ботов отлавливают.

Akamai сейчас топовый во всех отчетах, его не легко обмануть, а если сможешь можешь смело просить десятки тысяч баксов

Там и мышка

Он даже палить порты

Локальные

Ну это понятно. По идее мы должны использовать браузер на той платформе, которую указываем, т.е. подменять бессмысленно. Не получится на линуксе запустить и выдать его за виндоус. Запускаем в хэдфул режиме. Дальше нормальный генератор мышиных движений и подделка отпечатков.

У них останется только вычисление отпечатков, подделку которых можно выявить.

А что за антидетект?

Incogniton

Хм интересно

Есть еще indigo нормальный

Но это не хэдлесс

Фишка в подмене данных фингерпринта

Каждый запускаемый браузер «эмулирует» железо

По факту они все на базе хромиума. Я так понимаю это дело техники запустить браузер с нужными тебе сеттингсами. Чтобы он отдавал детектам нужные тебе данные

Incogniton

Интересно, зачем им 8-ая джава?

Интересно, зачем им 8-ая джава?

Для чего

Для чего

На сайте примечание, что для установки их браузера нужна 8-ая джава.

Не похоже что он на хроме. Какая-то кастомная прослойка видать.

Ну там десктопный софт. Он ранает хром

Управление профилями

Настройками

Сомнительный софт: "антивирус блокирует наш браузер, вы должны добавить его в исключения". 😂

Потому что в сеть лезет

Профили хранятся на удаленном сервере

В облаке

Юзал кто то что то вроде папитира, но прямо в браузере, с клиентского джс, или например в расширениях для браузера? Интересует как раз из расширения.

Юзал кто то что то вроде папитира, но прямо в браузере, с клиентского джс, или например в расширениях для браузера? Интересует как раз из расширения.

Да, но там сильно больше проблем. Если сайт мониторит ботов это вообще не вариант. Но даже если нет, есть свои ньюансы, например многие сайты, на которых SPA (или аналог) не всегда поддаются даже простым действиям. Хочешь нажать кнопку, но она не нажмётся, потому что там своя система реактивности, нужно после "нажатия" ещё вызывать какую-то функцию. Хочешь ввести что-то в форму ввода, та же ситуация. В большинстве случаев оно того вообще не стоит, на мой взгляд. Но если сайт простой, не следит за ботами и т.п. то вполне нормально.

Юзал кто то что то вроде папитира, но прямо в браузере, с клиентского джс, или например в расширениях для браузера? Интересует как раз из расширения.

Tampermonkey делает такое

Кто знает как сделать evalute на стринг ?

Кто знает как сделать evalute на стринг ?

Уточни задачу, пока не понятно.

Уточни задачу, пока не понятно.

Хочу прокинуть внутрь evalute стринг и получить данные типо conts script = "return document.title"; const res = page.evaluate(script): res ( title )

что-то в этом роде

Хочу прокинуть внутрь evalute стринг и получить данные типо conts script = "return document.title"; const res = page.evaluate(script): res ( title )

В документацию заглядывал? )

В документацию заглядывал? )

Да, но не нашёл примера

<function|string>

Лол

<function|string>

Именно! 👍🏻

Да, но не нашёл примера

Но я не пользовался таким способом, код этот откуда-то извне поступает? Или зачем это нужно?

Но я не пользовался таким способом, код этот откуда-то извне поступает? Или зачем это нужно?

Да, делаю АПИ, чтобы через рест можно было скрапить