Ты и ключ и значение проверяешь?

ахахаха, там crlf

Привет. Есть у кого-нибудь пример Dockerfile с установкой chromium для puppeteer'a?

я делал когда то. На самом деле легче отдельно браузер в докере держать, и отдельно папитир https://hub.docker.com/r/browserless/chrome

а как это вообще работает тогда? можно, пожалуйста, схему в двух словах

папитир может подключаться по ws к любому браузеру запущеному в девтулз режиме. Там в ридми докера хрома есть гайд как подключить папитир к нему.

https://chromedevtools.github.io/devtools-protocol/tot/Browser/#method-setWindowBounds

А хотя там не возможно указать координаты

Возможно, через Bounds.

await browser._connection.send('Browser.setWindowBounds', { bounds: {windowState: 'minimized'}, windowId }) делается так но там координаты ни как не укажешь

Похоже что у нас разная документация. :)

Но координатов нет=)

await browser._connection.send('Browser.setWindowBounds', { bounds: {windowState: 'minimized'}, windowId }) делается так но там координаты ни как не укажешь

const client = await page.target().createCDPSession(); await client.send('Browser.setWindowBounds', { windowId: 1, bounds: { left: 0, top: 0, width: 200, height: 200, }, });

const client = await page.target().createCDPSession(); await client.send('Browser.setWindowBounds', { windowId: 1, bounds: { left: 0, top: 0, width: 200, height: 200, }, });

Почему waitForSelector не видит селектор, хотя из селектора спокойно получаю данные если убираю waitForSelector?

> из селектора спокойно получаю данные если убираю waitForSelector Это как?

Так получаю ошибку TimeoutError: waiting for selector await page.waitForSelector(sel); let text = await page.$eval(sel, el => el.textContent); console.log(text) так не получаю ошибку // await page.waitForSelector(sel); let text = await page.$eval(sel, el => el.textContent); console.log(text)

Вообще странная ситуация, мне кажется ты что-то ещё не учитываешь. Если page.$eval видит элемент, то и waitForSelector должен видеть.

Ребят привет, я через API получаю JSON ответ ("Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/101.0.4951.54 Safari/537.36") Как убрать " " Чтобы было просто Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/101.0.4951.54 Safari/537.36

String.replace(/"/g, '')

Есть что-то лучшее чем кластер? Есть очередь в редисе, нужно постоянно держать несколько инстансов и обрабатывать ее.

String.replace(/"/g, '')

При открытии страницы в обычном браузере около мыши крутится значок ожидания загрузки страницы, чем отслеживать в puppeteer? 1. waitUntil: 'load' 2. waitUntil: 'domcontentloaded' 3. waitUntil: 'networkidle0' 4. waitUntil: 'networkidle2'

значек около мыши это css стили курсора

если он в странице есть всегда и просто сыкрыт то waitFor + visible: false / true

Я бы инжектил в страницу код который бы за этим следил по эвентам если честно

Нашёл такое решение

Советую добавить сюда ещё таймаут с завершением функции, чтобы не повисло бесконечно

Привет. Посоветуйте дешевый прокси

Подскажите, что за ошибка при запуске? { TimeoutError: Navigation timeout of 30000 ms exceeded at Promise.then (/home/sdm/node_modules/puppeteer/lib/cjs/puppeteer/common/LifecycleWatcher.js:107:111) name: 'TimeoutError' }

ok google? https://ourcodeworld.com/articles/read/1106/how-to-solve-puppeteer-timeouterror-navigation-timeout-of-30000-ms-exceeded

дак значит проблема с запуском браузера?

Подскажите, что за ошибка при запуске? { TimeoutError: Navigation timeout of 30000 ms exceeded at Promise.then (/home/sdm/node_modules/puppeteer/lib/cjs/puppeteer/common/LifecycleWatcher.js:107:111) name: 'TimeoutError' }

Всем привет Помогите пожалуйста, как мне написать так, чтобы получить число найденных элементов? например, пытался написать - const read = (await page.waitForXPath("(//div[@class='inventory_item_name'])")).length Но на выходе получаю undefined пытался так - let value = await page.evaluate(read => read.length, read) Тоже самое - undefined вот тестирую на этом сайте - https://www.saucedemo.com/

Всем привет Помогите пожалуйста, как мне написать так, чтобы получить число найденных элементов? например, пытался написать - const read = (await page.waitForXPath("(//div[@class='inventory_item_name'])")).length Но на выходе получаю undefined пытался так - let value = await page.evaluate(read => read.length, read) Тоже самое - undefined вот тестирую на этом сайте - https://www.saucedemo.com/

Всем привет Помогите пожалуйста, как мне написать так, чтобы получить число найденных элементов? например, пытался написать - const read = (await page.waitForXPath("(//div[@class='inventory_item_name'])")).length Но на выходе получаю undefined пытался так - let value = await page.evaluate(read => read.length, read) Тоже самое - undefined вот тестирую на этом сайте - https://www.saucedemo.com/

Привет. Внимательно ознакомься с документацией. Первый метод просто ожидает загрузки ноды

А в evaluate первым аргументом идет селетор, вторым - коллбэк

let sel = '#links'; let arr = await page.evaluate(() => Array.from(document.querySelectorAll(sel, element => element.href)); console.log(arr.length);

спасибо большое но использовать вместе с xpath не выйдет, да?

Если нужно узнать актуальное количество элементов: const items = await page.$x("//div[@class='inventory_item_name']"); console.log(items.length); Если сначала нужно дождаться появления элементов: const xPathSelector = "//div[@class='inventory_item_name']"; await page.waitForXPath(xPathSelector); const items = await page.$x(xPathSelector); console.log(items.length);

Спасибо большое 👍 Буду теперь знать а чтобы не ждать долго ожидания элемента (по умолчанию стоит 30 секунд ожидания), то можно использовать await page.waitForXPath(xPathSelector, {timeout:3000}); ps: написал для новичков

Если элемент уже существует то ждать не придётся. Но если элемент не успеет появиться за 3 секунды, то будет ошибка. Так что обычно нет смысла уменьшать таймаут, кроме случаев, когда ты знаешь что элемента может не быть и ты обрабатываешь этот случай.

let sel = '#links'; let arr = await page.evaluate(() => Array.from(document.querySelectorAll(sel, element => element.href)); console.log(arr.length);

Не хочу быть занудой, но не пишите var и let в местах где мутировать данные не надо(почти везде) это ухудшает понимание чужого кода.

Не хочу быть занудой, но не пишите var и let в местах где мутировать данные не надо(почти везде) это ухудшает понимание чужого кода.

Не хочу быть занудой, но не пишите var и let в местах где мутировать данные не надо(почти везде) это ухудшает понимание чужого кода.

var в принципе писать нынче плохо