Edgar
у тебя url == undefined потому что get запросы не парсятся.
Vlad
倫太郎
Edgar
для этого нужно добавить отдельный middlware
Ivan
Ivan
Ааа
Ivan
Сейчас добавлю
Bogdan
Попробую
https://github.com/GoogleChrome/puppeteer/blob/master/examples/block-images.js
вот пример, вроде, подходящий
Edgar
сначала в консоле напиши npm i urlencoded
Bogdan
или я задачу непонимаю
Edgar
и
Edgar
напиши это после require('express')
Edgar
const app = express()
app.use(express.urlencoded({extended: true}))
Ivan
и
npm ERR! No valid versions available for urlencoded
倫太郎
И что мне делать тогда?
npm i body-parser
bodyParser = require('body-parser')
app.use(bodyParser.urlencoded({ extended: true }))
Ivan
倫太郎
ну тогда должно работать
Ivan
倫太郎
倫太郎
это был первый пункт
Ivan
Да, это я уже понял
Ivan
Хочу чтобы сначала это вообще заработало
倫太郎
и сделай сначала в 1 файле все
Ivan
Потом конечно буду всё исправлять
Alexei
народ, причем тут гет-параметры и bodyParser
Alexei
а urlencoded это для поста
Ivan
Я кажется понял, у меня там юзается router
Ivan
а не app
Ivan
Как мне использовать app из app.js?
Alexei
тебе он кстати вообще нахер не нужен
Alexei
сделай так, чтобы routes/page_css возвращал твою функцию, которую ты передаешь в роут
Alexei
module.exports = (req, res, next) => {
Alexei
типа того
Alexei
а потом в app.get('твой урл', page_css)
Bogdan
Alexei
должно, да. но нахер он тут?)
Bogdan
та сделал и сделал, пофиг) Ща разобраться бы, что не так и что не работает, бо чет я не вдуплю
Alexei
Ivan
Я думал у меня какая то мелкая глупая ошибка
Ivan
А тут уже такие дискуссии
Timoschenko
ребят. а какие тулзы посоветует для стресс тестов под сокеты ?
Alexei
да блин, детектить баги по фотографии та еще радость)
倫太郎
倫太郎
а, стоп
倫太郎
это только у меня так
倫太郎
Timoschenko
хотел заюзать 0x, дак он что то не делает отчет нефига
倫太郎
Alexei
ну а насчет глупой ошибки. а ты 100% уверен, что тебе всегда ?url=foobar подставляется в урл?)
Timoschenko
вообще 0х юзал ктонить ?
Ivan
async еще
Тоже самое. Cannot navigate to invalid URL undefined
Ivan
var express = require('express');
var path = require('path');
var cookieParser = require('cookie-parser');
var bodyParser = require('body-parser');
var page_css = require('./routes/page_css');
const app = express();
// app.use(express.urlencoded({extended: true}))
app.use(bodyParser.json());
app.use(bodyParser.urlencoded({ extended: false }));
app.use(cookieParser())
app.use('/api/v1/page_css', page_css);
app.get('/', page_css);
module.exports = app;
Ivan
var express = require('express');
var router = express.Router();
var pageCSSDecector = require('./page_css_detector')
/* GET page_css listing. */
module.exports = async (req, res, next) => {
try {
var css_response = {};
const url = req.query.url;
const css = await pageCSSDecector.findUsed(url);
css_response[url] = css
res.json(css_response);
} catch (e) {
console.log(e);
}
}
Alexei
const url = req.query.url;
console.log(url);
Ivan
const url = req.query.url;
console.log(url);
> node ./bin/www
'https://www.google.com'
(node:9448) UnhandledPromiseRejectionWarning: Error: Protocol error (Page.navigate): Cannot navigate to invalid URL undefined
Alexei
ну значит урл есть)
Ivan
Это я уже проверял
Ivan
Может я лажанул в самой функции?
Ivan
const puppeteer = require('puppeteer');
module.exports = {
findUsed: function (url) {
return new Promise (async (resolve, reject) => {
var totalCSS = '';
(async () => {
const browser = await puppeteer.launch();
const page = await browser.newPage();
// Enable both JavaScript and CSS coverage
await Promise.all([
page.coverage.startCSSCoverage()
]);
// Navigate to page
//await page.goto('https://www.google.com');
await page.goto(url);
// Disable both JavaScript and CSS coverage
const cssCoverage = await Promise.all([
page.coverage.stopCSSCoverage(),
]);
//for (const entry in cssCoverage) {
// console.log(entry);
// console.log('---------------------------------------------------------')
//}
await cssCoverage.forEach(function(item) {
item.forEach(element => {
totalCSS += element.text;
});
});
console.log(totalCSS);
resolve(totalCSS);
reject('Error!');
})();
});
}
};
Alexei
await Promise.all([
page.coverage.startCSSCoverage()
]);
Alexei
это че за адуха?))
Ivan
Alexei
await page.coverage.startCSSCoverage();
Alexei
раз уж ты взялся за async/await убери все промисы оттуда
Alexei
ну так там 2 промиса, а у тебя один
Ivan
Alexei
и там нету никаких return new Promise
Alexei
(async () => {
вот это нахуя?
Alexei
убирай
Ivan
Ivan
Пока я верну значение, а потом уже отправлял json ответ
Alexei
findUsed: async (url) => {
Ivan
Ivan
Так мне и тот promise убрать?
Alexei
const puppeteer = require('puppeteer');
module.exports = {
findUsed: async (url) => {
const totalCSS = '';
const browser = await puppeteer.launch();
const page = await browser.newPage();
// Enable both JavaScript and CSS coverage
await page.coverage.startCSSCoverage()
// Navigate to page
//await page.goto('https://www.google.com');
await page.goto(url);
// Disable both JavaScript and CSS coverage
const cssCoverage = page.coverage.stopCSSCoverage(),
cssCoverage.forEach(function(item) {
item.forEach(element => {
totalCSS += element.text;
});
});
console.log(totalCSS);
return totalCSS;
});
}
};
Ivan
Подсветило красным скобки в конце
Ivan
предпоследнюю и последнюю