потом отпишись о резулльтатах

Таки работает :)

продвигатор еще )

адвсе неплохо показывает

Таки работает :)

подробнее опиши

Ну я сгенерил кучу ссылок на картинку с параметром типа ?param=1 ?param=2 ?param=3

И тп

подробнее опиши

ребят вы про что?

ребят вы про что?

про https://m.habrahabr.ru/post/215233/

тестирует Дмитрий

Закинул их в ОДНУ табличку гуглдока

И таки да, оно их тянет, не критично, но это простой жипег.

А можно ведь и развить тему ?

а в robots запретил?

Нее это вообще не то

Оно не станет слушать

а ты попробовал?

По сути ты ведь не поисковому боту задаешь задачу качать

Нет, сейчас попробую.

Не стал пробовать.

Погуглил.

Why isn't Feedfetcher obeying my robots.txt file? Feedfetcher retrieves feeds only after users have explicitly added them to their Google homepage or Google Reader. Feedfetcher behaves as a direct agent of the human user, not as a robot, so it ignores robots.txt entries. Feedfetcher does have one special advantage, though: because it's acting as the agent of multiple users, it conserves bandwidth by making requests for common feeds only once for all users.

гуглить одно, а ты пробуй)

Я другое попробовать хочу :)

Этой фигне пофигу картинку вставляешь или ссылку на php файл

Ой, ой, ой.

Представляете что можно делать просто сгенерив ссылки на WP блог с запросом типа http://mysite.com/?s=test1 http://mysite.com/?s=test2 http://mysite.com/?s=test3 http://mysite.com/?s=test4

Кэш не решает никакой абсолютно

Но можно на nginx легко заблокировать типа: if ($http_user_agent ~* (Feedfetcher) ) { return 403; } либо спец. плагинами.

о ,гуд)

пошел в конфиг вшивать

Но можно на nginx легко заблокировать типа: if ($http_user_agent ~* (Feedfetcher) ) { return 403; } либо спец. плагинами.

у тебя гугл док открыт? можешь проверить?

Уже проверил

мой

GET /index.php?s=test6 HTTP/1.1" 403

Аа, могу конечно

http://arsenkin.ru/

вот

запустил

Дим, завали allintop.ru ;)

?

Угу, а сухарики потом кто принесет.

да какие сухарики? вася вон на меня обещал в суд подать :)

и на шаповала за одно )

Угу

Не мои они.

Это гугл что-то пытается у тебя украсть :)

)

а чё они этот баг-то не пофиксят?

Ну и + таким образом никаких волшебных выгрузок о которых тоже уже писали, заголовков страниц или я не помню что там еще гуглдоками с сайтов выгребали, не получится короче :)

а чё они этот баг-то не пофиксят?

А это не баг, это фича.

ну так же реально легко сайты можно класть

Хабраэффект не баг ведь?

ну так же реально легко сайты можно класть

Не правда, все оно легко блочится.

хабраэффект немного другое

как?

как?

выше привел пример) я для своего сделал)

То был пример для nginx сервера

А для Apache или обычного хостинга вот

# BLOCK USER AGENTS RewriteEngine on RewriteCond %{HTTP_USER_AGENT} Feedfetcher [NC]

И все ?

# BLOCK USER AGENTS RewriteEngine on RewriteCond %{HTTP_USER_AGENT} Feedfetcher [NC]

так погодь. ты ж не блочишь. конд - это только отбор вроде

#интересно как легко и непринуждённо завалить сайт

так погодь. ты ж не блочишь. конд - это только отбор вроде

И в конце еще: RewriteRule ^ - [F] Вроде :)

Апачу просто давно не трогал уже.

ERROR: S client not available

да там денай фром юзер агент сделать вроде

@donchenko так я не понял, получилось получить ддос таким образом?

ну просто картинку выпарсивать типа?

https://yadi.sk/i/Z7fcY1usqdotW Девака про битые ссылки вв справочнике Яндекса

https://yadi.sk/i/Z7fcY1usqdotW Девака про битые ссылки вв справочнике Яндекса

ага . видел :) там просто два слеша кто-то поставил )

Какой халивар из за гугл таблиц?

https://yadi.sk/i/Z7fcY1usqdotW Девака про битые ссылки вв справочнике Яндекса

тоже там находил какой-то косяк. отписывал яндексу в твиттере, сказали что исправят)

@donchenko так я не понял, получилось получить ддос таким образом?

Можно и картинку, а можно и динамику :-)

https://vc.ru/n/sony-for-bots

ну чо погнали 1е число

у нас еще 31-е)

У сони в Японии уже 1

Дык это цп публикует

Можно и картинку, а можно и динамику :-)

динамику какую? ну в общем не получилось сайт так вальнуть. видимо антиДДОС от хостера сработал и заблочил просто бота гугла временно

ghbdtn

привет всем

по всей видимости мои сообщения отправляются

а это значит, что проблема решена

а знаете как я решил проблему?

Я просто ничего не делал.

обычно также продвигают сайты. Просто ничего не делают, а они продвигаются за счет того, что котнтент-менеджер постит контент.

Ну да ладно. Спокойной ночи

простой вопрос по кодировкам есть строка, выглядит она вот так: \xC2\xFB\xE3\xF0\xF3\xE7\xEA\xE0 \xF4\xE0\xE9\xEB\xE0

это windows-1251 с какими-то x-esc-intites как превратить ее в обычный windows-1251?

это windows-1251 с какими-то x-esc-intites как превратить ее в обычный windows-1251?

"Выгрузка файла"

"Выгрузка файла"

Ага

Я только не понимаю, что такое x-esc-entities

И как от них избавиться, чтобы получить обычныйwindows 1251

string html_entity_decode ( string $string [, int $flags = ENT_COMPAT | ENT_HTML401 [, string $encoding = ini_get("default_charset") ]] )

?

string html_entity_decode ( string $string [, int $flags = ENT_COMPAT | ENT_HTML401 [, string $encoding = ini_get("default_charset") ]] )

Что этот код делает примерно?) Я просто не на рнр пишу