
Vitaliy
22.10.2016
19:39:34
Ну было бы рентабельно - не было бы и кк

nekto
22.10.2016
19:39:36
учитывая текущий функционал кк - нет смысла
проще делать сервисы с каким то углубленным функционалом конкретных штук

Google

nekto
22.10.2016
19:40:18
а ты говоришь про рынок
рынок это бизнес, вот с позиции бизнеса это не рентабельно
всмысле не рентабельно делать новый клон кейколлектора

Дмитрий
22.10.2016
19:48:16
Пользуется кто-нибудь мониторингом пощицтй сайта в ya и гугле?

Сергей
22.10.2016
19:48:28

Дмитрий
22.10.2016
19:48:47
Видел продают xml лимиты для этого теперь...

Сергей
22.10.2016
19:49:14
Да пофиг, сервисы удобнее

Дмитрий
22.10.2016
19:49:15
И говорил мне кто то что мол мониторить позтции теперь бессмысленно

Андрей
22.10.2016
19:49:28
да уж давно продают

Евгений
22.10.2016
19:49:29
я тут решил блог снимать

Дмитрий
22.10.2016
19:49:39
Гугл выдачу вовсе отдает в зависимости от предпочтений

Евгений
22.10.2016
19:49:40
ясно не дает вставлять

Дмитрий
22.10.2016
19:49:57
И типа поэтому смысла мониторить нету

Google

nekto
22.10.2016
19:50:07
ну да

Dmitry
22.10.2016
19:50:13

nekto
22.10.2016
19:50:15
потому что мониторить надо продажи :3

Natasha Za
22.10.2016
19:50:42

Дмитрий
22.10.2016
19:51:32
Ну продажи и звонки мониторить метрикой и внутренней админкой, это понятно
Меня именно про позиции в ПС интересует. Надо ли это?

nekto
22.10.2016
19:51:57
я не делаю
мне пофиг

Дмитрий
22.10.2016
19:52:02
Или просто лишняя строка в сео отчете

nekto
22.10.2016
19:52:09
просто делаю норм контент, юзабилити и этого достаточно

Дмитрий
22.10.2016
19:52:22
Я тоже

nekto
22.10.2016
19:52:26
для тех кто работает в компаниях сеошником это отчетность, да

Дмитрий
22.10.2016
19:52:31
Мне нужно систему мониторинга сделать
Ya мониторю через xml и там совпадает выдача
В гугле тоже есть апи, но вот проблема, позиции не совпадают.
Хотя есть сервисы, которые выдают верную страницу на которой сайт.
Откуда они данные берут?

nekto
22.10.2016
19:53:47
надо исходить из цели
зачем тебе это надо

Дмитрий
22.10.2016
19:53:59
Парсинг + антикаптча?

Google

Дмитрий
22.10.2016
19:54:38
Мне - как и написал, просто лишняя строка в отчете сео..

nekto
22.10.2016
19:54:47
а ок

Дмитрий
22.10.2016
19:54:48
Некий мониторинг позиций в динамике

Андрей
22.10.2016
19:55:19
topvisor попробуй

Дмитрий
22.10.2016
19:55:28
Пока кроме как парсить сам гугл + антикаптча не нашел.

Сергей
22.10.2016
19:55:35
не понимаю вопроса

Дмитрий
22.10.2016
19:55:39
Может есть какое то др.апи?

Сергей
22.10.2016
19:55:43
есть топвизор, олпозишнс

Андрей
22.10.2016
19:55:55
у вебмастера яндекса есть api

Сергей
22.10.2016
19:56:02
Или речь про 18 млн позиций?

Дмитрий
22.10.2016
19:56:07
Онитс антикаптчей работают?
Нет, речь про 50к сайтов у которых надо мониторить позиции...

nekto
22.10.2016
19:56:44
лол

Сергей
22.10.2016
19:56:56
мониторим весь рунет
да, у каждого тут по 50к сайтов

Дмитрий
22.10.2016
19:57:08
И эти сайты не все в я.вебмастере

nekto
22.10.2016
19:57:17
лучше свое писать
там же пара ключей на каждом да?

Дмитрий
22.10.2016
19:57:45
Вот и спрашиваю какое апи бы использовать..

Андрей
22.10.2016
19:57:48
?

Google

Дмитрий
22.10.2016
19:57:53
До 5 ключей

nekto
22.10.2016
19:57:56
прокси
либо антикапчи

Дмитрий
22.10.2016
19:58:06
Не помогает.

nekto
22.10.2016
19:58:13
с чего это?

Дмитрий
22.10.2016
19:58:19
Прокси блочат.

Андрей
22.10.2016
19:58:22
свое писать. такие объемы не выгодно через когото-то мониторить

Дмитрий
22.10.2016
19:58:39
Если с yandex, то совсем беда

Admin
ERROR: S client not available

nekto
22.10.2016
19:58:44
не уверен что ктото будет мониторить 50к сайтов и это будет стоить адекватно

Дмитрий
22.10.2016
19:58:53
По яндекс пока покупаю xml лимиты

nekto
22.10.2016
19:59:07

Дмитрий
22.10.2016
19:59:12
И это дешевле прокси + антикаптча

nekto
22.10.2016
19:59:14
а ок

Дмитрий
22.10.2016
19:59:53
Сам пробовал с прокси распарсить яндекс, так он очень хитро лочит
Там хмл лимиты в зависимости от времени суток, так вот кол во запросов с одного прокси тоже от времени зависит.
Хедлесс браузером пробовал, все куки добавил - не помогает.
И бросил, покупаю лимиты.. ((

nekto
22.10.2016
20:00:59
с таймаутами игрался?

Дмитрий
22.10.2016
20:01:20
А с гуглом думал возьму апи и пойдет легко как с хмл, а нет..

Google

Дмитрий
22.10.2016
20:01:36
И с таймаутами, и с персональными проксями, и с публичными...
Думаю было перепробовано все..

nekto
22.10.2016
20:02:02
сколько запросов получается при таймауте в 1 секунду?

Дмитрий
22.10.2016
20:02:03
Яндекс куки еще с помощью флеша ставит.

nekto
22.10.2016
20:02:12
и ты ведь рандомные значения делал?

Дмитрий
22.10.2016
20:02:19
Ну это смотря сколько проксей!

nekto
22.10.2016
20:02:19
не фиксированные таймауты?
с одного прокси

Дмитрий
22.10.2016
20:02:31
Все рандомно
И выбор прокси в т.ч
У меня получалось вроде 20 запросов с 1 прокси в минуту
Потом каптча.
А потом то меньше, то больше
Это уже от времени суток зависило.
Бывало что и черещ 5 запросов выдавал каптчу.

nekto
22.10.2016
20:03:54
хм

Дмитрий
22.10.2016
20:03:59
Да, и при запросе с разных проксей разный юзерагент и куки. Не помогает.

Max
22.10.2016
20:04:00
Спасибо
Значок рубля не отображается.

nekto
22.10.2016
20:04:03
похоже гугл тебе не помониторить

Дмитрий
22.10.2016
20:04:13
Почему?
С гуглом таких проблем то нету