немного скидончиков после падения телеги

Не касса24 случаем?

Хорошее обновление, парсит долше чем лягушка, но больше на 8гигах ОП уже 600K перешагнула)

Не касса24 случаем?

Нет нет, а с чего Вы взяли что касса24?)

Пригласили туда на аудит оптимизации :)

Совпадение походу )))

Хорошее обновление, парсит долше чем лягушка, но больше на 8гигах ОП уже 600K перешагнула)

обещали наоборот быстрее, Но я еще не тестил. может как раз поставлю нетпик

25 000 предпринимателей как бы да! ;)

У них как раз один "господин-М" выступает и под него же лендос сделали. Вот нереально совпало все просто

Обнова только на Винду... Все на Винде сидят?(

Хорошее обновление, парсит долше чем лягушка, но больше на 8гигах ОП уже 600K перешагнула)

да они зажрались, пошли они в жопу)

обещали наоборот быстрее, Но я еще не тестил. может как раз поставлю нетпик

Я тоже читал о этом, вторые сутки парсинга пошли посмотрим спарсит весь сайт или нет)

Я тоже читал о этом, вторые сутки парсинга пошли посмотрим спарсит весь сайт или нет)

лям качаешь?

Хорошее обновление, парсит долше чем лягушка, но больше на 8гигах ОП уже 600K перешагнула)

там проксей можно списком закинуть, будет быстрее парсить

Олимпийский закроют на реставрацию на несколько лет. Это последняя амо в Олимпийском. :)

на самом деле скорость очень зависит от сайта. у меня был один поциент, который больше 3 урлов в сек не давал в принципе. вот хоть убейся

там проксей можно списком закинуть, будет быстрее парсить

ну я 10 потоков тяну, больше не разрешают)

Олимпийский закроют на реставрацию на несколько лет. Это последняя амо в Олимпийском. :)

вот тем более нечего там делать

лям качаешь?

предположительно 10 лямов, а там посмотрим)

предположительно 10 лямов, а там посмотрим)

ну может неделю будешь парсить

предположительно 10 лямов, а там посмотрим)

хотя не. 6 лямов только за неделю при таких скоростях вытащишь

получается не меньше 13 дней парсить

Народу будет в 2 раза больше чем в прошлый раз :) жесть обеспечена. После реставрации Олимпийского думаю будет лучше с логистикой.

ну может неделю будешь парсить

если ей оперативы хватит и жесткого диска то посмотрим, может недели 2 надо будет. Но лягушка на эттом этапе суммарно перезаписала мне на ssd 2Tb. и база весила 200gb. Вывод лягушка по железу очень дорого стоит

Народу будет в 2 раза больше чем в прошлый раз :) жесть обеспечена. После реставрации Олимпийского думаю будет лучше с логистикой.

еще там не в самом олимпийском логистика, а например замутить афтапати штоб - это надо куда-то далеко идти, потому что близлежащие кафе будут забиты и их мало

если ей оперативы хватит и жесткого диска то посмотрим, может недели 2 надо будет. Но лягушка на эттом этапе суммарно перезаписала мне на ssd 2Tb. и база весила 200gb. Вывод лягушка по железу очень дорого стоит

ничоси лягуха разошлась. у мен ялфм в 16Гб оперативы укладывался. и 5гигов проекта. на сторадже не хочу парсить - он очень торомозной потом даже на ссд

Ура

Заработал ?

ребята не тыкайте кнопки в строке ввода, это глючил бот :(

гугл трясет пока что, подождать надо.

а что это за программа

#вопрос Есть сайт хотим на него поставить геолокацию и выдавать title с указанием города откуда человек. Вопрос как на это отреагирует Яша и Гугл и отреагируют ли вообще ??

гугл трясет пока что, подождать надо.

Надеюсь. Просто по такому падению кажется что он и дальше будет падать

а что это за программа

топвизор

Надеюсь. Просто по такому падению кажется что он и дальше будет падать

ну ссылочками подгоните и нормас

спс

Хорошее обновление, парсит долше чем лягушка, но больше на 8гигах ОП уже 600K перешагнула)

Дмитрий, у нас, в отличие от лягушки, можно всё настраивать – что парсить, что учитывать, что не учитывать)) по скорости во всех тестах у нас скорость лучше на больших сайтах. Очень важно, что лягушка парсит быстро только вначале, а потом умирает - это их неудачная архитектура программы не позволяет делать иначе. А последняя их обнова - это вообще не очень сильно понятная штука: вроде как это должно было стать улучшением, но по нашему последнему исследованию этого не скажешь))))

Тоже по гуглу вопрос, сайт переехал на https уже полгода как, у Янлекса все отлично, Топвизор по гуглу показывает, что в выдаче http "переобход" в search console не помогает, подскажите, как быть??

ничоси лягуха разошлась. у мен ялфм в 16Гб оперативы укладывался. и 5гигов проекта. на сторадже не хочу парсить - он очень торомозной потом даже на ссд

Если понять, какие параметры нужны и только их парсить, то можно и на 16 ГБ оперативы круто уложиться у нас))

Сегодня затестил тяжелый сайт, (30к урлов), 3.0 протестила оч быстро (15 мин), лягушка сканит такое больше 40 мин)

но интерфейс и юзабилити мне понравилось в пред. версии

ERROR: S client not available

и есть пару багов, но думаю пофиксят)

Сегодня затестил тяжелый сайт, (30к урлов), 3.0 протестила оч быстро (15 мин), лягушка сканит такое больше 40 мин)

угу, вот это обычная ситуация!)

Тоже по гуглу вопрос, сайт переехал на https уже полгода как, у Янлекса все отлично, Топвизор по гуглу показывает, что в выдаче http "переобход" в search console не помогает, подскажите, как быть??

у гугла вроде отдельные требования были по переезду

если память не изменяет

но интерфейс и юзабилити мне понравилось в пред. версии

больше нравилось в предыдущей версии? блин, мы наоборот перешли к стандартным Windows-приложениям :(

и есть пару багов, но думаю пофиксят)

о багах отписались в саппорт-чат?

в процессе :)

о багах отписались в саппорт-чат?

а скидончики за багрепорт есть?

больше нравилось в предыдущей версии? блин, мы наоборот перешли к стандартным Windows-приложениям :(

интерфейс сейчас на SiteBulb похож :)

а скидончики за багрепорт есть?

ха-ха)) бывает так, что баг – это на самом деле не баг, а проблема на сайте: мы уже миллион раз с таким сталкивались)) а если реально дырка найдена, я уверен, что мы что-то придумаем по скидке)) а вообще больше 30% скидки мы не дадим, потому лучше пользоваться тем, что есть сейчас ?

Дмитрий, у нас, в отличие от лягушки, можно всё настраивать – что парсить, что учитывать, что не учитывать)) по скорости во всех тестах у нас скорость лучше на больших сайтах. Очень важно, что лягушка парсит быстро только вначале, а потом умирает - это их неудачная архитектура программы не позволяет делать иначе. А последняя их обнова - это вообще не очень сильно понятная штука: вроде как это должно было стать улучшением, но по нашему последнему исследованию этого не скажешь))))

Ну мне нужно все что есть, скорость не особо важна так как 10 млн страниц быстро не спарсить. Лягушка на 32гигах ОП на сайтах до 100 000 хорошо себя показывает. У нетпика нет версии для мак по этому на хорошем железе не могу проверить, а через виртуалку это костыль, тестить приходится на устаревшем PC, но пока он себя отлично показывает)) Версии для мак сильно не хватает

интерфейс сейчас на SiteBulb похож :)

мы разрабатывали этот интефейс, когда Sitebulb был ещё в бета-тестировании)) уж явно на него не ориентировались. Кстати, интересный факт → чтобы пробить 100к урлов в Sitebulb нам понадобилось 2 дня, ибо программа 7 раз крашилась.... вот такие вот вам графики, ребята!)

Ну мне нужно все что есть, скорость не особо важна так как 10 млн страниц быстро не спарсить. Лягушка на 32гигах ОП на сайтах до 100 000 хорошо себя показывает. У нетпика нет версии для мак по этому на хорошем железе не могу проверить, а через виртуалку это костыль, тестить приходится на устаревшем PC, но пока он себя отлично показывает)) Версии для мак сильно не хватает

во-первых, версия на мак уже давно есть; во-вторых, именно 3.0 на мак ещё нет, но к концу лета мы сделаем 3.1 сразу на Мак и Винду, там будет очень всё клёво, с рендерингом JS и другими классными плюшками)

угу, вот это обычная ситуация!)

А что не добавить пожизненный тариф? Подписки это неудобно и невыгодно в целом. Особенно тем, кто нечасто сканит сайты, но этот софт по душе

Всем привет. Подскажите пожалуйста

Есть урлы:

https://kupecheskykurgan.ru/catalog/suveniry/interernye-suveniry/suveniry-iz-razlichnyh-m aterialov/suveniry-iz-polistouna/3034605/ https://kupecheskykurgan.ru/catalog/suveniry/interernye-suveniry/suveniry-iz-razlichnyh-m aterialov/suveniry-iz-polistouna/3034606/ https://kupecheskykurgan.ru/catalog/suveniry/interernye-suveniry/suveniry-iz-razlichnyh-m aterialov/suveniry-iz-polistouna/3034607/ https://kupecheskykurgan.ru/catalog/suveniry/interernye-suveniry/suveniry-iz-razlichnyh-m aterialov/suveniry-iz-polistouna/3034608/ https://kupecheskykurgan.ru/catalog/suveniry/interernye-suveniry/suveniry-iz-razlichnyh-m aterialov/suveniry-iz-polistouna/3034610/

И все ведут на одну и туже страницу.

И такого мусора много. Как быть, как исправить?