на это 5 минут тратится, а если и это много, то пишешь скрипт, который поставит твои типовые пакеты

Зачем эти все лишние телодвижения?

чтобы тебе удобнее было ((:

С точки зрения бизнеса никто лишних танцев не оплачивает, сам же сегодня днем писал )

Зачем эти все лишние телодвижения?

Чтобы только прошаренные знали как быстро сайты делать

Мне удобнее, чтоб база была в комплекте и я сразу стартовал ))

С точки зрения бизнеса никто лишних танцев не оплачивает, сам же сегодня днем писал )

так я тебе говорю - пишешь скрипт, который тебе развернет все сам

Так что если тот же кастомтемплейт затянут в ядро и мне не надо будет отплясывать в командной строке вокруг http_host, мне станет еще удобнее ))

не затянут

@Dmi3yy вроде писал, что уже затянули )

ну хз

в ево часто затягивается всякая хрень, а потом мучительно выпиливается ((:

...блейд.

)

Я тут вспомнил, что кложур уже делал когда-то Женя, но тогдв наверное не было проблемы меню построить

Вейфиндер справлялся 🙃

так я не понял, будет из коробки готовый getResources со всеми фильтрами или где? ))

или надо будет тянуть доклистер/дитто ?

или надо будет тянуть доклистер/дитто ?

http://docs.evo.im/03_extras/doclister.html

Самому писать надо будет

Вейфиндер справлялся 🙃

Ну когда-то и лукашенко выборы выигрывал. Дела давно минувших дней ))

впилили а теперь мучительно выпиливаете? ))

А как понять, что скрипт по крону, который например может качать что-то пару суток, до сих пор что-то качает, а не повалился?)

если хостинг нормальный, то он сам порубает такой крон)

если впс, то хоть както можно глянуть по процесам

а проще всего в кроне создавать файл типа stop.txt а в конце его удалять)

и в него писать читабельную дату начала)

ну а так - смотреть в лог крона

Так если я создам старт и скрипт отвалится, он и не удалится, т.е. будет казаться, что процесс идет ))

не, оно отвалится. а ты будешь думать, что он идет)

Я тоже самое и написал )

Т.е. то, что он отвалился я таким методом не пойму

ну там можно командами проверить в

типа service cron status

но эт надо гуглить, ибо линухи, убунты, дебияны, центосы и прочая лабюудень - все по разному)

но почти наверняка у тебя вся инфа по крону будет в var/log/syslog

вот в винде как ни крути - прикольно. журнал открыл кнопу тыкнул - и все сразу видно))

а почему сомнения есть такие? что ты там запускаешь? биткоин майнер чтоль))

Да не, как обычно парсинг сайта миллиона на 2 картинок )

тю, так пиши в текстовый файл результаты)

время и типа содрал 5 картинок)

сразу будет видно, работает или нет

в 8 утра пришел. а там запись стоит в 3 ночи скачал 100500 картинок. сразу будет видно что фсе...

Это на крайний случай ))

ну скажу сразу, что сайт донор тебя забанит полюбасу))

если не будешь ставить паузу между парсингами

ну скажу сразу, что сайт донор тебя забанит полюбасу))

Можно же не на сервер сохранять, а к себе на комп. Под Винду есть wget, запускаешь с ключами, чтобы брал только картинки и в путь

где вы такие сайты находите.... уже года 2 парсю долбаные картинки из скриптов а не с хтмлы)))

надо как-то начинать писать импорты не на пхп

из-за картинок очень много времени просто проебывается

Ну там вопрос не только в картинках, просто от того, что их дофига, процесс может сильно затянуться и не заметишь, как скрипт отвалился ))

из-за картинок очень много времени просто проебывается

import.io

можно еще картинки не скачивать сразу, а просто в базу сохранять путь и все такое

Ставить паузу в 0.3 сек - это уже дополнительно 166 часов паузы на 2 млн картинок ))

и потом натравить отдельный крон раз в минуту

Пути уже есть, теперь надо качать))

wget может качать по списку

Пути предыдущий парсер на питоне написал уже ))

но тут еще проблема что картинки могут битыми быть

wget может качать по списку

wget -i text_file.txt

но тут еще проблема что картинки могут битыми быть

пхп-ой проверить размеры и отсеять битые в отдельный список

Сеошники какие-то эмуляции браузеров питонят, чтоб никто не догадался. Прогресс не стоит на месте )

сеошники питонят? ))

пиздить их палкой

Сеошники какие-то эмуляции браузеров питонят, чтоб никто не догадался. Прогресс не стоит на месте )

силениумом можно такие вещи делать)))) у меня даж неболшой парсер есть )

на 2 млн каждая секунда важна, какая уж тут эмуляция браузера ((:

да и риск большой что забанят типа ддос

Так они напитонили инфы в csv-файлы, в том числе адреса картинок. Теперь надо всю эту беду в сайт превратить на эво )

блять.... парсеры пишут а резалты в цсв кидают.....

ну вот напиши скрипт который запустит кучу вгетов по твоим файлам

Нормально, у яндекса по 400 тыс товаров с отзывами сливают, он не в курсах, не банит )

откуда вообще в этом всем взялся крон

или ты каждый день будешь по два миллиона сливать

откуда вообще в этом всем взялся крон

логично)

Крон раньше делал, но тогда инфы было за раз по 500-1000 товаров. А тут отжалели сразу 450 тыс, вот и думаю, то ли этот подправить, то ли новый делать)

Т.е. файлики киданули, он их раз в час при наличии обработал и дальше спит

Сейчас Макс должен начать втирать за InnoDB и транзакции

==А тут отжалели сразу 450 тыс== я поначалу подумал что рублей)))

Нет, пока товаров))

Ну и там хз сколько к ним отзывов