у меня по руссязу 2 была) мне простительно

У меня не многим больше. Но потом я исправился.

Забудь. Я Google AdWords парсю.

)) как тогда минимизировать загрузку сайта при парсе?

У меня не многим больше. Но потом я исправился.

мне лень. да и негогда

)) как тогда минимизировать загрузку сайта при парсе?

Больше деталей.

Когда тебя парсят жрутся ресурсы?

Когда тебя парсят жрутся ресурсы?

конечно)

Эт вам, батюшка, свой код оптимизировать надо.

Больше деталей.

можно както мониторить этот процесс - узновать так сказать первым о моменте парса - может есть проги мониторирна специальные?

можно както мониторить этот процесс - узновать так сказать первым о моменте парса - может есть проги мониторирна специальные?

Это я сейчас AdWords парсю, а раньше поисковую выдачу Яндекса собирал, а он и не догадывался, что это бот. А Яндекс очень банить любит.

Это я к тому, что надо не пытаться выявить ботов, а сделать код таким, чтобы он не страдал от наплыва запросов.

Это я сейчас AdWords парсю, а раньше поисковую выдачу Яндекса собирал, а он и не догадывался, что это бот. А Яндекс очень банить любит.

поисковую выдачу можно собирать через гугл таблицы - там фнкцмя есть подобная

Единственное, что есть (было?) у Яндекса - это XML. Но он (был?) платным.

А когда у тебя сотни тысяч поисковых запросов и надо знать позицию сайта по этим запросам, то XML не самое привлекательное решение.

А когда у тебя сотни тысяч поисковых запросов и надо знать позицию сайта по этим запросам, то XML не самое привлекательное решение.

сотни тысяч - и как за ними следить?)

чуваки есть команда``` tail -f error_log``` - я так сморю лог в реальном времени, а можно фильтровать строки, что бы только warning выводился?

| grep warning

| grep warning

спс ман - я тоже нашел в инете - там оказывается много всяких тук с tail есть

молодец

))

правда

я тока начал изучение) не могу понять как завершить эту команду

cd - не помогает

ctrl+c

она в лог пишет что я пигу в консоль

о!!! огромный спс!

я из-за этого 5 раз заново логинился

буду азы мотать на УС

я обычно как то так смотрю 'tail -f /var/log/syslog | grep -v -E "pattern1|pattern2"

зачем watch?

если есть -f

там /

тобишь или или

-n это кол во строк последних

а

обычно бесполезная штука, так как заходя в лог ты знаешь в основном что ищешь

хотя бы тип ошибки

но еще не совсем врубаюсь в вашу конструкцию

так проще

у меня алиасы для работы настроены

я иной раз уже и не вспомню нужную команду

алиасы - это типо команды на одну кнопку?

что то вроде

ну мне еще до этого далеко)

да это чисто вкусовщина

да это чисто вкусовщина

...поправил монокль, стряхнул пепел с сигары...

разница лишь в том, что бы в купе с всякими awk | wc pretty print получить чуть более красивый вывод)

...поправил монокль, стряхнул пепел с сигары...

))))) мне захотелось пенсе в глаз вставить

аля [alias] lg1 = log --graph --pretty=format:'%C(bold red)%h%Creset -%C(bold yellow)%d%Creset %s %Cgreen(%cr) %C(bold blue)<%an>%Creset' --abbrev-commit lg2 = log --graph --abbrev-commit --decorate --format=format:'%C(bold blue)%h%C(reset) %C(bold yellow)%d%C(reset) - %C(white)%s%C(reset) %C(cyan)- %an%C(reset)%C(bold green)(%ar)%C(reset)' --all lg3 = log --graph --abbrev-commit --decorate --format=format:'%C(bold blue)%h%C(reset) - %C(bold cyan)%aD%C(reset) %C(bold green)(%ar)%C(reset)%C(bold yellow)%d%C(reset)%n'' %C(white)%s%C(reset) %C(dim white)- %an%C(reset)' --all lg = !"git lg1"

алиасы для гитхаба :D :D

Коняш, ты уже знаешь что такое монада?

без ответа, вроде моноид в категории эндофункторов :D

я не настоящий сварщик, но по-моему, если ты понимаешь как устроен промис, то понимаешь и смысл монады (приблизительно)

чот зачастили последнее время спрашивать всякие монады, карирование и прочую фпшную штуку

так это ж хорошо

Всем привет. Делаю десериализацию объекта, но проблема в том, что сериализован об был когда его свойства были public, а теперь они protected, и var_dump показывает отличную мешанину из свойств с одинаковым именем. Есть идеи как прозрачно преобразовать сериализованные объекты ?

Это как так получилось?

ну магия google AdWords в свежем апи, они перешли с объектов с доступом к свойствам на работу через герреты\сеттеры

Подпишись и сразу станешь богатым?

Всегда так делаю, подписываюсь, а теперь я самый богатый человек (среди себя)?

Товарищи, наткнулся на одну неприятность, проверяю кратность чисел: $a = 1.19; $b = 0.01; fmod($a, $b) = 0.009, что сильно дохрена, чтобы определенно сказать что они кратны. как грамотно проверить?

ERROR: S client not available

Товарищи, наткнулся на одну неприятность, проверяю кратность чисел: $a = 1.19; $b = 0.01; fmod($a, $b) = 0.009, что сильно дохрена, чтобы определенно сказать что они кратны. как грамотно проверить?

можно так:

$a = 1.19 * 1000; $b = 0.01 * 1000; echo fmod($a, $b) / 1000;

(напомнило мне еблю в байты на микроконтроллерах)

как вариант. решил проблему с помощью bcdiv

тоже верно, только хотел предложить использовать математику с произвольной точнатью

$a = 1.19 * 1000; $b = 0.01 * 1000; echo fmod($a, $b) / 1000;

для более точного результата первые две операции перевести в целое, нижнюю округлить до 3 знаков

некий аналог произвольной точности будет

господа, хэлпаните с modx. создал дополнительный контекст, и в нем создал ресурсы на английском языке, но открыть их не получается. нужно, чтоб к этим англ страницам можно было достучаться через такой запрос: /en/ + alias, какой указан в ресурсе подкаталог для сайта не нужен. шаблоны, css, js - должны остаться такие же как в контексте web

Коллеги, привет! Есть тут кто пользуется API Blockchain'а? Там говорится о лимитах на генерируемые адреса (https://blockchain.info/api/api_receive). Я кое что не понимаю, так как у меня слабый английский. As defined in BIP 44, wallet software will not scan past 20 unused addresses. Given enough requests from this API that don't have a matching payment, you could generate addresses past this horizon, which would make spending funds paid to those addresses quite difficult. For this reason, this API will return an error and refuse to generate new addresses if it detects it would create a gap of over 20 unused addresses. If you encounter this error, you will either need to switch to a new xPub (within the same wallet is fine), or receive a payment to one of the previous 20 created addresses Это же не значит что мой сервер не получет коллбэк от блокчэина, если есть больше 20 неоплаченных адресов. Да? И можно ли получать биткоинов несколько раз на один и тот же адрес?

Ребята?

Как продиктовано условиями BIP44, программное обеспечение кошелька не сканирует более 20 неиспользуемых адресов. API покажет ошибку, отказываясь создавать новые адреса, если более 20 из ранее созданных адресов не были использованы. Если вы столкнулись с этой ошибкой, вам придется либо перейти на новый xPub (в том же блоке blockchain.info), либо начать получать платежи на один из ранее созданных неиспользуемых 20 адресов

Ребята?

Информация отсюда: https://bit.news/kak-nachat-prinimat-platezhi-v-bitkoine-na-vashem-sajte/

господа, хэлпаните с modx. создал дополнительный контекст, и в нем создал ресурсы на английском языке, но открыть их не получается. нужно, чтоб к этим англ страницам можно было достучаться через такой запрос: /en/ + alias, какой указан в ресурсе подкаталог для сайта не нужен. шаблоны, css, js - должны остаться такие же как в контексте web

а зачем тебе контекст, делай все в ресурсах

Информация отсюда: https://bit.news/kak-nachat-prinimat-platezhi-v-bitkoine-na-vashem-sajte/

Значит если я генерирую более 100 неиспользованных адресов, я всё равно получу коллбэки и биткоины. Я правильно понимаю?

а зачем тебе контекст, делай все в ресурсах

хочу проверку текущего языка по нему сделать

иначе с переключалками и автосозданием страниц топорненько будет

хочу проверку текущего языка по нему сделать

для этого можно сниппет сделать, пусть определяет язык

по контекстам не подскажу, не работал с ними

Значит если я генерирую более 100 неиспользованных адресов, я всё равно получу коллбэки и биткоины. Я правильно понимаю?

Такое поведение можно контролировать с помощью gap_limit в качестве дополнительного параметра URL. Это не приведет к увеличению числа адресов Биткоина, которые могут отслеживаться серверами Blockchain.info. Добавление параметра gap_limit изменяет максимально допустимый предел, до которого API больше не будет генерировать новые адреса

для этого можно сниппет сделать, пусть определяет язык

а как можно сделать, чтоб клиент не тупил, когда новые страницы создавал?

Значит если я генерирую более 100 неиспользованных адресов, я всё равно получу коллбэки и биткоины. Я правильно понимаю?

тут описано что можно указать лимит адресов

Такое поведение можно контролировать с помощью gap_limit в качестве дополнительного параметра URL. Это не приведет к увеличению числа адресов Биткоина, которые могут отслеживаться серверами Blockchain.info. Добавление параметра gap_limit изменяет максимально допустимый предел, до которого API больше не будет генерировать новые адреса

Это не приведет к увеличению числа адресов Биткоина, которые могут отслеживаться серверами Blockchain.info Вот это насчет кошелька или насчет коллбэка?

Это не приведет к увеличению числа адресов Биткоина, которые могут отслеживаться серверами Blockchain.info Вот это насчет кошелька или насчет коллбэка?

тут я уже не помощник, так как с блокчейном дела не имел)

тут я уже не помощник, так как с блокчейном дела не имел)

аа понятно )) спасибо за ссылку

смеется

Это я сейчас AdWords парсю, а раньше поисковую выдачу Яндекса собирал, а он и не догадывался, что это бот. А Яндекс очень банить любит.

Поделись опытом, как поисковик парсить?

+

https://habrahabr.ru/company/itsumma/blog/337346/