Чтобы были одинаковой ширины

и фото к одному виду привести

Посмотри тут, что люди пишут: http://stackoverflow.com/questions/11264918/how-to-embed-a-python-interpreter-on-a-website

[last news] A little poem (for fun) /r/Python

Чтобы по ссылке не ходить: Warrior-Poet I'm a Warrior-Poet. A Samurai of the digital-age. My Master is Lord Python Who resides in the Great Mansion of Linux. No other house is good enough for Him. I will slay those who suggest otherwise. I discipline my body and my mind - That I may serve my Master in the way He deserves. My poems are lines of code. Since I was a young boy, my elders have trained me. I must not disappoint them - I must honour them. I'm a Warrior-Poet. A Samurai of the digital-age.

тут спрошу

а подскажите, пож-та, кто scrapy юзает, как правильно его на amazon натравливать, чтоб тот не возбуждался? после 1000+ удачных item'ов говорит 503

скорость особо не важна, можно чтоб не спеша дрючил потихоньку, лишь бы не отваливался

пробовал ставить 1 соединение и задержку в 3 сек - один хрен, отрубает через какое-то время

понятно, что в амазоне не дураки сидят, но может есть какой-то рабочий способ обойти?

посоветуйте биткоин-кошелек?

Coinbase

так может ты каптчу не делаешь?

а подскажите, пож-та, кто scrapy юзает, как правильно его на amazon натравливать, чтоб тот не возбуждался? после 1000+ удачных item'ов говорит 503

с чего решил про капчу: https://www.scrapehero.com/tutorial-how-to-scrape-amazon-product-details-using-python/ if page.status_code!=200: raise ValueError('captha')

о, пасиб, почитаю ща. капчу не делаю, но я думал если капча, то будет тот же 200, только данных не будет

а, может он после неудачной капчи и начинает 503 отдавать

логично бы

пасиб за линк, ща почитаю

хм, из статьи не очень понятно, что дальше. ну допустим капча, ну отвалился мой скрипт, дальше-то что? я думал там напишут, как писать скрипт, чтоб он на капчу не напарывался

хм, из статьи не очень понятно, что дальше. ну допустим капча, ну отвалился мой скрипт, дальше-то что? я думал там напишут, как писать скрипт, чтоб он на капчу не напарывался

Хех, не все так просто Берешь стопишь работу скрипта, присылаешь картинку себе, вводишь капчу, оно отправляет капчу и дальше поехало

сейчас вот хочу попробовать связку tor + polipo, но сомневаюсь что-то

а

а нет под рукой рабочего примера как это делается?

Возможно есть... Щас поищу

был бы признателен

а авито кто парсил? Онвот тодже блочит после некоторых попыток, я как обойти грамотно это еще не разобрался

блочит или капчу показывает?

один раз забанил вообще

блочит вроде только

кстати с амазоном не понятно, как он блочит, скрипту отдает 503, но я тут же браузером захожу и все ок. выходит, не по ip? по ua+ip?

авто так же у меня работал

скрипт блочит, а через браузер норм. Только один раз как-то не мог щайти в браузере, бан был на некоторое время

есть еще вариант shub попробовать

был бы признателен

https://github.com/dimka665/vk/blob/master/vk/mixins.py#L99

могу предложить такой вариант

снова парсить, но все странички сохранять

потом когда выпадет 503

посмотреть предыдущие странички

если там 200+капча - то научиться её находить на странице и выводить ожидание ввода в скрипте

капчи ещё можно перепродавать сервисам, где сидят школьники и за копейки их вводят

если там 200+капча - то научиться её находить на странице и выводить ожидание ввода в скрипте

да, вот так попробую, спасибо!

На днях #Facebook выпустил версию 1.0 своего алгоритма компрессии #Zstandard. По заявлениям разработчиков, он позволяет достичь той же степени сжатия что и gzip, но работает при этом в 5 раз быстрее. https://code.facebook.com/posts/1658392934479273/smaller-and-faster-data-compression-with-zstandard

что думаете?

реализация на сях конечно

Парси через прокси

Ребзюки, а почему если джойнишь результат подзапроса - индексы не юзаются? И как справиться с этим?

>via invite link Вы че пиарите ее?

Ууу

Привет

Ребзюки, а почему если джойнишь результат подзапроса - индексы не юзаются? И как справиться с этим?

если мускуль (да ине мускуль) - то страдать и не делать подзапросов

ну у меня ето анти джойн и я решил проблему так - в хевинге делаю not in

что такое антиджоин

?

это когда ты лефт джойнишь таблицу записей, которые хочешь исключить и потом выбираешь из всего только те, у которых id этой таблицы is null

Правый джойн что ли

Слышь джойн, ты правый или левый? Давай честно, бить не будем

да я вообще не эскюэль пацаны

Друззя, такое дело. Надо собрать джейсон. В модуле json вижу только кодирование в объект и декодирование обратно. Как можно работать напрямую с объектом json, т.е. не строить питоновые конструкции и затем одной командой превращать это в json, а создать объект json и уже в него добавлять элементы? Или никак вообще?

Но зачем?

Ну, мне кажется, это будет красивее. Да и просто интересен альтернативный метод

Если правильным ответом будет "не придумывай ненужной хуйни", я пойму.

ну на мой взгляд будет

Друззя, такое дело. Надо собрать джейсон. В модуле json вижу только кодирование в объект и декодирование обратно. Как можно работать напрямую с объектом json, т.е. не строить питоновые конструкции и затем одной командой превращать это в json, а создать объект json и уже в него добавлять элементы? Или никак вообще?

А как ты себе это представляешь?

Хотя извратиться можно, конечно

А как ты себе это представляешь?

Очень просто - создал объект json и работаешь с данными в нем, как в любом другом питоновом типе.

каждый раз приводишь конвертируешь их тоже в json-совместимые, чтобы удобнее было

Очень просто - создал объект json и работаешь с данными в нем, как в любом другом питоновом типе.

Это всё равно будет питонячий объект, который потом будет рендерится в строку

ну лан.

Мне неудобно читать такой текст

Aaobenno s ashiblami

Ребят. Только познаю питон, пытаюсь работать с базой MongoDB при помощи pymongo Подскажите, как делать update если документ уже есть и insert если его еще нет. Можно это делать как то одной командой, не городя свой велосипед с поиском?

а все нашел, ложная тревога))

Хех, не все так просто Берешь стопишь работу скрипта, присылаешь картинку себе, вводишь капчу, оно отправляет капчу и дальше поехало

Жоска

А кто то за копейки капчи вводит ?, что за бред

Не бред

http://antigate.com/

да я бы даже пробовать не стал такой бредятиной заниматься

Привет, программисты. Такой вопрос, ради интереса, вот некоторые, кто сможет ответить. Почему именно Python?

это надо быть отбитым нищебродом с нулем знаний о чем либо

Как бы это есть и этим пользуются. Брутишь зрень какую-то, через апи отдаёшь капчи сервису, там китайцы вводят и всё ок

Привет, программисты. Такой вопрос, ради интереса, вот некоторые, кто сможет ответить. Почему именно Python?

потомушта гладиолус

это надо быть отбитым нищебродом с нулем знаний о чем либо

http://kolotibablo.com/main/faq

А кто то за копейки капчи вводит ?, что за бред

Между прочим прибыльный бизнес.

Вопрос серьезен, почему вы выбрали питон?

Я думаю на языке питон

Вопрос серьезен, почему вы выбрали питон?

Потому

Вопрос серьезен, почему вы выбрали питон?

Он позволяет мне экономить время. Не набирая тонны кода на Java, когда я могу набрать пару строчек в питоне

Любовь с первого взгляда

/360

не человек выбирает язык, это он выбирает человека

Только на нем пишешь?

Он позволяет мне экономить время. Не набирая тонны кода на Java, когда я могу набрать пару строчек в питоне

Он позволяет мне экономить время. Не набирая тонны кода на Java, когда я могу набрать пару строчек в питоне

+

Мне кажется большинство ответят - экономит кучу времени

Мне кажется большинство ответят - экономит кучу времени

Или "ниасилил".

Только на нем пишешь?

нет, питон не основной язык. Вообще я пишу в основном Oracle Pl\SQL но это с питоном не сравнимо. Для несложных задач в духе распарсить файлики, переложить что-то использую питон. Промышленной разработкой занимаюсь только под Oracle, а питон туда не впехнешь даже если очень захочется