привет мужики помогите найти ошибку в парсере https://github.com/antauren/parsing/blob/master/weblancer.net.py если задать количество страниц вручную до 8 то ошибок нет

[21:-15]

Не надо так

Не надо так

почему, так я нахожу номер последней страницы - 187, он ее точно определяет

А в чем проблема?

asyncio или multiprocessing, что эффективнее?

А в чем проблема?

ошибка при запуске кода если в коде закоментировать строку 46, где я определяю количество страниц вручную, то будет ошибка если устновить 8 страниц то нет ошибки, если 9 то есть page_count = 9 #если задать количество страниц вручную до 8 то ошибок нет

asyncio или multiprocessing, что эффективнее?

Для чего?

ошибка при запуске кода если в коде закоментировать строку 46, где я определяю количество страниц вручную, то будет ошибка если устновить 8 страниц то нет ошибки, если 9 то есть page_count = 9 #если задать количество страниц вручную до 8 то ошибок нет

У ошибки есть название?

Многопоточный вылидатор работает по TCP

Что такое вылидатор?

У ошибки есть название?

Traceback (most recent call last): File "C:/Projects/weblancer.net.py", line 60, in <module> main() File "C:/Projects/weblancer.net.py", line 49, in main jobs.extend( parse( get_html(BASE_URL + '?page=%d' % page) ) ) File "C:/Projects/weblancer.net.py", line 31, in parse 'categories': categories[0].a.text, AttributeError: 'NoneType' object has no attribute 'text'

Нет там текста

Что такое вылидатор?

Подключается чрез сокет получает данные если все ок то сохранят на диск

Я бы сказал, что threading быстрее будет, но это не точно

Лучше проверь

Я бы сказал, что threading быстрее будет, но это не точно

Почему быстрее?

Нет там текста

на какой то из страниц, например 9, парсер не может заполнить переменную категория ну и как решать, через try except?

ТАм же как бы переключение между ними через тики, а так вообще отдельные процессы

Процессы тяжелее потоков

на какой то из страниц, например 9, парсер не может заполнить переменную категория ну и как решать, через try except?

Не знаю, от задачи зависит

Процессы тяжелее потоков

А можно asyncio с threading одновременно использовать?

Судя по комменту поправил ошибку?

А можно asyncio с threading одновременно использовать?

Зачем?

Ну типо соединения по TCP

У тебя либо несколько потоков с блокирующими сокетами, либо ивент луп с неблокирующими. Зачем их совмещать?

Ну типо соединения по TCP

Имеет смысл асинк использовать для связи с другими сервисами а процессы/треды для внутренней обработки

Помогите плс, ф-ция sort() в питоне какую сортировку использует? ну там слиянием или вставкой или что...

Помогите плс, ф-ция sort() в питоне какую сортировку использует? ну там слиянием или вставкой или что...

http://stackoverflow.com/questions/10948920/what-algorithm-does-pythons-sorted-use

Помогите плс, ф-ция sort() в питоне какую сортировку использует? ну там слиянием или вставкой или что...

https://wiki.python.org/moin/HowTo/Sorting https://en.wikipedia.org/wiki/Timsort

https://wiki.python.org/moin/HowTo/Sorting https://en.wikipedia.org/wiki/Timsort

Timsort что ли это и есть та самая sort() в питоне?

Da

Как строится API для django?

Как строится API для django?

разверни вопрос

django-rest-framework

Вечер в хату. Работаю с selenium, в нем использую > 100 сессий, которые, на данный момент, работают по типу 1 сессия = 1 окно браузера. Есть ли смысл писать такую фичу, типо хранить кукисы сессии, а когда происходит обращение к сессии какой-то, то она запускает браузер, устанавливает свои кукисы, выполняет запрос и закрывает браузер? Много ли памяти сэкономит? или лучше в пользу скорости смотреть?

Ну, если ты работаешь с теми же сайтами, то нормально

Ну, если ты работаешь с теми же сайтами, то нормально

ну сайт один, для него куча аккаунтов, просто вопрос с тем, что лучше: закрывать каждый раз окно браузера и открывать снова или не ебать себе мозг, открыв пару сотен окон браузера?

двести окон браузера одновременно - это цпу и память, одно окно туда/сюда дёргать - это время. И чего у тебя больше, а чего не хватает, ответить можешь только ты сам.

С чего питон изучать начать

написать cloud SaaS

С чего питон изучать начать

Запиненное сообщение в этом диалоге читай

С чего питон изучать начать

Зависит от твоего уровня

Окей, с этим я понял. А в selenium можно использовать прокси с авторизацией через username password? Если да, то покажите пример, пожалуйста

Я читал лунца читал долго а дальше что

На стеке пишут, что нужно какой-то zip делать

Я читал лунца читал долго а дальше что

ливнуть отсюда за лунца

Чего ливнуть?

Ну базару нет он пишет слишком подробно как для даунов

Чего ливнуть?

Лунца

Я читал лунца читал долго а дальше что

Проект

Отсюда..

Окей, с этим я понял. А в selenium можно использовать прокси с авторизацией через username password? Если да, то покажите пример, пожалуйста

Или только пользоваться привязкой проксей к IP?

В интересующей области

Может кто по логике подскажет книгу а то я как понял без логики некуда

Может кто по логике подскажет книгу а то я как понял без логики некуда

Укусъ питона

Пля, да помогите мне лучше ><

Мож кто возьмет меня на стажировку

Буду на халяву писать

Мож кто возьмет меня на стажировку

сыби отсюда, твои сообщения мои мессаджи в жопу спустили и теперь хрен кто мне поможет, а у меня вопрос жизни и смерти

иди пейнт сделай свой, сразу питон весь выучишь

Окей, с этим я понял. А в selenium можно использовать прокси с авторизацией через username password? Если да, то покажите пример, пожалуйста

Повторю

- мне не помогают, значит никому не помогайте!

- мне не помогают, значит никому не помогайте!

Правило всех и каждого в пограмиских группах

- мне не помогают, значит никому не помогайте!

ему уже помогли и сказали что в пине все написано

ERROR: S client not available

...

иди пейнт сделай свой, сразу питон весь выучишь

@ru_python можно тут попробовать

@ru_python можно тут попробовать

спасибо

Я читал лунца читал долго а дальше что

Выбрать направление и опять читать.. Примерно что то получаться начнёт - искать работу.. Сам по себе python это одно, а в любом направлении куча специфичного...

Выбрать направление и опять читать.. Примерно что то получаться начнёт - искать работу.. Сам по себе python это одно, а в любом направлении куча специфичного...

Тс-с-с, а то вдруг начнёт задачки выполнять из книги?

Хотел для себя чисто чтобы автоматизировать рутину парсинг обработку данных и прочее

Как никак вручную шлак всякий делать не вариант нах тогда комп вообще нужен

Хотел для себя чисто чтобы автоматизировать рутину парсинг обработку данных и прочее

Если есть рутина, значит есть задачи, что мешает их выполнять, если синтаксис изучен?

Видать надо логику и алгоритмы подтянуть чтоб в башке порядок был и можно было четко по порядку писать код а не кидаться сразу во все подряд

Видать надо логику и алгоритмы подтянуть чтоб в башке порядок был и можно было четко по порядку писать код а не кидаться сразу во все подряд

Для этого нужно что...?

Идеальный код == миф

Так книгу подкиньте по логике

Так книгу подкиньте по логике

кнут 4 тома

Так книгу подкиньте по логике

Книга всему научит, да?

Да хотя б знать буду куда двигаться как это все грамотно делать

Нужно просто писать. Просто... Писать...

Код

Нужно просто писать. Просто... Писать...

*и читать чужой код

И еще я как понял без знания английского ваще печально будет

*и читать чужой код

Это уже как фича, к умению писать..

И еще я как понял без знания английского ваще печально будет

Сложно. Но это не конец, пациент??

Это уже как фича, к умению писать..

Не совсем.. Говорят чтение чужого кода хорошая практика и помогает улучшить свой код

это уже не python beginners, это уже нахуй python dayns

Да мне 27 почти

Видать мозг не такой шустрый как в молодости

Туго идет

что ты знаешь о старости, мальчик...

Видать мозг не такой шустрый как в молодости

> 27 > в молодости чел, ты просто даун

Даун это тот кто заказывает скрипты примитивные