👑OGURCHIK🖤
'utf-8' codec can't decode byte 0xad in position 4: invalid start byte
👑OGURCHIK🖤
😁
Anonymous
День добрый. Как исправить проблему? https://hastebin.com/iciceyisur.py
Собственно код ошибки Traceback (most recent call last): File "demo.py", line 28, in <module> loop.run_until_complete(main()) File "C:\Users\userr\Miniconda3\lib\asyncio\base_events.py", line 579, in run_until_complete return future.result() File "demo.py", line 22, in main *[run(str(i)) for i in range(100)], File "demo.py", line 18, in run print(f'[stderr]\n{stderr.decode()}') UnicodeDecodeError: 'utf-8' codec can't decode byte 0xad in position 4: invalid start byte
Tishka17
Фигня вопрос
Anonymous
Tishka17
О, найс)
RO всего 1h за то, что ты быстрый
👑OGURCHIK🖤
тишка 2.0
Tishka17
День добрый. Как исправить проблему? https://hastebin.com/iciceyisur.py
Я понятия не имею почему оно решило декодировать в utf-8, это странно. Что ты там вообще такое делаешь?
𝓐𝓝𝓓𝓡𝓔𝓤𝓝𝓞
Есть здесь люди, которые разбираются в строении игр и написании "ботов"(не кликеров). Задача: 1. отслеживать статус gui элементов, например "можно ли нажать кнопку". 2. Непосредственно выполнить действие для кнопки (нажать). За помощь в долгу не останусь)
Some
Доброе утро, может кто нибудь работал с Elasticsearch во Flaskе. Поиск по регулярному выражению. Делаю запрос в консоли, все ок, находит. Делаю во Flaske и не работает, не могу понять причину. ------------------------------------------------------------------------------- curl -XPOST 'localhost:9200/items/_search' -H 'Content-Type: application/json' -d '{"query": {"regexp": {"lot_description": {"value": "Принт.р"}}}}' ------------------------------------------------------------------------------- body={'query': {'regexp': {'lot_description': {'value': 'Принт.р'}}}} app.elasticsearch.search(index='items', body=body) -------------------------------------------------------------------------------
Some
Хотя нет, похоже и в консоли не срабатывает почему-то
Наиль
Здравствуйте, подскажите пожалуйста как можно парсить hh.ru
Наиль
Думаю сделать парсер с помощью Selenium но хотел узнать hh.ru сможет определить ?
Наиль
Control+ c, control+ v
Это слишком долго
Наиль
https://docs.scrapy.org/en/latest/topics/dynamic-content.html
А я думал что Selenium лучше подойдёт для парсинга hh.ru с их ужасной защитой
Андрей
у hh очень параноидальная защита от скрапинга
Андрей
а официального апи автопоисков общедоступного нет
Наиль
Да, мне не нужна рассылка нужно организовать работу сотрудников и чтоб тебе не давали кому попала доступ
Kairat
А у них есть апи ?
Наиль
у hh очень параноидальная защита от скрапинга
Да вот и вожусь и пока не знаю как лучше сделать , на Selenium работает стабильно но задача большая и точно не знаю как это будет работать с резюме, тесты сейчас на вакансиях
Наиль
А у них есть апи ?
Даа, отстой полный
Андрей
у хх есть закрытое апи для поиска резюме, но они его наружу никому не дают, даже крупным компаниям
Наиль
Хорошо, извиняюсь.
Slam!
А вы кто
Наиль
И конечно извиняюсь, но подписку мы оплачиваем. А полноценно и быстро работ не возможности. И плюс сейчас проблема что работники на удаленке и творят с актами всякую хрень тем самым аки банят
Андрей
И конечно извиняюсь, но подписку мы оплачиваем. А полноценно и быстро работ не возможности. И плюс сейчас проблема что работники на удаленке и творят с актами всякую хрень тем самым аки банят
у хх миллион разных платных услуг, но их база резюме - единственное ценное, что у них есть, и отдавать на автоматический парсинг они не будут любой ценой
Андрей
искать вручную - пожалуйста
Андрей
они как смауг на горе золота
Slam!
Первый раз вижу этого админа 🤷‍♂️
Наиль
Честно не помогает. Лучше сделал ограниченны парсер или сайт как удаленный доступ к hh.ru но чисто сайт и страница hh.ru без возможности входа и выхода
Наиль
Но второй вариант не знаю как реализовать
Андрей
Но второй вариант не знаю как реализовать
поставить расширение в браузер, которое скроет кнопки входа и выхода путём вырезания :)
Philipp
Всем привет. Ребят, есть какие-нибудь готовые решения для сериализации в строку путей в словарях через точечную нотацию? Нужно для частичного апдейта полей через $set в motor / pymongo. Пример: { "a": 1, "b": {"c": 2, "d": {"e": 3, "f": 4} } } Если мне в подобном документе надо обновить поле "f" на 42, но при этом не затереть остальные неуказанные поля, я должен вызвать что-то вроде collection.update_one({'_id': _id}, {'$set': updated_fields}), где updated_fields это словарь вида {'a.b.d.f': 42}. Так вот, может есть что-то для подобных вещей без костылирования?
Андрей
Hh.ru банит за расширение,
хз, мне такие случаи неизвестны
Андрей
все сервисы по автоматическому скачиванию резюме юзают расширения
Андрей
А ты не пробовал смотреть есть ли у них API?
у них есть апи для скачивания резюме по айди
Andrey
Dogma
у них есть апи для скачивания резюме по айди
Как и апи для получения вакансий
Anonymous
Я понятия не имею почему оно решило декодировать в utf-8, это странно. Что ты там вообще такое делаешь?
Моя гипотиза в том, что у меня просто винда, а не линукс. Скрипт ломается когда нужно вывести ошибку. Ранее ещё ломался просто во время вывода результата работы, но я кое-что изменил и убрал оттуда кирилицу, все заработало. Может в исключении кириллица... хз(
Dogma
А может в прокладке...
Tishka17
чо
Tishka17
я говорю, странно что в винде decode начинает декодировать в utf-8
Tishka17
ты там никуда руками не лазил?
Julian 🏳️‍🌈
Питон вроде берет системную кодировку, а она на новых виндусах может быть и utf-8
ЕЛЬКИН
Питон вроде берет системную кодировку, а она на новых виндусах может быть и utf-8
Я думаю что нихуя, если ты на кирилической локали сидишь будет тебе 1251 или какая там
Tishka17
cp866
Kel0
Гайз, столкнулся с проблемой импортов if __name__ == "__main__": import poisson # pragma: no cover else: from . import poisson Вот такой вот импорт, получаю ошибку line 4, in <module> from . import poisson ImportError: attempted relative import with no known parent package Как пофиксить?
Ivan
относительные импорты можно делать только в модулях
Ivan
в __main__ нельзя (а точнее в запускаемом файле)
Kel0
в __main__ нельзя (а точнее в запускаемом файле)
Хм, мне надо импортить, не знаешь как можно тогда реализовать?
Ivan
а что ты хочешь сделать?
Alex
это то до чего я додумался
ну попробуй описать исходную проблему.
ЕЛЬКИН
это то до чего я додумался
https://github.com/RigoSex/hashed/blob/master/hashed!.py from os import scandir as scandir from os import chdir as chdir from os import stat as stat from os import getcwd as getcwd from os.path import isfile as isfile from os.path import isdir as isdir from os.path import basename as basename from os.path import dirname as dirname from os.path import split as split from hashlib import blake2b as blake2b
Kel0
Проблема такова. Есть скрипт в котором дохера мат. функций и вычислений. при запуске этого скрипта 100 раз time python script.py Время выполнение ощутимое. Надо как то ускоить скрипт. Подумал будет хорошей идеей сделать из pyhton -> cython Но заимпортиьь функций не могу
ЕЛЬКИН
Импортируешь только то что используешь, если считаешь килобайты памяти
Alex
в каком месте это помогает экономить память?
Alex
открою для тебя секрет. с точки зрения потребления памяти from os import scandir as scandir не отличается от import os вообще никак.
ЕЛЬКИН
Он всегда загружает целиком и меньший scope ничего не дает?
Kel0
Вообще по факту надо просто ускорить код. Есть предположение что тормозит скрипт из за scipy.stats.distributions.poisson._pmf
Alex
какой еще нахрен "меньший scope"?
ЕЛЬКИН
👀ты успокойся главное
Alex
👀ты успокойся главное
у меня аллергия на долбоебов, дающих некомпетентные советы.
ЕЛЬКИН
Давай их сам тогда
Kel0
Парни, не забывайте про меня((
Alex
запуск скрипта в питоне из-за импортов может быть дорогим. но тебе нужно выяснить во-первых это ли узкое место.
Alex
прежде чем что-то оптимизировать неплохо бы локализовать проблему, вместо тыкания наобум "а вот захерачу-ка я это в cython, авось чего выйдет".