Помогите решить проблему с авторизацией Scrapy в алиекспресс
*помогает*
Проксимов
Tigran
помощь intensifies
denis ⛅️
так, очередной вопрос по мультипроцессингу
denis ⛅️
я могу передать много нампай массивов в процессы без их сериализации?
denis ⛅️
есть идея насчет того чтобы сконкатенировать их в один, разделяя каким нибудь недопустимым значением, передать в multiprocessing.Array и кайфовать
denis ⛅️
но чет конкатенация занятие дорогое
Alex
почему бы тебе просто в мультипроцессинг не передавать нужные данные для обработки?
denis ⛅️
denis ⛅️
сама функция выполняется за наносекунду
denis ⛅️
хотелось бы ее выполнить над большим множеством пар массивов
denis ⛅️
так что процессить маленькие задачи точно не вариант
Alex
я могу передать много нампай массивов в процессы без их сериализации?
a = np.array(...)
a.nbytes
Alex
что мешает замапить файл в память и просто пересылать нужные куски в пул?
https://stackoverflow.com/questions/9964809/numpy-vs-multiprocessing-and-mmap
Anonymous
как добавить сообщение без обложки?
Anonymous
Anonymous
Anton
Nikita
Астанавитесь
Валера
есть сервер aws linux ec2, можно как то установить chrome на нем? типа headless chrome?
Anton
ты о селениуме?
Amaro
Нет в жизни счастья, далеко Питону до Свифта =) Почему первый вариант проходит, а второй нет?
class Шляпа(Exception):
pass
class 🎩(Exception):
pass
Anton
есть сервер aws linux ec2, можно как то установить chrome на нем? типа headless chrome?
ну при запуске есть флаг $ chromium --headless
Anton
в селениуме при запуске можно его использовать или PhantomJS
Anton
а что конкретно нужно сделать?
Валера
а что конкретно нужно сделать?
я хочу научиться ползьоваться headless на выше сказанном серваке- и как я хочу установить драйвера и тд для этого мне дают ошибку связанную с CentOS
Anonymous
Кто-нибудь знает чат дизайнеров(Photoshop, illustrator, indesign)?
Medoed
Есть у меня такое впечатление, дружище, особенно после этого вопроса, что тебе надо в @ru_python_beginners
Tolibjon
Anonymous
можна ссылку?
Anton
я хочу научиться ползьоваться headless на выше сказанном серваке- и как я хочу установить драйвера и тд для этого мне дают ошибку связанную с CentOS
headless это в целом понятие работы ПО без графики, если речь именно о хроме то вот
https://chromium.googlesource.com/chromium/src/+/lkgr/headless/README.md
Валера
headless это в целом понятие работы ПО без графики, если речь именно о хроме то вот
https://chromium.googlesource.com/chromium/src/+/lkgr/headless/README.md
так для использования этого мне нужен сам хром разве нет?
Anton
ну так то да, нужно установить из репозиториев
Anonymous
как получить с
<li><a href="/b/420641"><span style="background-color: #FFFCBB">Властелин</span> <span style="background-color: #FFFCBB">Колец</span>: Братство Кольца</a> - <a href="/a/31093">Джон Рональд Руэл Толкин</a></li>
обычную стрингу
Властелин Колец - Джон Рональд Руэл Толкин
?
Валера
ну так то да, нужно установить из репозиториев
вот- в этом у меня и проблема- когда я пытаюсь найти хоть какой то гайд по установке то все останавливается на этом
Anonymous
Как прописать справку для модуля запускаемого параметром командной строки? Работает сейчас через Argparse.
Anonymous
есть какие-то интсрументы?
Anton
Валера
все что связанное с yum показывает это Cannot find a valid baseurl for repo: CentOS-base
Валера
но вроде yum установлен
Aidar
а что собственно не устраивает? всё правильно же
Aidar
аргументируйте
Евгений
есть какие-то интсрументы?
getitem например. tvoy_stroka[количество символов до Властеник колец: Длинна нужной строки]
Anton
все что связанное с yum показывает это Cannot find a valid baseurl for repo: CentOS-base
мб с зеркалом проблема, больше ничего не пишет?
Валера
yum install chromium ?
если пишу yum то выдает примеры как я могу его использовать но при попытке с ним что то установить выдает выше присланную ошибку
Anonymous
getitem например. tvoy_stroka[количество символов до Властеник колец: Длинна нужной строки]
ну мне нужно так со всеми html)
Anonymous
с разными строками и тегами
Евгений
Ну вы можете покрыть тестами свой код.
Anonymous
google можно для начало спросить
гуглил html.unescape(text), html.escape(text) не так работают, насколько я понял
Anonymous
по-этому спрашиваю тут
Anonymous
стоит искать с BeautifulSoup?
Anton
https://dpaste.de/Tdxq
в CentOS не умею, там по идеи должен быть файл /etc/yum.repos.d/CentOS_Base.repo , посмотри, может зеркало поменяй и перепроверь
Валера
в CentOS не умею, там по идеи должен быть файл /etc/yum.repos.d/CentOS_Base.repo , посмотри, может зеркало поменяй и перепроверь
ну самое страное что он все говорит об CentOS хотя я не трогал эту ОС
Aidar
приведите полный текст задачи, а лучше ссылку
Anton
ну самое страное что он все говорит об CentOS хотя я не трогал эту ОС
еще покажи содержимое /etc/resolv.conf
Anton
создай и заполни содержимым
Anton
nameserver 8.8.8.8
nameserver 8.8.4.4
Anton
кст проверь через nslookup mirrorlist.centos.org
Валера
кст проверь через nslookup mirrorlist.centos.org
я затупил и было уже файл resolv.conf где было options timeout:2 attempts:5
; generated by /usr/sbin/dhclient-script
search eu-west-1.compute.internal
nameserver 172.31.0.2
Anton
оаоаоао шо это такое страшна
Валера
а в мирор лист https://dpaste.de/JikD
Anton
это как раз таки resolv.conf
Anton
Валера
Валера