Tishka17
я вот просто пытаюсь сделать чтобы оно как-то паралельными процесамми по пару запросов и отсылало
рекомендую почитать про треды, процессы и корутины. Что общего, в чем разница
Ivan
окей, спасибо за советы/ответы, ну вобщем у меня обычный цыкл получился ?😄
Alex
окей, спасибо за советы/ответы, ну вобщем у меня обычный цыкл получился ?😄
в общем-то да с некоторыми незначительными оговорками.
Ivan
понял) спасибо
Anonymous
Всем привет, не подскажете по архитектуре? --- Есть REST API сервер. От обработки запроса вот такой путь: URLResolver REST Servlet Handler --- Нужно сделать права доступа к определенным методам API --- Где именно это лучше сделать (на каком этапе)?
Klim
Добрый день. Нужно написать парсер сайтов и бота под него. Работа проектная со последующей поддержкой и развитием проекта. Удаленно. ТЗ есть, пишите в ЛС. Спасибо!
Anonymous
Есть вариант наследовать сервлет от класса, где будет эта проверка.
Anonymous
Привет ребята, есть вопрос короче надо чтобы регулярное выражение выдавало тру при двух видах ссылок: https://auto.drom.ru/freshautotyumzguzguz/ https://auto.drom.ru/?did=1195256585
Anonymous
Подскажите, буду признателен
Artöm
Для начала используй r''
Artöm
От бэкслешей в глазах рябит
Aragaer
а откуда требование, что это должно быть регулярное выражение?
Anonymous
а откуда требование, что это должно быть регулярное выражение?
я бота пишу, нельзя допустить что бы он левые ссылки пускал
Aragaer
но почему обязательно регулярное выражение?
Artöm
Вроде случай подходящий для них
Aragaer
нет, ведь есть же urlparse
Anonymous
Спасибо, сейчас гляну ка
/home/aleksandr/
Почему мне выплевывает это, вместо html кода?
/home/aleksandr/
просто пытаюсь получить html сайта через requests
Tishka17
это html код
/home/aleksandr/
он совсем не похож на тот, что в панели разраба в гугл
Tishka17
потому что там показывается не хтмл код полученный с сайта, а текущий DOM
Ivan
не курсор, а прям коннект
у меня вопрос созрел, получается если делать коннект каждый раз при вызове процесса так можно и базу положить, у меня тех коннектов получается 1000+
Artöm
Возможно пробелы потерялись. В файл пихни и форматируй
Tishka17
но там чуть сложнее с aiopg
Kirill
Почему мне выплевывает это, вместо html кода?
Если сайт динамический(SPA), то просто не вызвались скрипты и поэтому простая html статика пришла в ответ.
Ivan
ну да, ограничение пошлет
/home/aleksandr/
timeout кинуть чтоли?
/home/aleksandr/
как мне получить код?
Ivan
в aiopg разве нет пула коннектов?
ну вот я юзаю этот пул в каждом процессе
Ivan
хотя я так понимаю мне нужно вынести его за процесс и передать ему параметр loop
Ivan
но там чуть сложнее с aiopg
у меня просто сейчас получилось как-то сделать 1000 коннектов и не положить базу, я просто не могу найти этому обяснение😄
Alex
у меня просто сейчас получилось как-то сделать 1000 коннектов и не положить базу, я просто не могу найти этому обяснение😄
либо у тебя очень толстая база на очень толстом сервере. либо ты просто не получил 1000 реальных коннектов.
Alex
второе более вероятно
Tishka17
aiopg умеет переиспользовать реальные коннекты в БД. Ценой принудительного включения автокоммита
Tishka17
Вот бы мне кто-то рассказал как в нем юзать транзакции
Alex
а вы уже выяснили зачем ему aiopg?
Ivan
😂😂
Tishka17
у меня свой вопрос: как юзать транзакции в aiopg?
Ivan
хотелось просто заюзать новую либу
Ivan
попробовать как сней будет
Tishka17
в смысле как? осторожно.
я просто туплю, и не понимаю фразу While psycopg2-binary asynchronous connections have to be in autocommit mode it is still possible to use SQL transactions executing BEGIN and COMMIT statements manually as Psycopg Asynchronous Support docs . Connection.commit() and Connection.rollback() methods are disabled and always raises psycopg2.ProgrammingError exception.
Tishka17
То есть я просто должен сделать execute("BEGIN") или что?
Tishka17
вот сюда отсылка https://www.psycopg.org/docs/advanced.html#asynchronous-support
Tishka17
With asynchronous connections it is also not possible to use set_client_encoding(), executemany(), large objects, named cursors. удобно блин
Tishka17
никаких блобов и executemany
Богдан
помогите з питоном
Artöm
Где вопрос? Где код?
/home/aleksandr/
Выходит если сайт динамический, мне не получить от туда инфу?
Artöm
Не выполнив сначала тонну жс кода? Не получить
Эльдияр
{940229261: <__main__.User object at 0x7f05a9cb0240>} как посмотреть значения?
Tishka17
значения чего?
Блин
Визуализировать желаешь?
Эльдияр
entry = {} class User: def __init__(self, name): self.account = name keys = ['done', 'plans', 'comments', 'lvlup'] for key in keys: self.key = None chat_id = message.chat.id entry[chat_id] = User(message.text) user = entry[chat_id]
Tishka17
0_о
Эльдияр
ты же знаешь, что твой цикл не имеет смысла?
так в доке написано, я так и делаю
Tishka17
чо
Tishka17
в доке чего?
Vladyslav
Вообщем мне сорока на хвосте принесла, что после requests.get соединение храниться ещё 30 сек. И есть вероятность что в следующий раз я в него-же попаду и следовательно будет быстрее. Правда ли это, и где можно почитать об этом?
Эльдияр
ну выведи user.account
юзер аккаунт это же ключ верно?
Tishka17
чо
Эльдияр
чо
все не ругайся, я понял что делать теперь
Vladislav
Вопрос конечно мало связан с python, но может кто-то использовал в своих работах API для рассылки sms и может посоветовать? (гуглил, их дофига, но взять не понятно какой :) ) Нужен для оповещений, интересует 100%получение смс абоненту.
👑OGURCHIK🖤
🤔опять смс бомбер делают
👑OGURCHIK🖤
никакой фантазии
Vladislav
🤔опять смс бомбер делают
не, мне оповещения для сотрудников, пока смотрю в сторону https://www.mcommunicator.ru/