Aragaer
а как различить где переносы строк?
Aragaer
ну то есть до таблицы тоже может быть куча текста. И после тоже
Aragaer
крч html2text это вот то, что мне надо было
.3gp
soup.find("tr").get_text()
Андрей
Есть колонка в алхимии кор Column( 'id', Integer, Sequence('user_id_seq'), primary_key=True ), Сделал alembic revision --autogenerate и потом накатил миграцию Делаю insert и падает такая ошибка отношение "user_id_seq" не существует Посмотрел миграцию — не генерит DDL для создания сиквенса. Это так и задумано или я что-то не так делаю?
Slam!
Сложны ваши алембики
Андрей
а как миграциями то управлять?
Андрей
https://github.com/sqlalchemy/alembic/issues/73
Oleh Kopyl
у тебя странный телебот, в нем нет такого
Возможно. 100500 Переустановок помогли
Oleh Kopyl
Как засунуть такие куки в Selenium?
Nikolay
через js
Oleh Kopyl
через js
А можно не надо?
Oleh Kopyl
Подскажите что это значит в строке? Выделяет фиолетовым в Sublime Text…
Mykola
Подскажите что это значит в строке? Выделяет фиолетовым в Sublime Text…
%20 это пробел в кодировке ASCII в URL адресах пробел автоматически заменяется на %20
Maxim
можно ли сделать break из сразу 2-х вложенных циклов?
Maxim
Это не ответ
вполне себе ответ
Mykola
Спасибо большое :)
Но да, это действительно не ответ:) не работаю в саблайме, не знаю почему выделяется розовым
Mykola
вполне себе ответ
Не совсем, в этой строке есть %20 и до выделения
Oleh Kopyl
Кто как обходит? Юзая селениум все детектят как робота
Ivan
Кто как обходит? Юзая селениум все детектят как робота
К сожалению, у них жабаскрипты и нужно изучать сурсы фронта
Anonymous
все просто
Maxim
значит ты не должен это парсить
звучит как "имей гордость, не приходи туда, где тебе не рады" :)
Nikolay
Aleks
Кто как обходит? Юзая селениум все детектят как робота
Изучают антидетект , я бы selenium тут не юзал, по мне puppeteer лучше но там надо знать js
Maxim
спасибо, подойдёт :)
Владимир
Кто как обходит? Юзая селениум все детектят как робота
Разве что с two factor identification гугл допускал селениум к своим сервисам летом. Хотя возможно уже ужесточили
Maxim
Но лучше в фукнцию запихать и return
не лучше, кода две с половиной строчки
Владимир
не лучше, кода две с половиной строчки
Функции короткие писать тоже вполне нормально
👑OGURCHIK🖤
Кто как обходит? Юзая селениум все детектят как робота
У Гугла же для всего есть апи. Что там может понадобиться парсить
Anonymous
Неа. Они многое закрыли
а вы в яндексе пользовались апи гугла?
Alex
а как миграциями то управлять?
миграции вообще всегда нужно проверять и писать руками. автогенерация априори не может быть абсолютно корректной и покрывать все кейсы.
Maxim
Функции короткие писать тоже вполне нормально
тут так лучше, IMHO def factors(n: int, with_one: bool=False, with_own: bool=False) -> Dict: remainders = defaultdict(lambda: 0) if with_own: remainders[n] = 1 for p in primes(sqrt(n + 1)): pp = p * p while n in range(pp, n + 1, p * 2): remainders[p] += 1 n = n // p if n < pp: break else: continue break remainders[n] += 1 if with_one: remainders[1] = 1 return dict(remainders)
👑OGURCHIK🖤
а вы в яндексе пользовались апи гугла?
Яндекс это локализорованая обёртка для Гугла
Tishka17
а вы в яндексе пользовались апи гугла?
Хз, я этим не занимался. Скорее всего да
👑OGURCHIK🖤
можно ли сделать break из сразу 2-х вложенных циклов?
Модно эти два цикла засунуть в функцию прямо там. Будет самый раз
👑OGURCHIK🖤
🤔ещё можно переменую и иф переменная: брейк в первый фор
Maxim
а я то думал, почему для остатков и напоминаний отдельных слов не придумали :)
Anonymous
Как проверить, что массив не None
Nikolay
is not NOne
Anton
is not NOne
или if get_img:
Maxim
🤔ещё можно переменую и иф переменная: брейк в первый фор
Да можно вообще while if продублировать в for, но мне так не нравится
Anonymous
is not NOne
спасибо
👑OGURCHIK🖤
Может сперва image = а потом иф?
Anonymous
Anonymous
думал чего это функция дважды вызывается
Oleh Kopyl
[Errno 12] Cannot allocate memory Traceback (most recent call last): File "main_tg_errors.py", line 386, in <module> main(pages_to_scroll) File "main_tg_errors.py", line 66, in main driver = webdriver.Chrome(chromedriver, chrome_options=chrome_options) # , chrome_options=chrome_options – includng options File "/usr/local/lib/python3.6/dist-packages/selenium/webdriver/chrome/webdriver.py", line 73, in __init__ self.service.start() File "/usr/local/lib/python3.6/dist-packages/selenium/webdriver/common/service.py", line 76, in start stdin=PIPE) File "/usr/lib/python3.6/subprocess.py", line 729, in __init__ restore_signals, start_new_session) File "/usr/lib/python3.6/subprocess.py", line 1295, in _execute_child restore_signals, start_new_session, preexec_fn) OSError: [Errno 12] Cannot allocate memory During handling of the above exception, another exception occurred: Traceback (most recent call last): File "main_tg_errors.py", line 394, in <module> errors_file.flush() ValueError: I/O operation on closed file. Чего такая ошибка может быть? Пару недель все норм работало… Как фиксится? driver.close() делаю как положено)
👑OGURCHIK🖤
Потому что селенька говно прожорливое и не умирает
decorator-factory
Можно попробовать увеличить своп, но это какой-то ужасный, ужасный краткосрочный костыль.
Oleh Kopyl
Подскажите плиз как сократить код… Хочу сделать функцию, в которой постоянно печатается одно и то же значение, если я ничего не укажу, но если я укажу два аргумента, чтобы мне печатало два значения вместе.
👑OGURCHIK🖤
В питоне так не делают
Oleh Kopyl
Подскажите плиз как сократить код… Хочу сделать функцию, в которой постоянно печатается одно и то же значение, если я ничего не укажу, но если я укажу два аргумента, чтобы мне печатало два значения вместе.
def write(file, mode="w", content=datetime.now().strftime('%Y %B %d %H:%M:%S')+'\n'): with open(file, mode) as file: file.write(content) По сути вот для этого нужно. Чтобы написать write(filename, “a”, “prepending string”
Oleh Kopyl
В питоне так не делают
То есть придется писать write еще раз?
decorator-factory
(можно, но оно вычислится один раз — во время определения функции)
Dmitriy
(можно, но оно вычислится один раз — во время определения функции)
ну и толку писать логику в дефолтах, это тоже самое как писать логику в контроллере
👑OGURCHIK🖤
То есть придется писать write еще раз?
Тоесть контент = нон. Иф контент == нон: тогда только тело контента
👑OGURCHIK🖤
Ыы
Dmitriy
В дефолтных функциях?
в стандартных значениях, они должны быть всегда невычисляемые и неизменяемые
Oleh Kopyl