Nicko
Ща я своему другу позвоню Он придет и всем объяснит как деплоить нужно
Анвар
😂
Nicko
Напиши парсеры отдельно Запускай кроной Сохраняй куда нибудь Пусть боты кушают то, что ты сохраняешь
Pavel
Просто у разных людей разные понятия "Для себя"
Nicko
Nicko
Nicko
А гуи - срань
c
мда
c
писать ботов не на питоне не предлалаги еще
Nicko
Нормальные люди настаивают себе ci/cd в начальной точке с гитом И в конечной с сервисом ( несколькими )
Pavel
Делай нормально и будет нормально
Ты бы мне предложил бота, который форматирует 5 сообщений в день, на купленный сервак ставить?
Nicko
Бесплатно
Nicko
Через год купишь сервер
Nicko
pip install bs4
c
за счет переписывания на язык с меньшим потреблением памяти можно много сэкономить
Pavel
Через год купишь сервер
И зачем мне его надо будет тратить эти деньги, если с этой задачей калькулятор сможет справится?
c
Go, Rust😎
c
абсолютно
c
Rust точно
c
Go хз как
Nicko
То быстрее Это быстрее блять А на хероку деплоят
c
курл
c
обертку написать можно
Nicko
На lua
c
я про плюсы не говорил как бы
Анвар
Возьми aws на год
Кстати насчет этого, после регистрации, мой аккаунт блокировали и просили подтверждения, но я пользовался qiwi картой, и так и не смог получить годовую подписку бесплатно, в прошлом году это канало
c
мамкины девопсы с плюсами не справятся
c
неа
c
Rust сопоставим с крестами
Anonymous
Доброго времени суток, Как спарсить сайт с js элементами?
c
уу, олимпиадники
Анвар
Может надо было настоящие данные писать ?
Все настоящее было, кроме карты, его у меня не было
c
уу, олимпиадники
передавайте привет вконтакти и его ебанутому апи
c
а ты что высрал?
c
не ебет
Anonymous
Делаю get запрос на сервер, получаю исходный код html+js, нужен движок js, или headles браузер, но ничего не получается
Nicko
Nicko
Anonymous
Читани про bs4 и там будет про скрипты
Beautiful soup умеет из JavaScript -> HTML??
c
конечно, чего с фимозником спорить
c
тебе нужен selenium
мб ему нужно посмотреть какие запросы отправляет фронт
Nicko
Beautiful soup умеет из JavaScript -> HTML??
Если у тебя на странице есть теги со скриптами и ты понимаешь, как это работает, мб получится
Anonymous
SetazeR
Headless-browser?
насколько я понял из твоего запроса
Nicko
А если там действительно какие то действия, то же Ты прав, нужен селениум
SetazeR
ты хочешь парсить страницу после того как весь js на ней отработал?
SetazeR
т.е. нужных тебе данных нет в исходном коде страницы
Anonymous
Сейчас подробнее напишу
SetazeR
если да - selenium
Anonymous
т.е. нужных тебе данных нет в исходном коде страницы
На мой get запрос сервер отправляет исходный код страницы, в js коде идут данные нужные мне, не знаю как из js функции вырезать эти данные
SetazeR
о даже так
SetazeR
тогда селениум отменяется
SetazeR
у данных есть какой-то паттерн? старый добрый парсинг регекспами никто не отменял :D
Nicko
наверняка данные что-то делают с элементами
Anonymous
SetazeR
регексы :)
Anonymous
Можете подробнее рассказать, пожалуйста
Anonymous
С примерами было бы здорово
Anonymous
регексы :)
Регулярные выражения?
Nicko
Value нужен
http://qaru.site/questions/12914345/get-js-var-value-in-html-source-using-beautifulsoup-in-python
Nicko
#parse js не читай, там для геев дальше идёт гейский js
Nicko
я же говорил, bs4 обойдёмся
Anonymous
Ещё одна просьба, помогите переписать regex для моего случая
Anonymous
Value float любой длины
Nicko
re.compile(r"palette: '(.*?)';$", re.MULTILINE | re.DOTALL)
Nicko
можешь ещё запятую в конце убрать
SetazeR
я же говорил, bs4 обойдёмся
"обойдёмся", о да, чтобы искать текст регулярками нужен bs4
Nicko
Спасибо огромное
https://regex101.com/ вот тут регулярки погоняй