Anonymous
Все на событиях пользователей будет весеть. Посмотрим что я смогу придумать)))) ладно, спасибо за консультацию - у меня уже 6 утра.. надо пойти поспать
Nicko
есть у кого-нибудь идеи, как чекать релевантность данных с помощью python ?
Anonymous
Чего
Nicko
Каких данных?
Допустим хештегов
Artöm
Допустим хештегов
В чем выражается из релевантность?
Artöm
Если сайт предоставляет апи, находишь топ тегов, сравниваешь с данными
Nicko
на той фотке есть три шехтега подобрать такие же несколько фоток с наиболее близкими хештегами
SetazeR
if hashtag.relevant(): print('RELEVANT!')
Nicko
не предоставляет
Artöm
Перебирать все никаких мощностей не хватит
Nicko
допустим у меня есть доступ к бд и это мой сайт
Artöm
А
Artöm
Тогда и теги в бд будут
Nicko
будут
Artöm
Если изначально теги в рассчете были, они в отдельном поле могут быть
SetazeR
ну тебе только описать что такое "релевантно" и надо
Artöm
Тогда можно делать базу облаков тегов
Artöm
И искать пересечение
Artöm
Тогда можно делать базу облаков тегов
С таймаутом, чтобы обновлялась
Nicko
Тогда можно делать базу облаков тегов
окей, есть мысли как это сделать?
Nicko
мне кажется, мне нужно Feature selection и ml
Artöm
Отдельная бд. Если на сайт выложена фотография с рядом тегов, ссылка на нее попадает в соответствцющие облака
Artöm
Все, что я сказал - первое приближение. Я не знаю удобного способа это автоматизировать
Nicko
у меня были мысли создать вектор из id хештегов и умножать его на другие
Nicko
но такая себе идея
Nicko
нашёл статью на хабр, о токинизации
Nicko
думаю, то что нужно
Nicko
Petr
#работа #Москва #офис Доброго времени суток. Мы – молодой start up проект, собираем команду разработчиков для создания web-приложения, ищем опытного лида, в идеале со своей командой, если таковой нет, то необходима готовность ее собрать и возглавить. Стек технологий для back-end python+postgresql. Зарплатная вилка лида 150-200 Разработчика 100-150 Необходим опыт построения работы в команде, опыт работы по scrum. Опыт разработки на python 2-3 года. Опыт работы с Django. Умение покрывать код unit-тестами. Знание Docker, k8s, git, Jira, API. Понимание принципов ООП. Опыт работы с posgresql Мы предлагаем: Белую заработную плату, работу в приятном офисе на ст. м. Тульская, работу в дружном, молодом коллективе, интересные и амбициозные задачи, возможность роста вместе с проектом. Подробности в личку или на petr.rossolov@dilogic.ru
Alex
чет стартап без денег какой-то еще и знание кубера им подавай.
Pavel
чет стартап без денег какой-то еще и знание кубера им подавай.
зато возможность роста вместе с проектом
Pavel
где еще такое найдешь то
Andrey
это для школьников лет 7-8? чтобы расти вместе с проектом
Блин
это для школьников лет 7-8? чтобы расти вместе с проектом
Глядишь, к сорока будешь уже в серьёзной компании
Andrey
Глядишь, к сорока будешь уже в серьёзной компании
к 40 годам этот молодой стартап проект превратится в очень пожилой стартап проект)
Pavel
как оно там было то... «молодая, динамично развивающаяся компания»
Pavel
а в ней 4 человека - генеральный директор, технический директор, коммерческий директор и уборщица (приходящая)
Anonymous
нужен совет. Есть проект на Flask, к которому хочу прикрутить gRPC сервер. Мол стартует проект и вместе с ним сервис gRPC. Его правильно как-то через multiprocessing подвязать? Я его пытаюсь во время создания create_application подключать, но все блочится. Возможно я вообще херней страдаю. Как это правильно сделать?
Alexey
Помогите советом....(
Кукисы какие-нибудь забыл, скорее всего
Alex
О, спасибо, в эту сторону я что-то не посмотрел)
Alex
А вообще возможно ли сессию из requests передать браузеру при его открытии?
Tigran
С трудом себе представляю, если только не влезать в куки-сторадж браузера
Alexey
Ты можешь за место реквестс использовать селениум
Vladimir
Помогите советом....(
https://developer.mozilla.org/en-US/docs/Web/HTTP/Headers/Referer - ещё не забывай об этом
Іван 🤙
Всем привет!) Ребят, кто работал с pycube, подскажите пожалуйста, не могу запустить кубер джобу, какой то непонятный ssl error.. коннекчусь через сервис аккаунт requests.exceptions.SSLError: HTTPSConnectionPool(host='айпи кластера', port=443): Max retries exceeded with url: /apis/batch/v1/namespaces/default/jobs (Caused by SSLError(SSLError(0, 'unknown error (_ssl.c:4053)'))) вроде понятно что не может достучатся, думал трабл с впн, но так как я подключаюсь через сервис акк, впн вроде как не должен ничего решать.... Куда копать?
Alex
Ты можешь за место реквестс использовать селениум
Уже пробовал, только проблема: как скачать картинку капчи. При скачивании по ссылке капча естественно меняется. Вот и дилемма: с одной стороны парсю страницу, все ладится, но не могу открыть редирект, а в селениуме все открывается, но не могу поймать нужную капчу
Alexey
Ну или джаваскриптом сохрани картинку. В Гугле есть примеры и того и другого подхода
👑OGURCHIK🖤
Session врубай
Egor
Кто в курсе, urllib2 на python2.7 не резолвит некоторые домены, хотя хост система все видит? Из-за чего может быть?
Egor
Pip install requests
не.. это не выход.
Egor
просто странно почему так?
Egor
либа такая баганутая?
Константин
Кто в курсе, urllib2 на python2.7 не резолвит некоторые домены, хотя хост система все видит? Из-за чего может быть?
Кодировка может? Или наличие неправильных буковок из другого алфавита
Egor
другие домены резолвит, у которых снеймом является данный домен
Egor
Как-то сложно без конкретики
ну да, еще не дебажили код, так что сложно, руки не дошли
natrix5369_job
Привет. В html используются спец символы,такие как: "&gt"(>), "&lt"(<) и прочие. Есть ли библиотека для питона,которая заменяет все спец символы на читаемые символы в строке? (Из &gt в > например)
gerGrin
Салют, на сайте в body прописаны oncut=return FALSE и oncopy=return FASE, из-за этого нет возможности спарсить данные. Есть какая-то возможность это обойти?
natrix5369_job
from html import unescape
Спасибо огромное
Artyom
Спасибо огромное
научись гуглить, первый результат в выдаче
natrix5369_job
Так через селениум в любом случае же можно
Можно выполнить запрос через requests и оттуда вытащить из ответа ещё. Если конечно все не в iframe
natrix5369_job
научись гуглить, первый результат в выдаче
Да я просто не понял как загуглить подобный вопрос. Ещё раз спасибо
natrix5369_job
Headers