@subdose будет жить. Поприветствуем!

Гайс, такой вопрос. Мне надо определить, содержится ли подстрока в строке, но загвоздка в том, что эта самая строка может быть очень сильно искажена (например, одно слово разрезано на два, второе вообще пропало, а третье заменено на похожее). Обычный fuzzy matching (типа FuzzyWuzzy) в принципе что-то как-то матчит, но в зависимости от treshold получается либо неприятно большое число false negatives, либо огромное число false positives. Мне кажется, что результаты можно как-то улучшить с помощью машинного обучения, но я почти не знаком с этой темой. Можете что-нибудь посоветовать, куда вообще копать?

Совет от кореша который занимается парсингом соц сетей: "Можно просто ебануть расстояние левенштейна или прогнать морфологический анализ при помощи какого-нибудь pymorphy и не ебать себе мозг нейросетями сложными."

Совет от кореша который занимается парсингом соц сетей: "Можно просто ебануть расстояние левенштейна или прогнать морфологический анализ при помощи какого-нибудь pymorphy и не ебать себе мозг нейросетями сложными."

FuzzyWuzzy и использует Левенштайна. Pymorphy посмотрю, спасибо

Совет от кореша который занимается парсингом соц сетей: "Можно просто ебануть расстояние левенштейна или прогнать морфологический анализ при помощи какого-нибудь pymorphy и не ебать себе мозг нейросетями сложными."

Не, это тоже не то, мне нет смысла приводить слова в нормальную форму, потому что в 99% случаев они уже в нужной форме стоят

@vadimka4920 будет жить. Поприветствуем!

@pytest.mark.usefixtures

а чет не понимаю как это юзать. Вот у меня есть фикстура db_name, возвращает строку. Она уже юзается во всяких тестах и на оснвое нее строится соединение. Теперь я хочу собрать suite, чтобы где-то перед запуском каждого теста создавалось соединение и клалось в атрибут класса. Как это сделать?

а чет не понимаю как это юзать. Вот у меня есть фикстура db_name, возвращает строку. Она уже юзается во всяких тестах и на оснвое нее строится соединение. Теперь я хочу собрать suite, чтобы где-то перед запуском каждого теста создавалось соединение и клалось в атрибут класса. Как это сделать?

pytest.mark.parametrize?

У меня уже мозг взрывается, у меня есть многопоточный ехо сервер, класс EchoServer наследуется Thread(юзаю модуль threading), и когда я хочу чтобы программа завершилась я нажимаю ctrl+c и в программе пытаюсь ловить ексепшн KeyboardInterrupt, но в итоге ексепшн игнориться и выдает ошибку: "Exception ignored in: <module 'threading' from '/usr/lib/python3.6/threading.py'>", подскажите плз

#работа #вакансия #python #middle #Москва #офис #fulltime Компания: Mos.ru Город: Москва, м. Таганская, Марксистская, Китай-город Формат: офис, фуллтайм ЗП: 150-180 т.р. на руки Что будем делать: разрабатывать инфраструктуру поиска (движок Elastic), настраивать подсистемы поиска, рефакторить код, переводить часть сервисов на асинхронщину. Вы: разрабатываете веб-сервисы на Python 3+ не менее 1.5-2 лет, работали с очередями (Apache Kafka, RabbitMQ или что-то в этом духе), знаете про Docker не только в теории, имеете опыт работы с реляционными БД и покрываете свой код юнит-тестами. Подробнее можно почитать тут: https://hh.ru/vacancy/29529736 Откликнуться: там же или @JaneProvotorova

pytest.mark.parametrize?

class TestSuite1: def test1(self): pass def test2(self): pass куда пихать этот parametrize?

class TestSuite1: def test1(self): pass def test2(self): pass куда пихать этот parametrize?

class TestSuite1: def setup(self, db_name): self.db = connect(db_name) def test1(self): pass def test2(self): pass так что ли?

У меня уже мозг взрывается, у меня есть многопоточный ехо сервер, класс EchoServer наследуется Thread(юзаю модуль threading), и когда я хочу чтобы программа завершилась я нажимаю ctrl+c и в программе пытаюсь ловить ексепшн KeyboardInterrupt, но в итоге ексепшн игнориться и выдает ошибку: "Exception ignored in: <module 'threading' from '/usr/lib/python3.6/threading.py'>", подскажите плз

Ты делаешь join потоков при обработке исключения?

class TestSuite1: def setup(self, db_name): self.db = connect(db_name) def test1(self): pass def test2(self): pass так что ли?

типа того, только с pytest?

так это с pytest

хм

Ты делаешь join потоков при обработке исключения?

Прикол в том что программа даже не может ексепшн словить, она выдает ошибку

типа того, только с pytest?

я точно синтаксис не помню сейчас уточню

просто все доки какие-то наизнанку вывернутые

вообще в стиле пайтест ты бы должен был сделать фикстуру, которая возвращает тебе подключение

но это не обязательно

да хоть фикстуру, мне она нужна в одной сюите

не дублировать же в каждую функцию параметр

Прикол в том что программа даже не может ексепшн словить, она выдает ошибку

А пробовал извращаться как, например, тут? https://stackoverflow.com/questions/2829329/catch-a-threads-exception-in-the-caller-thread-in-python

не дублировать же в каждую функцию параметр

А порядок запуска тестов сохраняется?

порядок?

зачем мне порядок

https://pastebin.com/nw5Q7qkP подскажите пожалуйста, почему dlib ругается на установку либы?

зачем мне порядок

Ну при условной инициализации класса тестсюиты создать подключение не подходит?

инициализации класса? нет, спасибо

пусть на каждый тест создает

инициализации класса? нет, спасибо

почему?

чтобы я мог если че в параллель запустить

это не мешает

ну надо не в классе, а в объекте как минимум

и я хз, этот pytest создает ли объект сюиты на каждый тест или реюзает

@gorinars будет жить. Поприветствуем!

короче, лучше сделать фикстуру, ок

@Vladyslav1 будет жить. Поприветствуем!

вроде да

https://pastebin.com/nw5Q7qkP подскажите пожалуйста, почему dlib ругается на установку либы?

у меня была схожая ошибка, когда обновилась одна либа, на основе которой наебнулась другая либа (так как работает только со старой версией). Проверь гитхаб создателей либы, может там есть исью на эту тему

коннекшн может реально не закрыться, а вернуться в пул

у меня была схожая ошибка, когда обновилась одна либа, на основе которой наебнулась другая либа (так как работает только со старой версией). Проверь гитхаб создателей либы, может там есть исью на эту тему

омг

Ekaterina Lazareva будет жить. Поприветствуем!

А пробовал извращаться как, например, тут? https://stackoverflow.com/questions/2829329/catch-a-threads-exception-in-the-caller-thread-in-python

Ага, это оно)

В питончике можно не использовать i = 0 и i += 1 Можно так: for i, entry in enumerate(result):

В питончике можно не использовать i = 0 и i += 1 Можно так: for i, entry in enumerate(result):

спасибо

во-первых тебе надо узнать что нельзя использовать форматирование строк для запросов

во-первых тебе надо узнать что нельзя использовать форматирование строк для запросов

почему?

еще один

во-вторых использовал бы ты контекстные менеджеры, горя бы не знал

почему?

sql injection

https://habr.com/ru/post/321510/

where_value = "'DROP TABLE {table} —" кхе

ERROR: S client not available

Лучше уже использовать ORM https://python-scripts.com/peewee а не писать самому запросы.

не надо рекомендовать ORM

Лучше уже использовать ORM https://python-scripts.com/peewee а не писать самому запросы.

бан

он не всегда подходит

Sergey Zykin будет жить. Поприветствуем!

бан

ага

Алексей будет жить. Поприветствуем!

??

Курсор очень даже надо закрывать

Если в пределах одного соединения юзаются несколько

херню сказал

Пока ты его не закроешь нельзя создавать новый с тем же именем, например

Забаньте, прошу

Срочно

Забаньте, прошу

!report

Не верьте, это небось его девушка пишет :)

#работа Всем привет. Ищу к себе в команду Behavox (www.behavox.com) Senior Python ML Backend Engineer с нотками девопса и оттенками системного архитектора, желающего сделать жизнь команды Data Science проще и беззаботнее, а создаваемые командой сервисы - более надежными, быстрыми и легко масштабируемыми. Офис на выбор: Спб: (м. Петроградская), Мск: (м. Войковская). Релокация в Монреаль ~через 3-6 месяцев работы в компании. Занимаемся анализом разнообразных коммуникаций (аудио, текст, трейдинг) в т.ч. для compliance (детектирование нарушения финансовых регуляций), mifid (аналитика по трейдинговым данным), в целом комплексного анализа работы компании по данным коммуникаций сотрудников. Задачи: - улучшение бэкенда платформы аналитики. Оптимизация ML процессинга. Сейчас используем gunicorn с моделями tensorflow, keras, pytorch, xgboost, scikit-learn и т.п. - разработка и поддержка микросервисной архитектуры (декомпозиция монолита и все, что с этим связано) - сейчас начинаем использовать mesos/docker для некоторых сервисов, в планах kubernetes и серьезные изменения архитектуры - оптимизация взаимодействия java приложения и питон сервера - улучшение механизмов мониторинга, A/B тестирования, онлайн обучения моделей, версионирования, и т.д. - работа с базами данных, улучшение механизмов синхронизации сервисов - работа над IDE для аналитиков (аналог google cloud ML / Amazon sagemaker, который ставится клиентам вместе с платформой) Минимальные требования: - опыт разработки питон бекэнда от 3 лет - наличие набитых шишек при разработке и внедрении распределенных высоконагруженных сервисов на питоне - базовые знания языка java или желание освоить - опыт работы с базами данных MySQL / redis - понимание стека Hadoop & Spark Желательно также увидеть: - опыт создания распределенных архитектур обработки данных с использованием ML - опыт программирования на C++, оборачивания C библиотек питоном - опыт написание кода на cython - базовые знания ML библиотек - опыт работы с DevOps инфраструктурой (Ansible, jenkins, AWS, Docker) - опыт работы, или понимание принципов таких продуктов, как Google cloud ML, AWS Sagemaker, IBM Watson Studio, etc. От нас: - Официальное трудоустройство - З/П белая в зависимости от опыта: 190 000 - 290 000 руб/мес (Gross). - ДМС после испытательного срока (3 мес) - Уютный и просторный офис - Возможность как углубиться в область, так и поработать с другими компонентами системы (коллектив открытый, система сильно горизонтальная) - Релокация в Монреаль через 3-6 месяцев работы в компании. Полное сопровождение процесса релокации от компании для всей семьи сотрудника (визы, билеты, жилье на первое время и помощь с поиском своего, релокационный бонус и многое другое). ЗП после - от 100 000 CAD Gross в год (подробнее лучше обсудить с HR) Ссылка на описание вакансии на HH: https://hh.ru/vacancy/28929024 Если появятся вопросы - постараюсь ответить я, или наш HR Екатерина (ekaterina.lazareva@behavox.com). После собеседования с HR будет собеседование с Chief Data Scientist, затем нужно выполнить тестовое задание и пройти финальное собеседование с технической командой.

Подскажите пожалуйста, что я делаю не так? Как добиться того, чтобы у меня были 2 разные фигуры? #opencv2

как узнать на маке, откуда взялся файл /usr/local/bin/py.test?

как узнать на маке, откуда взялся файл /usr/local/bin/py.test?

Ты пайтон устанавливал?

Посмотри сам файл.

cat /path/to/file/

ну я хочу его снести и поставить для тетьего