Aleks
пытаюсь подключится к базе: import pymysql.cursors connection = pymysql.connect(host='host, user='user', password='password', database="database", port=3306) в ответ "Access denied for user 'user'@'*.*.*.*' (using password: YES)" верно я понимаю, что ошибка может быть только в пароле?
Tishka17
Или в юзере или в базе
Philipp
Ребят, как я понимаю, если кто-то считывает сообщение из очереди RabbitMQ, то оно пропадает из неё, а что брать тогда, если хочется организовать что-то вроде Event-Driven взаимодействие между сервисами, когда не только один потребитель события может быть?
Aleks
Или в юзере или в базе
по ssh к базе могу подключится с данными которые стоят для подключения в connection
Tishka17
Эээ
Tishka17
При чем тут ssh?
Aleks
При чем тут ssh?
я так протестил, что логин с паролем дали верные
Aleks
А при чем тут ssh?
база на удаленном серваке
Tishka17
Так
Tishka17
А ssh тут при чём?
Tishka17
Ты зашёл на тот самый сервер по ssh и локально подключился к мускулу? Или что?
Tishka17
А пароль выдали для всех хостов или только для локалхлста?
Aleks
хороший вопрос
Aleks
уточню, спасибо
Anonymous
когда корутина_1 отдаёт контроль, евент луп отдаёт его корутине_2. В это время корутина_1 полностью простаивает или где-то её выполнение продолжается ?
Anonymous
Здравствуйте ребята. Использую django. Хочу на сайте добавить регистрацию. Мой взгляд упал на django-allauth, так-как там легко реализовать рег. через гугл. Как я понял, allauth для регистрации использует стандартную модельку User, которая предоставляется django. Мне нужно было дополнить эту модельку полями даты рождения, номера телефона, города проживания. Дополнил модель User через AbstractUser. Теперь мне нужно для этих доп. полей сделать формы. В документации читал, что можно изменить формы allauth или же добавить свои. Добавил свои формы. Как теперь это все во вьюшке allauth реализовать, чтобы при посылании запроса на регистрацию, allauth брал инфу не только из формы имени, фамилии и email, а также из формы даты рождения, номера и города.
Philipp
Вроде так нельзя вообще
Ок, а вот ситуация, у меня в сервис БД поступают данные, потом эти данные должны быть сконвертированы в другом сервисе, а за этим всем ещё и фронт наблюдает. 1) Юзер через POST: /projects записывает данные в базу. 2) Где-то должен создаться сообщение-эвент, что мол, был создан новый проект. Сервис конвертации и апишка фронта должны быть подписаны на такого рода "эвенты". 3) Сервис конвертации создаёт Celery задачу на конвертацию. 4) Апишка фронта по WS кидает всем подключённым юзерам данные о новом проекте. 5) Какая-нибудь лабуда пишет логи по эвенту и т.п. Что тут использовать?
Андрей
Надо подумать
Nikita
ну насчет можно\нельзя - там в рабите можно сообщения множить по очередям. в общем в доку рабитмк надо глянуть)
Андрей
Тут нужно что-то pub/sub
Nikita
ну сообщения в очередях имеют много свойств, можно чтобы они не пропадали и тд. ну и можно создавать селери таски аккордами, группами и тд.
Nikita
На каждого клиента очередь создавать так себе затея
https://www.rabbitmq.com/tutorials/tutorial-three-python.html ну а сам раббит как раз через ексченджи и предлагает реализовывать pub/sub
Vitaliy
#вакансия #работа #удаленно #python #sql #bash #spark #docker #eda #lightgbm Вакансия: Старший аналитик-разработчик Python; Город: Москва; Зарплата: 195 000 - 207 000 ₽; Опыт: от 3 лет; Формат работы: офис/удаленно (по желанию); График работы: 5/2; Компания: www.mediascope.net Друзья, компания Mediascope в сектор моделирования данных, ищет старшего аналитика-разработчика Python. Наш сектор занимается поддержкой работы конвейеров поставки данных, когда недостаточно простого ETL. Сбор информации о предпочтениях пользователей производится самыми разнообразными средствами, поэтому необходимо объединять различные источники данных. Отсюда большой спектр задач, поэтому используем самые разные алгоритмы от линейных моделей до случайного леса и бустинга, нейросетей (для табличных данных, CV, NLP), рекомендательных систем и кластеризации. Если вы присоединитесь к нашей команде, вас ожидают множество интересных и сложных задач, большие массивы данных разной природы, возможность экспериментов и дружный коллектив. Требования: Опыт коммерческой разработки на Python, хорошая алгоритмическая подготовка; Уверенное знание Python; Опыт работы с основными библиотеками машинного обучения (scipy-стэк, scikit-learn, xgboost, lightgbm, pytorch); Опыт внедрения моделей машинного обучения в промышленную эксплуатацию; Знание основ математической статистики, алгоритмов и структур данных; Знание основных алгоритмов машинного обучения; Умение читать научные статьи; Знание SQL; Bash, git. Будет плюсом: Навыки работы со spark; Опыт оптимизации расчётов; Опыт работы с docker. Обязанности: EDA (exploratory data analysis) — объединять массивы данных из различных источников, исследовать их структуру и искать закономерности, формировать и проверять гипотезы на основе данных; Строить пайплайны обработки данных и обучения моделей; Сопровождать и развивать существующий комплекс обработки данных; Поиск, обнаружение аномалий в данных и настройка оповещений о критических изменениях. Нужно быть готовым к участию в проекте на всех этапах от формирования гипотезы до сборки ML-конвейера в production: Построение прототипа; Продуктивизация, покрытие тестами; Разворачивание в виде сервиса с мониторингом метрик качества. Условия: Возможность работать из дома в условиях самоизоляции и гибкий подход к рабочему графику; При необходимости - современный и комфортный офис класса А в пешей доступности от м. Савеловская и м. Марьина Роща; Конкурентную заработную плату от 195 000 ₽ до 207 000 ₽; Официальное оформление: все процессы согласно ТК; Заботу о вашем здоровье – хорошую страховку ДМС, включающую обслуживание в ведущих центрах Москвы; Соблюдение необходимых мер по обеспечению безопасности здоровья в офисном пространстве; Дружелюбную корпоративную культуру, приятных коллег и отсутствие дресс-кода; Корпоративные скидки у различных партнеров компании. Контакты: По всем вопросам пишите в Telegram @leonety_lety или на емаил vitaly@income-personal.online
Nikita
Хм Посмотрю Спасибо
там же ерланг, и ему не сложно такие вещи - как куча очередей и куча сообщений)
Philipp
https://www.rabbitmq.com/tutorials/tutorial-three-python.html ну а сам раббит как раз через ексченджи и предлагает реализовывать pub/sub
Ok, тогда следующего рода вопрос, если сейчас сервис конвертации - контейнер с REST апишкой основанной на FastAPI, то есть по сути, обычные ручки которые надо дёргать и в которых создаются Celery таски, то как это умещается в описанную мной систему? Нужно делать отдельный сервис, который будет "слушать эвенты" и по нужным создавать Celery таски на конвертацию, а текущую апишку оставить как запасной вариант ручного создания эвентов?
m4xx1m
как сказать чтобы os.system в консоль не выводил
Philipp
у селери там вообще свой подход. раббит лишь один из возможных бекендов. оно и без него работает) А уж как там контейнеры тебе организовать - право не знаю, прости)
Я это скорее про общий подход. В описанном случае, думаю, что RMQ лучше держать только как шину эвентов, а для Celery задач пользовать отдельный Redis.
Tishka17
О_о
Андрей
Но ведь у редиса проблемы с персистетностью
А ещё он умеет пухнуть в связке с celery
Tishka17
Я бы взял RMQ без Celery
Philipp
Возможно вы и правы (да чего уж там, скорее всего так и есть), но я только начинаю ощупывать кончиками пальцев дно в этом мутном пруду, поэтому не до конца всю картину вижу.
Philipp
Ладно, надо читать доки, бредовые предположения буду выдвигать позже... Спасибо за ответы.
Nikita
Возможно вы и правы (да чего уж там, скорее всего так и есть), но я только начинаю ощупывать кончиками пальцев дно в этом мутном пруду, поэтому не до конца всю картину вижу.
ну так и не надо сразу сложно все делать. лучше сделать просто, а где нехватает чего-то, уже усложнять. а сразу начинать с таких связок - караул получится) пробовали)
uvicorn
Как тестировать авторизацию на моем веб апи?
uvicorn
fastapi
Philipp
Как тестировать авторизацию на моем веб апи?
Пробовать получить доступ к защищенным данным с неподходящими пермишинами?
Philipp
У FastAPI есть TestClient, через него запросы шли.
Philipp
А что для авторизации используется? И не путается ли авторизация и аутентификация?
Tishka17
Купить Pycharm или сразу All Products pack?
uvicorn
ща
uvicorn
Купить Pycharm или сразу All Products pack?
взять справку школьника
Tishka17
Да так я на комьюнити сижу, но вот задумался
Alex
как сказать чтобы os.system в консоль не выводил
во-первых не использовать os.system во-вторых использовать subprocess и перенаправить stdout в DEVNULL
uvicorn
А что для авторизации используется? И не путается ли авторизация и аутентификация?
@lru_cache() def get_settings(): return settings security = HTTPBasic() def get_current_username( credentials: HTTPBasicCredentials = Depends(security), settings: BaseSettings = Depends(get_settings) ): correct_username = secrets.compare_digest(credentials.username, settings.AUTH_USERNAME) correct_password = secrets.compare_digest(credentials.password, settings.AUTH_PASSWORD) if not (correct_username and correct_password): raise HTTPException( status_code=status.HTTP_401_UNAUTHORIZED, detail="Incorrect email or password", headers={"WWW-Authenticate": "Basic"}, ) return credentials.username вот такая зависимость , мне ее протестить нужно
Alex
nul
Anonymous
Вопрос по библиотеке pandas print(ms.describe(['TotalPrice'][8:13])) Как вывести статистику по опредеенному промежутку? Почему то этот код не работает
Alex
ого а я на винде
для винды это тоже работает
Philipp
Купить Pycharm или сразу All Products pack?
Я хотел себе пакет взять, но последнее время как-то от фронта отошёл, а так как из-за специфики проекта сижу на винде, то для плюсов и шарпа пользую MSVS, у жены WebStorm отдельно куплен, так что, могу у неё открыть в случае чего. Мне комьюнити хватало, я больше в виде поддержки ребят из JB купил лицуху.
Alex
> /dev/null ?
нет. subprocess.DEVNULL
✙Yaroslav
Ребят, чуть не в тему вопрос, но может кто знает? В .env есть переменные postgres_name и postgres_user. При собирании контейнера хочу сделать скрипт, который создаст юзера и бд из .env. Как импортнуть из .енв нужную мне переменную в скрипт? Скрипт называется init.sql
Nikita M.
Люди добрые, никто не помнит, начиная с какого поколения intel i3/5/7 перестали гнаться (не k-версии) - со второго ?
Alex
И вообще-то собирают образ, а не контейнер
✙Yaroslav
Не понял как связан файл .env (хз ещё в каком формате), sql и какая-то рандомая база
В .env хранятся обычно сикрет данные (password, name, user). И при собирании образа оттуда берутся эти данные, и если поменять postgres_mame или postgres_user, то хотелось бы и чтобы эта переменная и в init.sql была видна.
Не выходи из комнаты.
Привет. Нужна помощь с парсингом xml Нужно парсить из него определенные теги с неймспейсами default, ns3. C получением данных из default никаких проблем нет. А вот ns3 с никак не удаётся получить. Например, здесь нужно получить значение атрибута CODE с ns3:NUTS (в attrib() приходит self.element = None) Версия питона 3.5 Воспроизвести можно здесь https://repl.it/join/gsovtxha-m0ntecr1st0
Alex
нет. при собирании образа оттуда ничего не берется.
Мaxim
Всем привет Дали задание написать алгоритм z буфера. Разобрался с тем, как он в целом работает, но не понимаю, как определять глубину пикселя каждого конкретного полигона (полигоны многоугольные и нерегулярные). Кто-нибудь сталкивался с таким?
Alex
вообще не нужно никакие креденшалы в образ засовывать
✙Yaroslav
нет. при собирании образа оттуда ничего не берется.
Как это не берется? Если в docker-compose у меня прописано env_file: - .env
✙Yaroslav
Окей, пасиб)
Alex
ох если бы они еще осиливали внятно формулировать свои вопросы. вангую пациент запускает контейнер с базой данных и хочет инициализировать базу используя параметры из окружения.
Tishka17
Вообще я окончательно перестал понимать