Yury
Гайз, кто с ОРМками (алхимией в частности) работал, подскажите такой момент Я парсером дергаю данные и сохраняю в бд с использование модели. Как мне проверить, изменились ли данные для одной записи? Пока в голове дергать эту запись из БД поиском и каждое поле проверять (кроме id), но что-то чувствую, что это хреновая идея :)
Alex
нет pip не собирает пакеты
Alex
pip знает как устанавливать пакеты того или иного формата
Alex
если у тебя пакет wheel формата, pip его никак не соберет.
slair
и собирает тоже, или пинает того кто собирать может
Vladyslav 🇺🇦🇪🇺
Не, в целях использования в проде
ты хочешь кодом проверять изменение данных или на глаз?
Yury
Если изменилось - то вызывается еще одна функция дополнительная
slair
когда я пиную пип, мне пофигу какой формат пакета
Vladyslav 🇺🇦🇪🇺
я бы сделал небольшой отдельный класс поверх модельки алхимии и слал все через него, а в него уже вшил всю валидацию, проверку и тд
Vladyslav 🇺🇦🇪🇺
+ локигу на случай изменений
Yury
может, триггер на уровне БД подойдет
отпралять данные в телеграмм на уровне триггера в бд это сильно :)
Vladyslav 🇺🇦🇪🇺
класс*
Yury
именно с точки зрения алгоритма
Vladyslav 🇺🇦🇪🇺
Вопрос в реализации валидации.
я делал что-то похожее. кстати тоже для телеги
Vladyslav 🇺🇦🇪🇺
https://github.com/codefather-labs/telegram-cms/blob/master/apps/telegram/middlewares.py
Vladyslav 🇺🇦🇪🇺
TriggerMiddleware
Storm
Видел, видел :)
Для чего именно парсер, просто один есть, если такой нужен, посмотришь что и как
Yury
я делал что-то похожее. кстати тоже для телеги
Ибо алгоритм сейчас такой загружаем матч он уже есть в бд (для этого делаем поиск по id матча)? нет - загружаем в бд да - перебираем поля в матчах в бд и с парсера. Если изменения, ставим edited = True
Vladyslav 🇺🇦🇪🇺
Ибо алгоритм сейчас такой загружаем матч он уже есть в бд (для этого делаем поиск по id матча)? нет - загружаем в бд да - перебираем поля в матчах в бд и с парсера. Если изменения, ставим edited = True
конструкция не очень понятно - если парсер ходит в бд постоянно, то я бы сделал отдельную сущность которая обновляет матчи в бд
Vladyslav 🇺🇦🇪🇺
если матч есть - берем айдишник из базы - если нет, шлем той сущности которая обновляет матчи сигнал что такого матча нет
Vladyslav 🇺🇦🇪🇺
мол загрузи и отдать это на селери например
Vladyslav 🇺🇦🇪🇺
если id есть, достаем из базы матчи иделаем что ндо
Vladyslav 🇺🇦🇪🇺
таким образом данные о матчах буду твсегда актуальные если будет отдельная сущност отвечабщая за обновления матей в бд
Yury
В селери-то зачем? :) У меня раз в 10 минут вызывается скрипт, который бд обновляет
Vladyslav 🇺🇦🇪🇺
чтоб мейнтред не засорять ну я представил, что проект большой
Vladyslav 🇺🇦🇪🇺
если у тебя алхимия, то я предпологаю что сервер на фласке у тебя
Vladyslav 🇺🇦🇪🇺
он синхронен
Yury
у меня не реал-тайм система :) А тупо система оповещений по расписанию. В начале дня присылает матчи на весь день. Просто прикол в том, что в расписании матч есть, а кто играет непонятно (по результатам предыдущих определяется) Поэтому как данные обновились (мы узнали, что у команды оказывается есть матч) надо сообщить юзеру.
Vladyslav 🇺🇦🇪🇺
просто - сдлеать сущность отвечающую за обновления матчей в бд, это написсать ее и забыть. она работает, данные в бд всегда актуальны. все ок
Yury
С простым обновлением и скриптик справляется
Vladyslav 🇺🇦🇪🇺
А как мне ловить изменения?
а как ты проверяешь изменения ?
Yury
а как ты проверяешь изменения ?
Писал же :) он уже есть в бд (для этого делаем поиск по id матча)? нет - загружаем в бд да - перебираем поля в матчах в бд и с парсера. Если изменения, ставим edited = True
Vladyslav 🇺🇦🇪🇺
а как он в бд попадает? он попадает в бд не отсортированный или как?
Yury
Сверяем что прислал парсер с тем, что уже лежит в базе
Vladyslav 🇺🇦🇪🇺
я запутался
Yury
Кодом проще? ;)
Vladyslav 🇺🇦🇪🇺
Сверяем что прислал парсер с тем, что уже лежит в базе
парсер стянул данные с веба, нужно сходить в бд проверить есть ли такой матч так?
Гузель
всем привет, кто знает, как обновить питон в виртуальном окружении? сайт разработан на джанго и развернут на centos по умолчанию стоит 2.7, хочу обновить до 3.8
Vladyslav 🇺🇦🇪🇺
чтоб не ходить в базу с фильтром всех матчей чтоб найти текущий, возьми какой-то простой алгоритм, который будет создавать своего про айдишники. например берешь строку 'команда1-команда2-дата' заворачиваешь ее в base64, вот тебе условный айдишник который можно укзадывать в бд и не ходить в базу циклом. парсер сходил в веб, сформировал для матча айдишник и сходил в бд проверил есть ли матч с таким искусственный айдишником. это всего 1 запрос
Yury
парсер стянул данные с веба, нужно сходить в бд проверить есть ли такой матч так?
Угу. И если есть, мы сверяем то, что лежит и то, что пришло
Vladyslav 🇺🇦🇪🇺
понял мысль?
Vladyslav 🇺🇦🇪🇺
сформировать строку по каким-то данным о матче и завернуть ее в base64. полученный хеш всегда будет статичным
Yury
айдишники есть на сайте, который я парсю :)
Vladyslav 🇺🇦🇪🇺
айдишники есть на сайте, который я парсю :)
тогда беру айдищники оттуда, в базе такое же поле и тащи по нему
Vladyslav 🇺🇦🇪🇺
делов
Yury
Я так и делаю Я ж говорю, меня смущает, что для каждого матча надо его подтягивать из БД, сравнивать а потом обновлять Много запросов к БД (по-моему) Вот я и спросил, можно ли как-то по другому
Vladyslav 🇺🇦🇪🇺
хм наверное никак, если нужно по каждомму матчу проверять данные
Vladyslav 🇺🇦🇪🇺
я думал проблема в том, что не такого удобного поля как айдишник, который можно было бы иметь до того как сходил в бд, чтоб не по строковым полям искать в базе матч, а одним полем
Yury
Спасибо :)
Anton
Привет ребята, есть у кого ссылки где можно почитать про реферальную систему для тг бота?
Tishka17
А что там читать особо?
Anonymous
Какие есть модули фреймворка?
Anton
А что там читать особо?
Ну я просто только начинаю, скажем так, и вообще по нулям 🙃🙃
Denis
Кто знает?
Автор фреймворка
Anonymous
Автор фреймворка
Я серьёзно, какие модули?
Oleg
Я серьёзно, какие модули?
Вопрос сформулируй нормально. Какой фреймворк?
Yury
Я серьёзно, какие модули?
А у какого фреймворка? Какой вопрос - такой ответ
Yury
оО