Alexandra
Alexandra
Alexandra
к счастью, это редкие случаи)
W
можно спросить с чего начать чтоб зделать бота для сайта ?
W
посоветуйте чтонибуть ?Сейчас занимаюсь селениумом
Anonymous
Книгу по русскому языку могу посоветовать
Nrj
Чет в голос))
𝙸𝚐𝚘𝚛
Подскажите пожалуйста нубу как сделать? нужно чтобы процесс продолжался если не заполнен 1 инпут (просто пропускам его в случае если нет значения)
percent = float(input("Средний годовой процент = "))
Alex
Andrei
и программирование кстати тоже
Danylo
Вопрос по архитектуре.
У меня былл класс A с набором методов который решает какую-то проблему. Теперь появились новые требования, и нужно добавить ему функционала. В процессе добавления я осознаю, что мне необходимо много вспомогательного функционала, который слабо связан с изначальным классом. Но при этом мне нужны данные из класса А.
т.е.
class A:
def __init__(self):
self.old_attr = ...
def old_meth(...): ...
def new_meth(...): ...
# usage of self.old_attr
я превращаю в
class B:
def new_meth(...): ...
class A:
def __init__(self):
self.old_attr = ...
self.b = B(self)
def old_meth(...): ...
def new_meth(...): ...
# call to self.b.new_method(...)
Насколько вообще уместен такой подход? Меня первое что смущает это циклическая зависимость, но хз
Oleg
можно спросить с чего начать чтоб зделать бота для сайта ?
1. Определить требования и что такое "бот для сайта". бот для скраппинга? Или бот для автоматизации приема заявок/прочее?
2. Формируешь задачи;
3. Выбираешь инструменты (если нет опыта, бери тот язык, который хочешь выучить)
4. Делаешь
Oleg
Danylo
Tishka17
Danylo
Tishka17
Ad1n1cA
Ещё небольшой вопрос по db
учитывая количество записей в моей бд судя по всему необходимо её проиндексировать.
ибо на поиски уходит +/-5 секунд
делаю так:
import sqlite3
with sqlite3.connect('db/newsDB.db') as db:
cursor = db.cursor()
query = """ CREATE UNIQUE INDEX here_name ON news(news_id) """
cursor.execute(query)
print('done!')
db.commit()
после запуска скрипта выводит мой принт. Но в таблице ничего не появляется. Если запустить скрипт повторно, то пишет:
sqlite3.OperationalError: index here_name already exists
может кто подскажет, где косячу
Tishka17
Tishka17
Tishka17
W
😱😱😱😱😱
Ad1n1cA
А что должно в таблице появиться?
а разве ничего не должно появится?
Где-то вроде читал, что после индексации появляется еще 1 колонка
news_id - эт название колонки в таблице, в которой хранятся уникальный ID новостей.
Tishka17
Tishka17
Индекс - это не колонка, а отдельная структура в БД
Tishka17
Tishka17
Или это уже первичный ключ?
Tishka17
Tishka17
Tom
Я тут тестовое задание по вакансии выполнял. Походу слил, так как метод на получение статуса задания после деплоя не отработал (хотя при локально запуске проекта все было норм).
Опубликовано здесь
https://codeberg.org/cauf/hpf_tst
Ваши замечания и критика будут весьма полезны.
Tishka17
Tishka17
зачем тебе два уникальных айди?
Дина
#Вакансия #Senior
#С++
Вакансия: Ведущий Программист С++
Компания: ТЕНЗОР (https://tensor.ru)
Формат работы: #офис #Уфа
Занятость: полная
Привет, меня зовут Дина, я ищу талантливых и креативных сотрудников в компанию Тензор.
Тензор крупная и стабильная It компания. Наши сотрудники- умные, активные, полные энтузиазма ребята, которые создают полезную для любого бизнеса систему СБИС (подробнее тут sbis.ru)
У нас очень много крутых идей, на воплощение которых постоянно требуются дополнительные руки и головы))
Сегодня я в поисках самого талантливого и опытного С++ программиста уровня Senior.
Тебе предстоит разрабатывать кроссплатформенные микросервисы, которые будут использоваться как в мобильных, так и в веб приложениях.
Итак, ты знаешь С++11, STL, SQL (SQLite)?
Тебе надоели однотипные, простые задачи и ты созрел для настоящего вызова?!
Ты готов взять на себя ответственность за проект и команду?
Тогда пора нам познакомиться😉
💥Тебя ждёт слава и признание от 3,5 млн пользователей!
💥Ну и конечно достойная зарплата (вилка от 140 до 250К).
💥А также медстраховка, компенсация занятий спортом и английским, возможность пользоваться корпоративной библиотекой, регулярные премии по результатам работы.
💥А работать можно как дома в любимых тапочках, так и в любом из наших уютных офисов.
Вдохновился? Пиши мне в личку!
Контакты:
✍️@dinatensor
📨da.shesterikova@tensor.ru
менеджер по персоналу Дина Шестерикова
Ad1n1cA
зачем тебе два уникальных айди?
да мне они в принципе и не нужны
просто я не знаю, как правильно всё это сделать.
по сути, насколько я понял мне нужно проиндексировать колонку news_id в двух таблицах. Если я правильно понял, то именно это позволит мне ускорить обработку и поиск необходимой информации
Tishka17
Tishka17
во-первый на PK индекс автоматически создается, во-вторых откуда две таблицы взялись уже? в третьих, а какой запрос у тебя тормозит? и на сколько?
Ricle ✙ 🍉
Tishka17
Tishka17
4.3к должны мгновенное работать без индексов
Ad1n1cA
Покажи схему БД и код как ты получаешь рандомную новость
Здесь проблем нет. Рандомная новость из любой категории:
q = """ SELECT * FROM 'news' ORDER BY random() LIMIT 1"""
А вот здесь проблемы. Рандомная новость из категории кино:
q = """ SELECT * FROM 'news' LEFT JOIN 'x' on news.news_id = x.news_id LEFT JOIN 'categories' on categories.category_id = x.category_ids WHERE categories.name='кино' ORDER BY random() LIMIT 1"""
Tishka17
q = """
SELECT * FROM 'news'
LEFT JOIN 'x'
ON news.news_id = x.news_id
LEFT JOIN 'categories'
ON categories.category_id = x.category_ids
WHERE categories.name='кино'
ORDER BY random()
LIMIT 1
"""
Tishka17
иначе сложно читать
Tishka17
а теперь схему
Tishka17
news.news_id - сделай PK. Лучше переименовать в id
categories.category_id - тоже преименовать в id и сделать PK
повесить индесы на
x.category_ids и x.news_id
Ad1n1cA
таблица news - здесь хранятся все новости:
news_id, name, description
news_id - уникальный ID новости, name - заголовок новости, description - описание
таблица categories - здесь хранятся имеющиеся категории:
category_id, name
category_id - уникальный ID категории, name - название категории
таблица x - здесь хранятся:
news_id, categories_ids
например. Есть новость условно Новый автомобиль Джеймса Бонда, с news_id 35. Она отноcится сразу к двум категориям: авто (18) и знаменитости (5)
в таблице X у этой новости будет 2 записи:
id_name, categories_ids:
35 18
35 5
Tishka17
таблица news - здесь хранятся все новости:
news_id, name, description
news_id - уникальный ID новости, name - заголовок новости, description - описание
таблица categories - здесь хранятся имеющиеся категории:
category_id, name
category_id - уникальный ID категории, name - название категории
таблица x - здесь хранятся:
news_id, categories_ids
например. Есть новость условно Новый автомобиль Джеймса Бонда, с news_id 35. Она отноcится сразу к двум категориям: авто (18) и знаменитости (5)
в таблице X у этой новости будет 2 записи:
id_name, categories_ids:
35 18
35 5
Окей, в x тогда составной PK. Можешь отдельные индексы повесть на каждый FK
Veles
лучше разбить на 2 запроса, первый будет получать id по имени, второй будет по этому id получать новость
categories.name - сделать индексом
news.news_id - сделать индексом
x.category_ids - сделать индексом
q = """
SELECT category_id FROM 'categories'
WHERE categories.name='кино'
"""
q = """
SELECT * FROM 'news'
JOIN 'x'
ON news.news_id = x.news_id
WHERE x.category_ids={category_id}
ORDER BY random()
LIMIT 1
"""
Tishka17
Tishka17
Veles
чтоб в результирующий рандом попало как можно меньше записей
Veles
у него там LEFT JOIN в итоге оно просматривает все записи, из-за этого и медленно, хорошо бы было сперва тот запрос выполнить с explain и посмотреть что происходит
Tishka17
ну кстати да, left join поменять на обычный и хватит
RmX
Блин
RmX
Нечего не понял но очень интересно!
Veles
вообще ORDER BY random() это плохая практика, я полагаю, что новости довольно быстро растущая таблица, стоит заранее подумать как уйти от этой конструкции, как вариант можно использовать LIMIT {random_value} 1
Tishka17
Tishka17
Если мы предполагаем, что айди новостей более менее равнлмерны, то можно взять max(id), сгенерить рандом и найти ближайшую новость к этому числу
RmX
Блин учил и учил но ничего не добился
RmX
Не знаю вообще как писать
RmX
Там вроде бы хорошо и понятно все но.....
Ad1n1cA
RmX
Как мне научиться????
RmX
🤨
Tishka17
Ad1n1cA
В таблице news есть:
ID, NEWS_ID, NAME, DESCRIPTION
id - инкрементный айди, как новости залетали в базу
NEWS_ID - уникальный айди новости с сайта
name и description - думаю тут итак всё ясно
p.s. только что удалил базу, забыв о том, что я её не скопировал. Сейчас буду парсить по новой и попробую то, что написали выше.
и еще одно. Была у меня еще одна мелкая база на 100 записей. Там всё летает.
Учитывая, что в большой было 4.3к записей, а на поиски рандомной новости из определенной категории, выходит, что 1к записей обрабатывает в районе 1 сек. Хотя тут может я и не прав. Эт только предположение...
RmX
Практикуйся
На чём??
Что Мне писать??
И вообще я зашёл в тупик!
RmX
В функциях def, return,lambda
Tishka17
В таблице news есть:
ID, NEWS_ID, NAME, DESCRIPTION
id - инкрементный айди, как новости залетали в базу
NEWS_ID - уникальный айди новости с сайта
name и description - думаю тут итак всё ясно
p.s. только что удалил базу, забыв о том, что я её не скопировал. Сейчас буду парсить по новой и попробую то, что написали выше.
и еще одно. Была у меня еще одна мелкая база на 100 записей. Там всё летает.
Учитывая, что в большой было 4.3к записей, а на поиски рандомной новости из определенной категории, выходит, что 1к записей обрабатывает в районе 1 сек. Хотя тут может я и не прав. Эт только предположение...
Нахрен тебе автоинкремнтный?
Tishka17
RmX