std::slavik
есть подозрение что ее хватит, просто индексы использовать над
Kel0
redis побыстрее будет так как хранит все в раме
std::slavik
и она уже встроена в питон
std::slavik
https://habr.com/ru/post/149635/
Roman
@tikhonov_a Спасибо за mashumaro, активно использую! А можно в ней сделать что-то типа (и чтобы быстро работало): @dataclass class Person(DataClassDictMixin): first_name: str second_name: str age: Optional[int] p = Person("Linus", "Pauling") p.update_from_dict({"second_name": "Torvalds", "age": 50}) ?
Alexander
@tikhonov_a Спасибо за mashumaro, активно использую! А можно в ней сделать что-то типа (и чтобы быстро работало): @dataclass class Person(DataClassDictMixin): first_name: str second_name: str age: Optional[int] p = Person("Linus", "Pauling") p.update_from_dict({"second_name": "Torvalds", "age": 50}) ?
Привет. Для чего тебе такой метод? Зачем так заменять массово поля персоны? Мне кажется, лучше сделать свой отдельный метод для изменения определенных данных в объекте либо создавать новый объект.
Roman
Привет. Для чего тебе такой метод? Зачем так заменять массово поля персоны? Мне кажется, лучше сделать свой отдельный метод для изменения определенных данных в объекте либо создавать новый объект.
Я делаю графовую БД на основе LMDB и pynndb2, в которой могут хранится JSON-подобные объекты (вершины и рёбра). Я хочу позволить пользователю частично извлекать объекты (только поле oid), а потом подгружать всё остальное по необходимости. В принципе, могу без этого обойтись, если это нетривиально реализовать...
Проксимов
Alexander
МонгоДб?
Он же запись редко делает, новичок, да ещё и данных мало и расти не будут. Зачем ему монга-то?
Проксимов
А разве сложно?
std::slavik
sqlite уже на борту есть
Проксимов
Зачем костылисть жсон в склайт
std::slavik
статью на хабр кинул
std::slavik
Зачем костылисть жсон в склайт
кто сказал что это жсон
Alexander
Зачем костылисть жсон в склайт
Не надо, надо просто использовать встроенную ключ-значение базу
Roman
То есть ты делаешь датаклассы, у которых все поля опциональные, и ходишь в базу за значением какого-то нужного пользователю подмножества его полей?
Ну я думал загружать либо oid, либо всё. Плюс те же датаклассы я использую для поиска. Как-то так: @dataclass class Entity(DataClassDictMixin): ... @dataclass class Node(Entity): table_name = "node" @dataclass class Concept(Node): label: Optional[str] = None language: Optional[str] = None sense: Optional[str] = None external_url: Optional[List[str]] = None for x in db.seek(Concept(language='lt')): pass
elessar
кто пользуется attrs подскажите можно ли получить список аттрибутов у объекта attrs
std::slavik
просто берешь sqlite кароч
std::slavik
запихиваешь в нее свой словарь мутишь индекс
Alexander
кто пользуется attrs подскажите можно ли получить список аттрибутов у объекта attrs
Да, там есть какой-то метод или свойство, почитай в доке. Как минимум там есть дандер свойство какое-то
std::slavik
делаешь инмемори коннект профит просто скопипастить пару строк со статьи на хабре
elessar
Да, там есть какой-то метод или свойство, почитай в доке. Как минимум там есть дандер свойство какое-то
тут проблема... как быть если прилетает больше входных параметров при инициализации
std::slavik
10к это немного
elessar
вот придется походу вручную отсеивать сначала
elessar
получить список аттрибутов, а потом у дикта который я ему передаю фильтровать
Alexander
тут проблема... как быть если прилетает больше входных параметров при инициализации
Там же есть свойство, в котором хранятся атрибуты по схеме
std::slavik
это хеш таблица, если данные не будут меняться - так это вообще идеально
std::slavik
зачем вообще бд
Alexander
зачем вообще бд
Чувство, что ты уже вырос и надо «как в крупных компаниях» использовать базу
std::slavik
Чувство, что ты уже вырос и надо «как в крупных компаниях» использовать базу
лучше использовать межушный нервный узел по назначению
std::slavik
в крупных компаниях для работы с бд есть специально обученные задроты обычно
Alexander
пока не нашел
Создай объект и посмотри, что там в dir(...) будет
Alexander
Или dir от класса сделай
std::slavik
типичному разработчику обычно достаточно с любой базой посидеть чуток в гугле, покопипастить, получить данные и забыть про базы до следующего раза
elessar
смотрел... там нет аттирбутов
elessar
там одни дандеры
elessar
attr.fields(cls) походу
std::slavik
базу когда используешь - неплохо бы понимать зачем ты это делаешь
Alexander
смотрел... там нет аттирбутов
Вот почитай https://www.attrs.org/en/stable/how-does-it-work.html
std::slavik
какую проблему решаешь, какими средствами, какие ограничения, какие гарантии субд дает, чем ты за эти гарантии будешь платить
Alexander
attr.fields(cls) походу
Он может лезть к __attrs_attrs__
std::slavik
а не просто прикручивать субд какуюнить потому что так взрослые делают
Alexander
@SlavikMIPT да ладно, я же пошутил. Я не знаю, зачем ему база нужна была на самом деле :)
std::slavik
я к слову бывало собеседовал кандидатов которые типа 12 лет разработкой занимаются и не могут ответить на вопрос "а зачем вообще нужна субд? почему бы не сохранять данные в файлы на диск? что такое ACID? что такое индекс?"
su
а вообще баз не нужна, redis, kafka - будет хавка
Alexander
Ну сохранять он хочет данные на диск, наверное. Может, он там на микроконтроллере каком-то программирует с очень ограниченным количеством памяти.
std::slavik
ну и типа это не единичный случай
std::slavik
если данные добавляться не будут - хеш таблица не будет протухать
Roman
Вот ты итерируешься тут, ты потом объекты Concept менять собираешься походом в базу и доставанием свежих данных? Типа merge хочешь?
Да. Use case следующий. Пользователь хитрым образом итерируется по куче Assertions (полученных тем же seek, который возвращает генератор), которые содержат в себе oid Concept-ов, потом хочет достать часть Assertions. Так можно было бы сделать что-то типа: for a in db.seek(Assertion(name='antonym')): ... if ...: a.u.load() # a.u -- Concept # process a.u
Alexander
не вижу проблемы сохранять словарь на диск)
Ну так словарь может весь в память не влезть
std::slavik
поиск будет за константу
su
Ну так словарь может весь в память не влезть
а тебе кластеризация и ноды помогут
std::slavik
su
поиск будет за константу
поиск никогда не бывает за консту
Alexander
в своп влезет
А если свопа нету?
su
в своп влезет
в своп не надо, это редиска сама умеет
std::slavik
А если свопа нету?
ну все - лечь и заплакать
su
в среднем*
принял, осознал, согласен
std::slavik
понятно что редис клевый звонкий и по красоте
std::slavik
но типа неплохо бы знать перед этим что питон умеет из коробки
Alexander
ну все - лечь и заплакать
Вот так и бросаются проекты на полпути :)
std::slavik
https://google.github.io/flatbuffers/flatbuffers_guide_use_python.html вот еще дичайшая звонкая и по красоте штука
Roman
Если что, то у меня не 10K записей, как у товарища, а около 100M 😊, так что мне база точно нужна.
Anonymous
Парни, есть нормальная программа под linux, для рисования Блок-схем???🥺🗯✅