Народ, а посоветуйте плз - может, есть готовое решение для хранения переменных/объектов/структур в памяти, типа мап, но при этом с возможностью индексирования и поиска не только по основному ключу, но и, например, по значениям переменных в хранимых структурах? Ну или там, с ручным заданием нескольких ключей для индексирования и поиска Для чего нужно: есть большушая куча объектов в бд, сложных, со связями между собой, с которыми постоянно необходимо что-то делать (через опр.промежутки времени) Постоянно терзать бд для их выбора - неоптимально, можно ведь держать все в памяти и дергать базу только ддя обновлений и, например, периодических синхронтзаций Но хочется делать это удобно :)

Погугли в сторону golang embedded in memory dB Есть несколько штук

В sql обычно есть уникальный первичный ключ

Но по сути вопроса - иметь свою презентацию в памяти того, что есть в базе - это гибельный путь

с кешами засада в держании их в консистентном состоянии с базой и это сложно

ну хозяин - барин)

ну и да, так или иначе, в каком-то виде, всё равно мне нужно в памяти список оборудования держать, чтобы запускать его периодические опросы

Товарищи, есть тут кто активно контрибьютит в open-source? Хочу влиться в проект.

а сейчас что мешает это сделать?

ладно, совсем близкий к жизни пример, а то у меня абстракции непонятные получаются :) Есть, например, какое-то сетевое оборудование Оно опрашивается раз в какое-то время При каждом опросе проверяется куча разных штук — например, по какому-то протоколу обнаруживаются соседи (такие же железки) на каждом порту свитча на одной железке 50 портов ; у каждого порта - уже найденные ранее соседи ; при каждом опросе нужно смотреть — изменилось ли что-либо с предыдущего опроса, если да — обновлять данные в БД таких железок - тысячи при достаточно частом опросе - получится тупое непрерывное дрочево БД постоянной выборкой одних и тех же данных, в 99% случаев неизменных :(

Попробуйте сначала без кеша

@wingz может это вам подойдет https://tarantool.io/en/product/unwired-iiot.html

@wingz может это вам подойдет https://tarantool.io/en/product/unwired-iiot.html

#wingz

да ничего, в общем-то ; это я возражал на "иметь свою презентацию в памяти того, что есть в базе - это гибельный путь"

ну так а если у меня вся база работает на это приложение? :)

ну так а если у меня вся база работает на это приложение? :)

Подскажите, есть ли отстойность в таком решении. На вход в функцию подаю канал значений, внутри функции проверяю на существующие значения в базе (мне нужны только новые), на выход из функции отдаю канал из новых значений.. в цикле прямо так и делаю: for item := range values { // check if item is new newValues <- item } return newValues

да, он там обернут, забыл упомянуть :)

И newValues должен передаваться в функцию

И newValues должен передаваться в функцию

это для чего?) я же этот канал возвращаю, по сути своеобразный пайп получается

я кстати закрыть канал забыл, вот это уже косяк

https://i.imgur.com/AFTk3jd.png

А разве для go не надо передавать переменные в функцию все равно?

Ясно, спс)