Artem
туда сюда копировать это такое
Artem
туда сюда копировать это такое
ток потом можно больше проблем хапнуть. Каналы и сделаны для синхронизации через копирование данных
Artem
если не хочешь копировать, юзай mutex
Artem
синхронизацию через память
Artem
Норм, если ты не планируешь с ней работать со стороны отправителя
никто не хочет с ней работать. Она готова и ее только сунуть в реббит и забыть
aadz
туда сюда копировать это такое
Мне очень нравится твой ник, но письменность у тебя - детсадовская какая-то. Пожалуйста, будь тщательней!
Илья
никто не хочет с ней работать. Она готова и ее только сунуть в реббит и забыть
Структура большая? Если она на стеке, то копировать дешевле
Илья
Такое бенчить стоит
Artem
хм у меня в структуре поле Data []byte. Значит мне лучше скопировать а слайс все равно передастся по ссылке. не?
Artem
или оно копируется при передаче по каналу?
Nikita
ага
Так а в чем сложность?
Igor
Так а в чем сложность?
Получая текущую страницу, нужно понимать, есть ли там ещё страницы, чтобы делать или не делать запрос на следующую страницу.
Igor
ну сделай COUNT(*) перед этим
ну вот да, сейчас так и делаю.
aadz
count(*) - это ад!
саша
Igor
count(*) - это ад!
готов выслушать райские предложения =)
Artem
ага, ток это дорого это
Artem
открой доклады с хайлоада по типичным оптимизациям в бд/приложениях
vld
beego, кто репликацую делал?
aadz
Если в табличке есть ключевой индекс, то надо count по этому индексу, чтобы не мучать базу
саша
чойта?
эх, ща бы задавать тупые вопросы не зная контекста высказывания
саша
Nikita
count(*) - это ад!
count есть count, а если пользоваться не умеешь, то это не проблемы count
Nikita
постгрес умная в этом плане?
Да легко проверить, поставь перед запросом EXPLAIN ANALYZE
aadz
база итак должна быть достаточно умная, чтобы догадаться
база должна быть честная, а не умная. Поэтому в нормальных базах count(*) это ад
Artem
база итак должна быть достаточно умная, чтобы догадаться
лол предлагаю тебе запилить стартап: бд с ии. забирай идею
саша
база должна быть честная, а не умная. Поэтому в нормальных базах count(*) это ад
> база должна быть честная, а не умная Честным должны быть только ассемблер и машинные коды, и то в современных процессорах это далеко не так.
Igor
Да легко проверить, поставь перед запросом EXPLAIN ANALYZE
count(*): "Planning time: 0.108 ms" "Execution time: 1.728 ms" count(id): "Planning time: 0.144 ms" "Execution time: 3.094 ms"
aadz
постгрес умная в этом плане?
PostgreSQL как раз честная база в этом плане
саша
> база должна быть честная, а не умная Честным должны быть только ассемблер и машинные коды, и то в современных процессорах это далеко не так.
Если бы современные базы или, например, компиляторы, были честными, а не умными, то софт бы работал на порядок медленнее.
aadz
Если хочешь получить количество записей в табличке - спроси просто сколько записей в ключевом индексе. Это - любая база тут же скажет, без ползанья по диску
Igor
к слову https://habr.com/post/126233/
саша
Если хочешь получить количество записей в табличке - спроси просто сколько записей в ключевом индексе. Это - любая база тут же скажет, без ползанья по диску
Вам любой разработчик БД скажет — не мешайте оптимизатору запросов работать, пока в этом не появится необходимость.
aadz
так я любому разработчику и не мешаю :)
aadz
оптимизатору :)
саша
так я любому разработчику и не мешаю :)
Программист - очень неэффективный оптимизатор, когда дело касается вопросов микрооптимизаций.
Ilya
Раз уж про БД говорим - как забить базу фейковыми данными для стресс-теста? Если вопрос покажется простым, сорян
aadz
тема уже переходит в фольклерную область, в общем. Не думаю, что тут много кто думал по-настоящему об отпимизации SQL-запросов :)
aadz
Программист - очень неэффективный оптимизатор, когда дело касается вопросов микрооптимизаций.
А тут - никакой микрогоптимизации. Просто надо спросить count по ключевому индексу. А count(*) - это не всегда то, что все думали
Marperia
Прокомментируйте кто, пжлст Допустим, у меня стоит лоад бэлансер на основном сервере, он проксирует запросы на сервера с бизнес-логикой (по степени загруженности), которые используют большое количество slave-БД для чтения и одну master-БД для записи. При этом есть всякие мелкие запросы типа «поставить лайк», и их много. Стоит ли использовать для этого какую-нибудь быструю NoSQL, или как ещё извратиться, чтобы не загружать ими центральную БД?
Marperia
можно их в эш складывать. А потом потихоньку обновлять чтобы лока небыло
Типа ставить всякие Redis/RabbitMQ на серверах с бизнес-логикой, записывать в очередь лайки, а потом формировать один запрос для одной записи с этими лайками и отсылать?
Marperia
И соответсвенно дёргать значения лайков с кэша, а не с БД?
Marperia
@onokonem спаси помоги, я знаю, ты можешь
Daniel
А?
Daniel
Я в дороге
Daniel
В чем вопрос?
Marperia
Эскезе муар
aadz
NoSQL, на изменение данных будет вряд ли лучше SQL
Marperia
если нет проблем с перформансом на 1 БД, то зачем париться
Там чтения с БД на порядки больше, чем записи, поэтому разношу на slave-master. Но вот лайки...
Pavel
Там чтения с БД на порядки больше, чем записи, поэтому разношу на slave-master. Но вот лайки...
ну я про лайки и говорю, зачем париться, если работает и запасов по мощности хватает
Subbotin
блин. так мало библиотек переехали на go.mod пока
Илья
Там чтения с БД на порядки больше, чем записи, поэтому разношу на slave-master. Но вот лайки...
Пиши в таблицу только insert, в очереди разгребай лайки, потом чисти таблицу
Subbotin
блин. так мало библиотек переехали на go.mod пока
например не вижу ни одной библиотеки для toml с go.mod
Marperia
ну я про лайки и говорю, зачем париться, если работает и запасов по мощности хватает
По прогнозам уже через две-четыре недели хватать не будет
Yuri
Почему нельзя положить в кэш и дергать оттуда? или я чет не понимаю?
Marperia
Пиши в таблицу только insert, в очереди разгребай лайки, потом чисти таблицу
https://t.me/gogolang/154162 Так, что ли? Я совсем недавно в этом вашем хайлоаде
Pavel
1) шардинг 2) какую-нибудь кассандру воткнуть на лайки 3) очередь
Илья
Я такое без очереди, через хип таблицы делал
Artem
например не вижу ни одной библиотеки для toml с go.mod
а зачем им переезжать? если там тег стоит, то уже хорошо
Marperia
Я такое без очереди, через хип таблицы делал
Это MySQL в оперативке, если я правильно помню? Key-Value же, типа редиса?
Pavel
в любом случае лайки можно как отдельный сервис запилить и сделать под него отдельный сторадж
Илья
++
Pavel
потому что как я понял это единственный функционал, который напрягает базу
Marperia
в любом случае лайки можно как отдельный сервис запилить и сделать под него отдельный сторадж
В общем да, наверное так и сделаю. Что посоветуете для хранения?
Artem
и под стораж монгу выкатить например
Pavel
В общем да, наверное так и сделаю. Что посоветуете для хранения?
куча вариантов выше была, вы только знаете требования по производительности записи/чтения, не мы 🙂