Roman
В конце концов можно будет вообще весь респонс кешить
Roman
Подумай, что будет если кеш недоступен
.
Это самый лучший вариант
Я к нему больше и склоняюсь
Roman
Или часть кеша недоступна
.
Возьмём метод GetUser Сначала идём в кэш Потом в базу, если в Кеше нет данных или он недоступен
Roman
Идти в базу?
Кто это будет решать? Кто будет пытаться восстановить доступ к кешу?
.
Что если в кеше старые данные?
При обновлении данных в любом случае обновляем кэш. Если нам не удалось его обновить – не беда, есть TTL
.
Рано или поздно запись в кэше дропнется
.
Ну вот будет у нас какое то время несогласованость
.
В моем случае это не будет проблемой
Roman
Ну вот будет у нас какое то время несогласованость
Если у тебя там деньги - это ой :) да и не деньги тоже.
.
Если у тебя там деньги - это ой :) да и не деньги тоже.
Тут спорно. Во многих банковских приложениях после какой либо операции какое то время показывается старый баланс
Pavel
Если у тебя там деньги - это ой :) да и не деньги тоже.
где не нужен ой нет распределенности
Pavel
Тут спорно. Во многих банковских приложениях после какой либо операции какое то время показывается старый баланс
зависит, во многих банковских приложениях -- они не ходят а базу биллинга/процессинга, а ходят в базу, которая выгружается спец приложением отдельно в отдельную базу, типа кеша
Roman
Что делают в таком случае?
Зависит от данных. Можно сделать версионирование, например.
Pavel
и то что написано в приложении обычно просто воздух
.
Зависит от данных. Можно сделать версионирование, например.
Тогда надо как то определить что данные устарели
Roman
Тогда надо как то определить что данные устарели
Легко. У тебя есть версия объекта, которая входит в имя ключа.
Pavel
Тогда надо как то определить что данные устарели
надо определить что какие у тебя требования к данным сначала
Roman
Когда что-то обновляется - инкремент счётчика
Roman
И в итоге, все ключи что зависят от этого счётчика становятся невалидны
Pavel
а-ля нужна ли отказоусточивость, строгая консистентность, какой профиль операций будет (например, 99% чтение, 1% запись) и т.п.
Pavel
чем меньше кешей -- тем меньше проблем
.
Очень интересный дискас вышел
.
Всем спасибо кто помог хоть как то прояснить многие вопросы для меня 👍
Roman
Тогда надо как то определить что данные устарели
это называется "инвалидация кэша" и является одной из главных проблем CS
Roman
самый крупный банк в стране )
...тоже может нанять самых бездарных программистов в стране))
Daniel
mntv не менее - во всех банках, которыми я пользовался, так
Daniel
потому, что без кеша нельзя, а с кешом - вот так
.
...тоже может нанять самых бездарных программистов в стране))
Просто самые крутые перебежали в другой 😀
Roman
короче ждёмс "HP The Machine" и никакие cache'ы для подобных данных будут не нужны
Roman
160 TB NVRAM в Pool'е & memory driven computing
Kirill
потому, что без кеша нельзя, а с кешом - вот так
А кто сказал, что после операции нельзя обновить кеш?
Roman
А кто сказал, что после операции нельзя обновить кеш?
так сказал программист, который писал банковское ПО 10 лет назад, он же специалист!
Daniel
А кто сказал, что после операции нельзя обновить кеш?
операция проходит в бекофисе, а кеш - он в вебе. доступ из бекофиса в веб - это зашквар
Roman
операция проходит в бекофисе, а кеш - он в вебе. доступ из бекофиса в веб - это зашквар
в любом случае приложение которое нормально не может обновить отображение состояния электронного счёта после транзакции в 2018 это какой-то кошмар
Daniel
но они все такие, коллега
Daniel
что российские, что английские, что немецкие
Kirill
операция проходит в бекофисе, а кеш - он в вебе. доступ из бекофиса в веб - это зашквар
Зашквар — это когда из-за кеша юзер думает, что операция не прошла и делает её ещё раз, а сбросить правильно сделанный кеш — не зашквар
Roman
банковская сфера...
Roman
UI должен быть отзывчивым. Лайки на фоточке то ладно... могу 5 минут подождать пока обновится а вот банковский счёт...
Roman
мне просто кажется что кто-то не особо любит своё дело
Daniel
может быть. но, скорее, кеш - это не только решение, но и новые проблемы
Daniel
и компромис
Daniel
и то, как бкдет выглядеть компромис, решают не технари
Roman
я уверен уж банки то точно себе это могут позволить 🙂
Daniel
не все и не всегда
Roman
пару терабайт NV памяти разве не хватит для проведения парочки сотен тысяч транзакций в сек?
Daniel
возможны варианты
Roman
так-же я слышал что tarantool якобы способен работать на volatile памяти, не теряя данные при падении (т.е. они восстанавливаются якобы из логов, хотя хрен пойми как)
Daniel
при падении чего?
Roman
при падении чего?
машины, якобы
Daniel
а
Daniel
да, тарантул пишет лог, и при старте его раскручивает
Roman
разрабочики хвастаются тем что мол одна нода тарантула способна заменить БД фарму
Roman
из-за того что работает полностью в пределах памяти
Daniel
в пределах памяти любая база очень быстрая
Roman
естественно. Поэтому, если сохранность и согласованность данных гарантируется - тогда весь банковский API нужно помещать в пару тб памяти
Roman
и всё будет окей
Aleksander baltazor
нет, так как любые транзакции нужно еще защищать через fsync
Aleksander baltazor
и тогда все равно будет идти большая нагрузка на дисковую подсистему
Aleksander baltazor
а для банка очень важна сохранность транзакции
Roman
поэтому NVRAM)))
Aleksander baltazor
плюс у тарантула нету именно синхронной репликации
Aleksander baltazor
а для банка асинхронная репликация может вылиться в большие финансовые потери