Ilya
это тебе не пульсар
я честно говоря в АХУЕ от того, что хотят хранить данные в кафке вместо БД
Vladimir
я честно говоря в АХУЕ от того, что хотят хранить данные в кафке вместо БД
это маркетологи конфлюэнта эту идею популяризовали
Vladimir
это маркетологи конфлюэнта эту идею популяризовали
но без выгрузки в колдсторадж эта идея нежизнеспособна
Ilya
Но зачем? О_о
потому что СТРИМ ПРОЦЕССИНГ!
Ilya
Логично.
Ilya
Если стрим процессинг, то надо данные хранить в кафке. Записал.
Крылатый
Сначала они БЛ на хранимках делают, потом в жопу ебутся данные в кафке хранят.
Vasily
Это же Илья
Ayrat
я честно говоря в АХУЕ от того, что хотят хранить данные в кафке вместо БД
это сразу забей. Там тебе будут вешать лапшу на уши про ACID и infinite durable, а ты сразу с порога попроси их реализовать протокол покупки товара в магазине и смотри как они будут закапывать себя - два юзера поордерили последний товар. Пусть придумают архитектуру на кафке as a Database где только один юзер получит товар, а второй получит залупу.
Ayrat
и это ещё простой кейс!
Mikhαil
Раньше даже была рекомендация так не делать где-то в доках если ничо не путаю
Vladimir
а чем аргументировали?
ну типа один продукт покроет все ваши нужды)
Ayrat
там даже если вебсервер сверху навесить с кучей чеков - нихуя не выйдет. Вот два юзера ломятся со своими ордерами. Вебсервер читает кафку, видит что товар есть по стейту инвентаря. Продьюсит два евента покупки. Вот мы и получили залупу. Тут кто-то скажет из зала - А МЫ СДЕЛАЕМ МИКРОСЕРВИС, КОТОРЫЙ БУДЕТ ЧИТАТЬ ЕВЕНТЫ ОРДЕРОВ И ОЗАЛУПЛИВАТЬ ВТОРОГО ЮЗЕРА. А ты им по лицу проведи своей залупой и скажи что такой сервис может работать только последовательно и эти мудаки изобрели LOCK только в виде микросервиса. А нормальные люди в таком случае просто бы локнули строчку/табличку/какой-то лок в НОРМАЛЬНОЙ бд без микросервисов
Ayrat
можно сделать, если сильно захотеть, нужно отдельный сервис бронирования или списания, пусть последовательно бронирует товары
Тут кто-то скажет из зала - А МЫ СДЕЛАЕМ МИКРОСЕРВИС, КОТОРЫЙ БУДЕТ ЧИТАТЬ ЕВЕНТЫ ОРДЕРОВ И ОЗАЛУПЛИВАТЬ ВТОРОГО ЮЗЕРА.
Mikhαil
Концепция один продукт покроет все нужды должна была ещё в 2000х умереть по-моему
Ayrat
что может быть лучше чем пускать стрим событий через бутылочное горлышко
Ayrat
вообще никаких проблем в архитектуре нет
Vladimir
ну если ты по продукту партишнишь то все ок
Vladimir
ну если ты по продукту партишнишь то все ок
но проблема когда юзер купил несколько продуктов)
Ayrat
ну если ты по продукту партишнишь то все ок
ага, а потом приходит продакт и говорит что надо выбирать из двух ордеров не первый, а тот у которого подписка оплачена и твой партишн идёт по пизде
Ayrat
а топик не пере-партиционируешь!
Ayrat
а вот новый индекс в бд придумать изи
Ayrat
короче, не надо юзать кафку как БД
Vladimir
но проблема когда юзер купил несколько продуктов)
придумал кстати решение - можно разбить заказ на несколько топиков, а потом саггрегировать и если все сошлось, то паблишить результат, а если нет, то отменять частичные
Igor
Да
Ну тогда надо из скалы затаскивать implicit parameters, а то будет не реально работать с большим кол-вом параметров
Ayrat
придумал кстати решение - можно разбить заказ на несколько топиков, а потом саггрегировать и если все сошлось, то паблишить результат, а если нет, то отменять частичные
А потом приходит продакт и говорит - у нас в заказе цена ордера зависит от комбо позиций и промо на разные группы товаров
Ayrat
и ты начинаешь последние волосы из мошонки выдирать
Doge
Ну тогда надо из скалы затаскивать implicit parameters, а то будет не реально работать с большим кол-вом параметров
Можно проще, условный Reader с зависимостями одним обьединенным параметром
IdiocyAcceptance
Указал http параметры, заинжектил сервис, вызвал сервис
Ayrat
ну просто не надо юзать кафку как бд вот и всё) где-то должен быть железобетонный узел в системе который паблишит железобетонные события. Этот узел должен уметь в уровни изоляции, транзакции и быть ACID. Это ваш Source of Truth Далее можно уже разливать кафками/пульсарами по всей системе. Это збс схема
Vladimir
и ты начинаешь последние волосы из мошонки выдирать
я согласен, что для этого кейса это так) но если у тебя (вдруг) звезды сошлись и ддд с полностью отдельными аггрегатами где аггрегаты только по одиночке обрабатываются, то может зайти)
Igor
Указал http параметры, заинжектил сервис, вызвал сервис
Ну там еще в кафку сходить, в базку записаать (а базка разбита на 10 репозиториев), логами обмазать Короче жизнь она сложная
IdiocyAcceptance
А причём тут minimal api?
IdiocyAcceptance
Если ты всю эту логику в лямбды собрался запихивать
Igor
Можно проще, условный Reader с зависимостями одним обьединенным параметром
Тут сложно гранулярность контролировать, все будут видеть все мешок зависимостями.
IdiocyAcceptance
То могу сказать что это странно как минимум.
IdiocyAcceptance
)
Ayrat
я согласен, что для этого кейса это так) но если у тебя (вдруг) звезды сошлись и ддд с полностью отдельными аггрегатами где аггрегаты только по одиночке обрабатываются, то может зайти)
ну вот фишка в том что с Kafka as DB ты не соскочишь и оно тебя сильно ущемляет по кругу. Плюсов я лично не вижу никаких вообще. Почему бы сразу не жыдь как человек
Ayrat
и пространство для манёвра больше
Igor
То могу сказать что это странно как минимум.
Ну а нах оно тогда нужно, ты всега же начинаешь с мелочи, а потом оно разрастается, а переписывать времени нету
IdiocyAcceptance
Укажи параметры и нужный сервис/пайплайн/медиатр и просто вызови его
IdiocyAcceptance
Ну так любой код так рабоает, minimal api или контроллеры или ещё что
Igor
Пока выглядит как игрушечное апи, для прототипирования
IdiocyAcceptance
Они нужны только как точки входа
Doge
Тут сложно гранулярность контролировать, все будут видеть все мешок зависимостями.
Ну условно так делать: Reader<Env, Task<IResult>> MyAction<Env>(...) where Env: IHas<DependencyA>
IdiocyAcceptance
Логика всегда в отдельных сущностях
IdiocyAcceptance
Пока выглядит как игрушечное апи, для прототипирования
Так тоже самое что и контроллеры, просто с меньшим оверхедом
IdiocyAcceptance
Ты в контроллере делаешь myService.DoBlaBla на определённмо роуте
IdiocyAcceptance
И тут так же
Vladimir
ну вот фишка в том что с Kafka as DB ты не соскочишь и оно тебя сильно ущемляет по кругу. Плюсов я лично не вижу никаких вообще. Почему бы сразу не жыдь как человек
я в итоге тоже к этому пришел) но есть люди на конференциях которые рассказывают что им зашло и они довольны. В пульсаре тоже такие есть, причем там технически гораздо это лучше делать
Doge
Это че за язык?
Мне было лень вначале шарповую сигнатуру писать, но в итоге решил что ладно
Igor
Ну условно так делать: Reader<Env, Task<IResult>> MyAction<Env>(...) where Env: IHas<DependencyA>
А как работает Has? Что это такое? DependencyA это интерфейсы типа ILogger?
Doge
А как работает Has? Что это такое? DependencyA это интерфейсы типа ILogger?
Я что-то шарповый синтаксис совсем забывать стал, переправил ещё раз
Doge
А как работает Has? Что это такое? DependencyA это интерфейсы типа ILogger?
IHas - это интерфейс который позволяет из Env достать инстанс нужного типа, если он там есть DependencyA - ну любой тип, который ты хочешь иметь зависимостью
Igor
IHas - это интерфейс который позволяет из Env достать инстанс нужного типа, если он там есть DependencyA - ну любой тип, который ты хочешь иметь зависимостью
Те в теории это может выродиться в Reader<Env, Task<IResult>> MyAction<Env>(...) where Env: IHas<DepA>, IHas<DepB>, IHas<DepC>
Doge
Но это как у тебя с обычным DI могут конструкторы в контроллере в десяток аргументов
Igor
Ок, в общем понятно. Интересный вариант да.
IdiocyAcceptance
С DI такое не очень хорошо работает, по нашему опыту
Doge
IdiocyAcceptance
Нужны сборные типы, которые включают в себя все эти зависимости
Doge
В больших системах я так не рекомендовал бы делать, когда есть обычный DI
IdiocyAcceptance
Лично мне кажется что просто сделать type MyBlaBlaService(dep1, dep2, dep3) = ...
IdiocyAcceptance
app.MapGet("user", fun (id: string) (service: MyService) = myService.GetUser id ) ....
IdiocyAcceptance
И оставить минимальные апи в покое
IdiocyAcceptance
Не надо думать что они решают глобальные проблемы композиции или DI
IdiocyAcceptance
В больших системах я так не рекомендовал бы делать, когда есть обычный DI
Ну вот да. Мы использовали подобный подход при рефакторинге легаси функций с 10 параметрами