Ilya
типа catch(OutOfMemory) Environment.FailFast?
Vladimir
вот пёс, ладно надо что то придумать
можешь сделать liveness check, чтобы кубер ходил на сервис и ждал 200 ответа
Ilya
можешь сделать liveness check, чтобы кубер ходил на сервис и ждал 200 ответа
дак он ходит, только чек не проверят доступную память
Ayrat
500? с оом?
Ayrat
тут чот не то
Vladimir
дак он ходит, только чек не проверят доступную память
так сервис заапдейть чтобы 500 возвращал
Ilya
а наверное надо бы. есть какой то збс код для правильных лайвчеков кубера для дотнета?
Ilya
тут чот не то
вот это меня тоже беспокоит, но разбираться нужно потом
Vladimir
так нету правильных, делаешь любой эндпойнт и на него натравляешь лайвчек, внутри него свою логику пишешь какую нужно
Ilya
Microsoft.Data.SqlClient.SqlException (0x80131904): A transport-level error has occurred when sending the request to the server. (provider: TCP Provider, error: 35 - An internal exception was caught) ---> System.OutOfMemoryException: Exception of type 'System.OutOfMemoryException' was thrown.
Vladimir
ну сделай по-умному) сохраняй последний эксешпн и чекай его)
Kirill
а наверное надо бы. есть какой то збс код для правильных лайвчеков кубера для дотнета?
да из коробки хелсчеки есть в аспнете, в документации мсфта
Vladimir
миллион разных вариантов)
Ayrat
я вообще думал ООМ кладёт CLR
Ilya
да из коробки хелсчеки есть в аспнете, в документации мсфта
там есть инфраструктура, но самих хелсчеков нету
Ayrat
а тут перехваченный OOM да ещё и с продолжением работы
Vladimir
я вообще думал ООМ кладёт CLR
это похоже на кастомное бросание oom из недр либы
Mikhαil
А за такое ногами не пиздят? Или я ошибаюсь и это норм практика?
Ilya
это похоже на кастомное бросание oom из недр либы
сука это уёбищное поделие от microsoft.sqlclient со встроенной аутентификацией ажуры
Ilya
Действительно кидают. https://github.com/dotnet/SqlClient/blob/main/src/Microsoft.Data.SqlClient/netfx/src/Microsoft/Data/ProviderBase/DbConnectionPoolIdentity.cs#L163
Ilya
И ловят тоже, рядом с SO. https://github.com/dotnet/SqlClient/blob/main/src/Microsoft.Data.SqlClient/netfx/src/Microsoft/Data/SqlClient/SqlInternalConnection.cs#L349
Ilya
В принципе, объяснимо? Не уверен, что юзеры дотнета ожидают падение сервиса, если слишком много данных пытаются из базы вытащить, например.
Ilya
ладно, понаблюдаю, что к чему там
Ilya
а кто нить знает коробочное решение для http абстракции над pub sub? типа как дапр, только на дотнет?
Ayrat
Ilya
вебсокет?
не, не, не, http, регаешь эндпоинт и его дергают при эвентах
Ilya
без всяких вебсокетов и http2
Denis
Sse
Denis
Из коробки
Denis
Server sent events
Ilya
Server sent events
да мне не для браузера
Ilya
для межсервисного взаимодействия
Anatoly
Коробку не видел, строил сам
Anatoly
Там всё просто
Ilya
@aensidhe ты ещё не разбирался со стримами редиса? я тут делаю пуш в стрим, но при чтении стрим пустой. такое возникает не постоянно, просто в какой то момент стримы не наполняются данными
Ilya
предполагаю, это может быть связано с кластерным режимом
Anatoly
Спроси антиреза в твитторе
Ilya
накину ещё логов тогда)
Anatoly
лучше, наверно в багтрекер сразу сходить
Ilya
лучше, наверно в багтрекер сразу сходить
странно предполагать, что есть ошибка в редисе. я ещё понаблюдаю, может быть это где то у меня косяк
Ilya
https://www.theverge.com/2021/11/1/22756934/g20-oecd-15-percent-global-corporate-tax-rate-havens-evasion-tech-giants
Kirill
в прометеусе можно хранить трейсы, наподобие с тем как в жагере?
Kirill
с делением по спанам
Vasily
Рекомендую sentry посмотреть
Kirill
сентри умеет собирать трейсы со спанами? у нас там только эксепшены
Vasily
Что такое трейс со спаном?
Vasily
Сентри умеет перф метрики
Mikhαil
Подход для трассировки в распределённых системах
Vasily
Я думаю, кастомными тегами можно навесить
Kirill
https://devblogs.microsoft.com/dotnet/observability-asp-net-core-apps/#using-applications-insights типо такого
Mikhαil
Я думаю, кастомными тегами можно навесить
Да Трейсам в сборе метрик нечего делать
Mikhαil
Кирилл какого-то монстра собирает)
Kirill
ну слои хочу получить, что бы понимать какая часть приложения тупит
Vasily
Бирюзовый
Vasily
Кирилл
Kirill
вроде базовая вещь, почему монстр?
Vasily
"Я не зеленый, я бирюзовый" (с) Дракс Guardians of Galaxy
Kirill
ньюрелик из коробки так делает, но он только внешние запросы трекает
Vasily
Ты что хочешь-то?
Kirill
запрос состоит из похода в базу, обработка сообщения, поход во внешний сервис. Хочу увидеть по слоям кто больше тупил
Vasily
Но чтобы не попасть на бабки, его стоит локально развернуть
Kirill
да лан, сделаю прост на базе джагера. Я чет думал в прометеусе тоже так можно(
Mikhαil
да лан, сделаю прост на базе джагера. Я чет думал в прометеусе тоже так можно(
Ну то что ты выше описал вроде как раз задача джагера условного, а не прометеуса Прометеусом ты можешь метрики по слоям сделать и оценить как динамика меняется и какие-то тренды выявить