/report

/report

@SinTeZoiD с ботом помочь?:)

А можно в примерах?

простой рбак если acl полноценный на уровне дата модели приложения не нужен, https между микросервисами, мирроринг продового траффика на стейдж, трейсинг без впиливания инструментализации в код. Про роутинг по business-related данным при энричменте хедеров можно не говорить это везде показывается

коллеги, а кто-нибудь делал алертинг логов k8s в slack? сейчас есть связка fluentd->eleasticsearch, хочу на определенные события слать нотификации кто-нибудь делал?

так понял, нужен x-pack покупать для этого либо заворачивать через logstash

Есть elastalert

Сам не пользовался, но планирую

спасибо, посмотрю

! спам

Есть elastalert

Очень удобен, можно легко все кастомизировать. С документацией только беда, многое путем чтения issues на github решалась. Ну в разных версиях ES есть свои особенности)

надо конкретизировать вопрос

Сам не пользовался, но планирую

Мужества вам и упорства довести дело до конца. У нас не хватило сил на борьбу с этим язделием

Не рекомендую

Не рекомендую

А есть альтернативы?

А есть альтернативы?

Перешли на саас - сумолоджик

Мы с него ушли

Понял, спасибо

Я саас юзал opbeat для этого, их эластик купил и сделал apm elasticsearch - только в фичах интеграции и алерта по логам нет (надеюсь появится иначе зачем opbeat покупали)

Мы с него ушли

А почему? Цена?

Да, стоимость конская просто

Как и у любого нормального сааса

коллеги, а кто-нибудь делал алертинг логов k8s в slack? сейчас есть связка fluentd->eleasticsearch, хочу на определенные события слать нотификации кто-нибудь делал?

графана теперь умеет

графана теперь умеет

шо? графана по логам?

алерты?

Графана умеет (зачем-то) коннектиться к эластику емнип

Алерты там довольно базовые

Графана умеет (зачем-то) коннектиться к эластику емнип

datasource. можно использовать графану для построения графиков из логстеш или флюэнта

datasource. можно использовать графану для построения графиков из логстеш или флюэнта

Мне не понятен физический смысл этого - делать график количества ворнингов селинукса, например?

наверное, есть какой-то смысл. я видел графики нагрузки на сервер, которые строились методом парсинга логов

но делалось это в кибане (все равно извращение)

Мне не понятен физический смысл этого - делать график количества ворнингов селинукса, например?

у нас есть график эксепшенов наглядный

аксесс логи еще норм работают

аксесс логи еще норм работают

А чем кибана не годиться?

А чем кибана не годиться?

кибана ок, но в графане у нас туча датасорсов

разные прометеи, эластики, azure metrics

немного про разное они

"наглядный график эксепшенов" - это чтоб менеджеру отчитаться что не так-то и много или они actionable?

конечно экшенабл

после деплоя херакс фаталы пошли

или там деньги в смс гейте закончились

Тогда отчего бы не сделать сайдкар с метриками для прометеуса и штатным алертменеджером? Иначе хранилка логов еще и пирожки печет

еще это изи подсчет ивентов по логам, которые не были унесены в пром метрики

тут вопрос в гибкости

нам не нужны сайдкары, все приложения в кубере и так инструментированы

Вот именно, ящитаю делать статистику релиза проще в ES, а actionable - в метрики

но в кубере у нас 7

а вне 37

Иди под vip хвост со спамом своим

Там всего 20 минут, вы теряете время)

или там деньги в смс гейте закончились

А нельзя эту метрику сразу в графану/алерты?

Кажется это тема для церкви метрик Подумал, что мы там и обсуждаем

Кстати, если уж тема про логи, то поделитесь кто как event-ы в кубере собирает?

Графана±мойра норм тема для нотификаций. В графану можно грейлог цеплять. Но это не точно?

Кстати, если уж тема про логи, то поделитесь кто как event-ы в кубере собирает?

eventrouter пишет все events себе в stdout в json формате. Дальше их можно увезти в виде логов и делать что хочется

eventrouter пишет все events себе в stdout в json формате. Дальше их можно увезти в виде логов и делать что хочется

Спасибо, посмотрю

Прибрали?

коллеги, а кто-нибудь делал алертинг логов k8s в slack? сейчас есть связка fluentd->eleasticsearch, хочу на определенные события слать нотификации кто-нибудь делал?

Логи это информация для дебага. Алертить должен мониторинг

Логи это информация для дебага. Алертить должен мониторинг

вы книгу пишите?

вы книгу пишите?

В плане?

ERROR: S client not available

Первая заповедь церкви метрик

Первая заповедь церкви метрик

не упоминать про Z

#проклято

Возможно (просто возможно) человек имел ввиду агрегацию ошибок по признаку и создание инцидента (новый, регрессия). Тогда только логи, и такую штуку я сам ищу на замену проприетарному google stackdriver

попробовал слать нотификации из elasticsearch в slack через elastalert https://github.com/Yelp/elastalert поставил через helm чарт stable/elastalert заработало без напильника и бубна из коробки

@nyoroon @f41gh7 @s2504s FYI ^^^^

Вас количество ишью не пугает?

Для такого скромного проекта

ишуев бояться, в k8s не деплоить

#проклято

С чего бы?

как в CoreDNS добавить приватные зоны. По принципу как в unbound local-data: "private.my. IN A 10.1.1.32" ?

чтоб отрезолвить свой докер репозитарий при деплое, нужно отрезолвить этот хост

Вас количество ишью не пугает?

я мельком просмотрел, одна из внушительных частей ишуев касается того, как это правильно использовать, как правильно писать рулесеты для нотификаций.

Товарищи кто ставлкивался с падением kube-proxy - listen tcp 127.0.0.1:10249: bind: address already in use? Как лечили?

Коллеги, кто запускал percona-xtradb-cluster из каталога Rancher2? Есть ли способ открыть публичный доступ к кластеру без форка чарта? Моих знаний хватило в Workload указать порт маппинг NodePort 3306 => 3306 но это не помогло ? Куда копать не понимаю… а так хочется к базочке подключится со своего компа.

С чего бы?

жаббикс же

ох, натянул наверное порчу на себя сейчас

ох, натянул наверное порчу на себя сейчас

замолите грехи, поставьте за здравие prometheus с replicafactor:3

@SinTeZoiD

@SinTeZoiD

Да я смотрю и без меня чистится спам

замолите грехи, поставьте за здравие prometheus с replicafactor:3

Такое можно искупить только кровью.

Heartbleed

Ну или переводом адепта Z в стан любителей прома

Я не хочу это гуглить, но зная этих поехавших предполагаю, что есть возможность мониторинга куба Z

что вы знаете о боли? 7 лет назад контрибютил в заббикс

что вы знаете о боли? 7 лет назад контрибютил в заббикс

7 лет назад это было нормально

даже 7 лет назад мне это казалось чем-то не нормальным.