но вот если редис лежит или что-то с настройками подключения - это поделие уходит в бесконечную рекурсию

в плане федерейшн или чтобы прометей напрямую в SD разных куберов ходил?

А как лучше? Пока думаю про федерацию

лучше с федерацией

федеративному прометею не надо будет иметь доступ до подов

хмм а папка которая маунтится в миникуб - там какие права? И как оно маунтится, может у юзера от которого миникуб бежит не может в нее писать (я с миникубом не сталкивался, хз как там устроено всё, чисто идеи)

из моих контейнеров запись идет ок в подшаренную папку. Это вопрос контейнера постгре, действий в нем от пользователя 999:999 и миникуба

стандартная практика - в каждом кластере свой прометей, хранит метрики где-то неделю отдельно стоит другой прометей, в который отправляются только избранные метрики из всех кластеров, и тут они уже хранятся несколько месяцев для аналитики

Это не федерация даже.. хм.. это двух уровненная федерация?)

т.е. я правильно понимаю, есть другой контейнер который может писать и читать в PV направленный на эту папку? проблема только с этим конкретным образом postgre?

не, обычная федерация

в каждом кластере прометей + федеративный прометей

Это не федерация даже.. хм.. это двух уровненная федерация?)

так в прометее федерация реализована

кластерные делают какую-то агрегацию и её собирает федеративный

а ваще есть Project Thanos

т.е. я правильно понимаю, есть другой контейнер который может писать и читать в PV направленный на эту папку? проблема только с этим конкретным образом postgre?

ага

с виду интересный с long-term сторейжем

но это обсуждение лучше в церковь метрик, а не сюда

так в прометее федерация реализована

https://banzaicloud.com/blog/prometheus-federation/

Вот такую короче ты рекомендуешь:)

забавно

несколько кубер-кластеров для разных задач

зачем тогда кубер вообще

но вообще да, примерно такая схема

Вот такую короче ты рекомендуешь:)

у нас есть продуктовое требование - использовать datadog поэтому на данный момент мы собирались данные со всех кластеров лить не в отдельный прометей а в датадог) и я не знаю во сколько денег нам это встанет)

ага

https://github.com/kubernetes/minikube/issues/1990 в-общем, нужно сделать постгре контейнер который будет бежать от рута

https://github.com/kubernetes/minikube/issues/1990 в-общем, нужно сделать постгре контейнер который будет бежать от рута

я тоже пришел к такому мнению, все остальное не сработало

несколько кубер-кластеров для разных задач

Географически разные кубера

Это не федерация даже.. хм.. это двух уровненная федерация?)

Это гребаное сегодня и Прометей. В графите аппроксимация данных лет 100 уже как реализована.

Это та ой дикий костыль держать два Прометея, но вариантов - нет

Я написал крон джобу, ходит в репозиторий докера за датой образа, если обновился, то идет в куб и обновляет лейбл деплоймента, кубер делает ролл аут нового образа. В принципе у меня есть готовый докер образ и ямлик для такой джобы

Первый раз вижу cd на cron

Странно

я собираю fluentd, пробовал прикрутить плагин для склеивания стектрейса но в итоге забил - можно и так читать в кибане. Ну и часть мусорных логов фильтрую по паттерну и не отправляют в эластик

Ок, попробую тоже таким путем сходить

я тоже пришел к такому мнению, все остальное не сработало

так баг открытый вот он, другого мнения быть не может :(

Это гребаное сегодня и Прометей. В графите аппроксимация данных лет 100 уже как реализована.

Держать 8 прометеев для 8 кластеров. Плюс 9 глобальный. И видимо одна графана глобальная

Держать 8 прометеев для 8 кластеров. Плюс 9 глобальный. И видимо одна графана глобальная

Увы. Есть еще заббикс...

Увы. Есть еще заббикс...

Хочу без него) надеюсь заменит) посмотрим)

так баг открытый вот он, другого мнения быть не может :(

вопрос не в баге а в элегантной подпорке

Это гребаное сегодня и Прометей. В графите аппроксимация данных лет 100 уже как реализована.

за TICK Stack денег хороших хотят, да и инфлюкс себя дескридитировал уже очень сильно

за TICK Stack денег хороших хотят, да и инфлюкс себя дескридитировал уже очень сильно

А чем инфлюкс?

А чем инфлюкс?

Q: Я хочу взять InfluxDB чтобы запилить X A: Не надо. Q: Но он же такой хороший, вот про него сколько сказано крутого A: Это маркетинг. Не ведитесь. Q: А какие у него проблемы? Вот я в него начал отправлять 20 метрик в секунду и он отлично рабоатет! A: Вот краткий и неполный список проблем на момент версии 1.4 (применимо и к более младшим): 1. Стабильность. Периодически падает и теряет данные. 2. Скорость. Заявленное в маркетинговых бумажках касается не постоянного рейта, а спайков. "Show tag keys from all" на средней базе может положить все. 3. Потребление ресурсов . Сожрать 256ГБ RAM, закусить 320GB свопа и все равно упасть по OOMу - легко (в момент 6и часового запуска). 4. Платная кластеризация.

я все это лично понаблюдал в проде

6-ти часовой запуск оссобенно доставляет

г-ди, ну что за херь? Почему cert-manager не создает приватный ключ к SSL серту? Пользуюсь сраным ранчером 2.0, лучше бы наверное с кубернетиса с консолью начинал.

г-ди, ну что за херь? Почему cert-manager не создает приватный ключ к SSL серту? Пользуюсь сраным ранчером 2.0, лучше бы наверное с кубернетиса с консолью начинал.

я так понимаю это должен быть свежий баг, но не понятно в certmanager или в ранчере это

г-ди, ну что за херь? Почему cert-manager не создает приватный ключ к SSL серту? Пользуюсь сраным ранчером 2.0, лучше бы наверное с кубернетиса с консолью начинал.

зато ранчером можно несколько кластеров рулить)

зато ранчером можно несколько кластеров рулить)

да уж, мне тоже нравится

хмм а сколько метрик в секунду? у меня инфлакс уже больше года в проде но там всего 1гб метрик, мелочь конечно

чтобы знать в какой момент оно упадет

более йобового репа я в своей жизни не видел

более йобового репа я в своей жизни не видел

В чем проблема?

В чем проблема?

2282 открытых issues ?

2282 открытых issues ?

У докера сейчас 3127

Про ceph даже говорить не буду

у кубера 2213

pull requests у ansible конечно атас

сам пытался, три раза отправлял, тупо всем пофигу

2282 открытых issues ?

Не удивил и не напугал. Я тебе скажу так что в коммерческом софте бывает и больше, но ты этого обычно не видишь

Не удивил и не напугал. Я тебе скажу так что в коммерческом софте бывает и больше, но ты этого обычно не видишь

мне доставляет что вы решили ответить на это сообщение дважды))

мне доставляет что вы решили ответить на это сообщение дважды))

Ну да, я потраил еще 30 сек своего драгоценного времени, цени это

на самом деле забавный факт что ранчер так популярен, ждем когда же они как и influx введут платную кластеризацию)

Не удивил и не напугал. Я тебе скажу так что в коммерческом софте бывает и больше, но ты этого обычно не видишь

Мы поражены вашим осведомлением

на самом деле забавный факт что ранчер так популярен, ждем когда же они как и influx введут платную кластеризацию)

Забавный факт использования ранчера для деплоя кубернетиса

Вот что забавляет

бля, превысил лимит сертов от letsencrypt. У них на страницы со ссылкой staging было число 30000, а теперь кидает на фак где пишут что 20 в неделю(

Забавный факт использования ранчера для деплоя кубернетиса

Да не все ли равно если все что не самописное в том или ином виде черный ящик

зато ранчером можно несколько кластеров рулить)

Сомнительное преимущество

Да не все ли равно если все что не самописное в том или ином виде черный ящик

Джангой тоже можно дергать баш скрипты внутри которых пхп

Но зачем???

вот я заметил что дефолтная кибана дико-дико медленная. Нельзя ее как-нибудь ускорить, чтоб она пушила логи в реалтайме через вебсокет какой?

г-ди, ну что за херь? Почему cert-manager не создает приватный ключ к SSL серту? Пользуюсь сраным ранчером 2.0, лучше бы наверное с кубернетиса с консолью начинал.

Ранчер не заменяет kubectl)

Ранчер не заменяет kubectl)

да ну не нифига похоже

да ну не нифига похоже

Расшифруете?

Расшифруете?

Имел ввиду что все равно с kubectl удобно проверять статус и тестить/откатывать деплой того же черт-манагера

Имел ввиду что все равно с kubectl удобно проверять статус и тестить/откатывать деплой того же черт-манагера

;)) ранчер показывает кластера, деплои и Ингрес удобно, ролаут и ролька

Но ковырять нутрянку из гуя - даже не мак оси не работает такое

Вот уже второй день борюсь с ssl. Дошел до того что чертманагер серты выдает, но в гуи часть с приватным ключом пустая. В чем дело может быть?

Вот уже второй день борюсь с ssl. Дошел до того что чертманагер серты выдает, но в гуи часть с приватным ключом пустая. В чем дело может быть?

В обзорах istio был на Медиуме хорошее описание как правильно сделать

Но тоже трахотлмия ещё та

В обзорах istio был на Медиуме хорошее описание как правильно сделать

я по двум гайдам делал, все минимально просто. cert-manager без доп. настроек, один ClusterManager, и один Certificate в yml файлах. Уверен на 100% что серты реальные, тк Letsencrypt уже говорит что лимит превышен.