Andrey
вообще концептуально у Промисиуса есть два способа - remote_write/read или federation (это отдельный эндпойнт, который можно скрейпить)
Эндпоинт тоже круто, то есть он туда выводит тупо все метрики которые смог внутри собрать?
George
примерно, да
Andrey
Звучит как подходящая штука, одну ручку я вполне могу открыть через ингрес
George
почитай доку - все вопросы наверняка отпадут. По мониторингу можешь в Церкви Метрик народ поспрошать. https://t.me/metrics_ru
Andrey
Есть такое же но для атеистов?))
Andrey
Спасибо!
Andrey
Просто спросил в целом откуда начать, я далее уже прицельно в доке посмотрю
Andrey
Правда еще вопрос, есть ли бест практис по деплою прометеуса в кластер? Какой нибудь стейтфул сет? Или пару реплик через деплоймент и норм?
George
посмотри оператор и чарты хельма - народ обычно ими весь стек разворачивает графана+пром+АМ https://github.com/helm/charts/tree/master/stable/prometheus-operator
Andrey
Оке, стырю оттуда, хелм не юзаем, но просто посмотрю как сделано
Andrey
Спасибо большое
Pavel
его все юзают
Andrey
его все юзают
ну ты не можешь этого знать)
Pavel
ладно 70% и более
Andrey
ну вот выше обсуждали что не охота держать весь прометеус с графаной внутри кластера
Andrey
поэтому интересно как его накатывают остальные 30%
Pavel
:( прикольно. Вам кубики не нужен вы строить не хотите
Andrey
я выше написал почему так)
Andrey
строить ради строительства мы точно не хотим, тут полностью ты прав
Pavel
а я разве сказал что оно должно быть все в кубике?
Andrey
ну я так понял что да) если не так - сорри
Andrey
ну типа есть чарт - вперед, разве не это имелось ввиду?
Pavel
вам уже написали решение кторое делать автмптизацию по поиску всего и выдачу наружу
Pavel
кубик это материал ане продукт
Andrey
это я все видел) вопрос был адресован конкретному человеку, и он был не про то что есть материал, а что - нет
Pavel
нет не это. это лишь инструмент то как вы его будет использовать это уже ваше лично. (надебсь видели ролик где челу дали перфоратор и он начал долбить стерну этим перфоратором не включив его в розетку)
Andrey
сделал пока аналогично 💥👌👏
Кстати, не подскажешь есть ли способ хранить метрики в памяти а не на диске? оч не хочется вольюмы делать
Andrey
Например задать чтоб он хранил в оперативе метрики за последний час
George
tmpfs -> на него вольюм кинь
George
или типа того.
Andrey
К тому же зачем их вообще долго хранить если внешний мониторинг зайдет и стянет
Andrey
tmpfs -> на него вольюм кинь
звучит как план, спасибо, ты так же делаешь?
George
нет
George
у нас оперативный мониторинг пишет на диск, потом приходит retention и стирает старые данные
Aleksey
да обычные вкусы. раз бету выпустили надо тестить
ну и я завел им фичареквест. а они хоп и его за день запилили.
Марат
надо скейлить fpm
Ну и пусть nginx скейлится тоже, реквест меньше поставить по фактическим запросам
Марат
Он будет просто как конвертер fcgi в http)
Виктор
чет совсем не хочу в один под)
Марат
Я к засовыванию в один под
Марат
Аргументы?
Виктор
избыточно, память расходуется
Виктор
nginx не перегружен совсем
Марат
От nginx? Да бросьте
Виктор
Ну справедливости ради все что я нарыл в инетете как раз 50/50
Виктор
кто-то кладет в один под
Виктор
кто-то в разные
Марат
Любой велик на 40 php-fpm будет хуже по памяти, чем 40 nginx+php-fpm
Aleksey
А пробовал upgrade делать?
https://github.com/helm/helm/issues/6154
Aleksey
https://github.com/helm/helm/pull/5582/files
Fidelina
что может мешать записи на диск ? pv=pvc они встретились, поду присвоилось на ФС я выдала 777 специально для этой директории, не понимаю почему не может записать туда приложение ES
Fidelina
что можно ещё провертиь?
Fidelina
Что пишет ? Если напрямую зайти в под - можешь каталог с pvc пощупать ?
не тартует контейнер, так как не может записать логи в каталог
Fidelina
даже дебаг-под не стартует
George
В ивентах что написано?
George
Не может быть, что ничего
Fidelina
Checking if Elasticsearch is ready 2019-09-02 21:45:38,211 main ERROR Unable to create file /elasticsearch/persistent/logging-es/logs/logging-es.log java.io.IOException: Could not create directory /elasticsearch/persistent/logging-es/logs
Fidelina
Back-off restarting failed container
Fidelina
это ивент - Back-off restarting failed container
Fidelina
А подмонтировано куда?
- mountPath: /elasticsearch/persistent name: elasticsearch-storage
George
Так. Йо. А может подкаталога-то и нет?
Fidelina
chcon -R unconfined_u:object_r:svirt_sandbox_file_t:s0 /mnt/local-storage/hdd/Elastic
Fidelina
Так. Йо. А может подкаталога-то и нет?
он должен все создать и настроить права на pv
George
chcon -R unconfined_u:object_r:svirt_sandbox_file_t:s0 /mnt/local-storage/hdd/Elastic
Я примерно понимаю о чем ты, но такую магию не умею
George
он должен все создать и настроить права на pv
Подкаталог в pvc? Сомнительно. Приклад может его и не мочь создать
George
Ибо глЮпый пингвин
Fidelina
но это в общем помогает только, чтобы нашелся pv для провиженера
Fidelina
в общем, не всё как у людей) вот нормальные DevOps могут быстро развернуть сбор логов
George
У тебя опеншифт ) в этом дело. +100 к сложности 😭
Fidelina
так это уже опеншифтовый официальный
Fidelina
не официальный уже взлетел ES
Fidelina
а опеншифтовый нет :(
Fidelina
но зато в опеншифте взлетела fluend