оно в итоге через сокет пойдёт или придётся на tcp выставляться так или иначе?

сокет вроде

прекрасно

есть проблема с добавлением ELK в существущий докер композ с кучей сервисов. при этом, нужно чтобы в ELK попадали ВСЕ логи сервисов, с самого их старта. но если просто добавить три сервиса ELK в общий композ файл - все стартует рандомно и получается так, что в кибане не видны некоторые логи сервисов, которые стартонули РАНЬШЕ, чем заработал ELK стек. по идее надо стартовать ЕЛК первым, ждать пока он инициализируется и будет ждать поступления логов, и только потом начинать стартовать остальные сервисы. думаю моя проблема стандартная, и многие должны были с ней сталкиваться. что советуют лучшие собаководы в такой ситуации? можно depends_on сnавить на каждый сервис наверное - и стартовать его только после условия depends_on: elk-elasticsearch: condition: service_healthy но во-первых, надо отредактировать большой композ - поменять все сервисы таким образом. во-вторых - на тестовом коротком композе чето не завелось.. не помогает этот depends.. можно наверное еще стартовать ЕЛК стек отдельным композ файлом и потом уже стартовать основной композ с сервисами. но надо чтобы была одна сеть между этими композами. external = true читал но получается что надо сеть создавать в композе ЕЛК? хотя она вроде как предназаначена на сервисов.. некрасиво как-то.. короче хотелось бы советов..

отдельным стеком

а каким драйвером ты логи собираешь?

Почему при docker run .. моментально запускается и закрывается. В docker ps -a пишет started и сразу exited

Почему при docker run .. моментально запускается и закрывается. В docker ps -a пишет started и сразу exited

почитай про docker pid 1

Парни, а когда я правлю dockerfile мне нужно заново билдить контейнер и запускать его?

+ shim reaped ignoring event module=libcontainerd namespace=Moby topic /tasks/delete type=*events.taskdelete

отдельным стеком

как это?

а каким драйвером ты логи собираешь?

да это как раз не очень важно кмк могу GELF или syslog для других сервисов будет serilog

Сорь не туда

Парни, а когда я правлю dockerfile мне нужно заново билдить контейнер и запускать его?

Конечно. Это инструкция по сборке контейнера

Конечно. Это инструкция по сборке контейнера

а нет случайно какого нибудь фаст релоада(aplly changes)?

да это как раз не очень важно кмк могу GELF или syslog для других сервисов будет serilog

зачем спрашивать, если сам знаешь как лучше? )

зачем спрашивать, если сам знаешь как лучше? )

я не знаю как быть с очередностью стартов. сам додумываю, но хочу узнать как это делается у нормальных людей)

чтобы не лепить костыли

никак не быть, не надо это решать

ну вот..

не понимаю. почему?

а нет случайно какого нибудь фаст релоада(aplly changes)?

Нет. Если важно в проде пересобирать контейнер без даунтайма, то это в оркестраторы и blue/green deployment

Нет. Если важно в проде пересобирать контейнер без даунтайма, то это в оркестраторы и blue/green deployment

понял, спасибо

никак не быть, не надо это решать

как же иначе обеспечить попадание всех логов с момента старта в ЕЛК?

как же иначе обеспечить попадание всех логов с момента старта в ЕЛК?

обеспечить ELK отказоустойчивость и\или буфер для логов

буфер? хм.. что это еще за зверь должен быть а чем плох вариант что я предположил - просто стартовать ЕЛК первым

он должен быть всегда запущен, а не стартовать первым

ну вот создается тестовый енв для куа

его же надо первый раз стартонуть и посмотреть все логи

буфер - дефолтный лог json драйвер к примеру, складывает локально, ты собираешь

с дефолта можно только файлбитом вроде

он соберет все что есть в файле, ок.. а как потом переключиться на другой драйвер? никак..

а в чём проблема с файлбитом?

ну как вариант. или файлбит или решить как ЕЛК первым запускать правильно

решай

ладно спасиб еще вопрос по ЕЛК есть

вот еще что не пойму в ЕЛК он стартует, открываю кибану и там нету индекса: Create index pattern Kibana uses index patterns to retrieve data from Elasticsearch indices for things like visualizations. и кнопка Check for new data

что должно произойти чтобы этот индекс файл можно было с оздать?

чтобы в еластике данные появились? а их туда логстеш запушает так?

мне непонятны тайминги этого процесса. вроде сервис логи генерит, но данных все равно нет.

логстеш сам создаёт когда шлёт

то есть по идее моментально должно быть? сервис лог отправил в логстеш, тот переслал в еластик и все - кибана уже может их видеть?

ага

гуд спас

почитай про docker pid 1

Изначально запускал с -it, c -dit то же не помогло

что-то пишет тебе? что за приложение? умеет "быть запущенным"?

Да запуская по инструкции cloudera quickstart

Какая-то локальная проблема

Может это быть из за того что по дефолту docker использует только 2 gb ram?

Пишет только + shim reaped ignoring event module=libcontainerd namespace=Moby topic /tasks/delete type=*events.taskdelete

Может кто кратко описать, как в лейбле контейнера сделать несколько frontend'ов traefik'а?

Хочу на один контейнер принимать с двух хостов Для одного хоста включить вайтлист, для другого не включать

несколько фронтендов или несколько правил?

несколько фронтендов или несколько правил?

Ну получается что несколько фронтендов, если я выше понятно описал

Допустим, сейчас стоит вот так - "traefik.frontend.rule=Host:admin.domain.com,static.domain.com"

хочу - traefik.frontend1.rule = Host:admin... - traefik.frontend2.rule = Host:static... - traefik.frontend1.whitelistSourceRange ...

Я знаю что так можно, я скорее синтаксис не могу нагуглить нормально

я, кстати, прям не уверен, что дефолтный провайдер тебе такое позволит

в file/KV/whatever – всё понятно, всё просто

Хотя возможно я тут сейчас попадаю под XY problem

я, кстати, прям не уверен, что дефолтный провайдер тебе такое позволит

Короче, мне real_ip форвардящийся с traefik не видно в nginx, и я решил что можно повайтлистить траефиком...

Только не бейте!

тебе, возможно, сегменты помогут

Парни, после того, как несколько раз собирал один и тот же образ (менял только докерфайл), появляються такие вот пустые образы. Как можно пофиксить?

Парни, после того, как несколько раз собирал один и тот же образ (менял только докерфайл), появляються такие вот пустые образы. Как можно пофиксить?

docker build -t web_server . docker run -d -p 8080:80 --rm web_server

docker system prune

docker system prune

так оно же все удалит? и совсем другие работающие контейнера?

Читай описание

тебе, возможно, сегменты помогут

Они почему-то не сработали, но конкретно по моему вопросу помогло прописать в nginx set_real_ip_from traefik; traefik это сервис

Короче, мне real_ip форвардящийся с traefik не видно в nginx, и я решил что можно повайтлистить траефиком...

Вопрос вот этот, а не тот)

ага, удалает все недействительные образы. Спасибо

А это нормальное поведение, когда образы с одинаковым именем не перезаписываються, а просто добавляються к списку? И теперь каждый раз, когда я пересобираю образ, нужно удалять все старые?

Они почему-то не сработали, но конкретно по моему вопросу помогло прописать в nginx set_real_ip_from traefik; traefik это сервис

Оо кстати, я как раз сегодня гуглил этот вопрос, эту строку просто прописать в nginx, который за traefik'ом стоит? У меня traefik -> nginx+php

Оо кстати, я как раз сегодня гуглил этот вопрос, эту строку просто прописать в nginx, который за traefik'ом стоит? У меня traefik -> nginx+php

ага

Ну и по стандарту в location proxy_redirect off; proxy_set_header Host $host; proxy_set_header X-Real-IP $remote_addr; proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; proxy_set_header X-Forwarded-Host $server_name;

Оо кстати, я как раз сегодня гуглил этот вопрос, эту строку просто прописать в nginx, который за traefik'ом стоит? У меня traefik -> nginx+php

строчку прописывать в директиве server

Возможно в location тоже работает, но я не проверял)

Возможно в location тоже работает, но я не проверял)

Спс, завтра попробую. У меня nginx в качестве веб-сервера работает, так программист захотел сайты поднять

А это нормальное поведение, когда образы с одинаковым именем не перезаписываються, а просто добавляються к списку? И теперь каждый раз, когда я пересобираю образ, нужно удалять все старые?

Да. Имя это просто тег, образы разные

всем доброго вечера есть ли способ в docker-compose ограничеть максимальный размер volume ? никак не могу найти ...

Парни, вопрос, запускаю образ, но он не выводиться в container ls