Что на прокси?

Я уже пробовал ставить разные резолверы и BIND и unbound — одинаково тупит.

3к/минуту? Это же ничто

сними трафик и посмотри на него

И еще есть такой симптом, запускаю микросервис в одном экземпляре, работает нормально, делаю пять и время ответа поднимается на полку в 1 секунду.

Что на прокси?

У тебя на каждый запрос идёт резолв?

Ну в линуксе по-другому никак. Вот я уж и думал, ставить на каждый хост кэширующий резолвер, но это как-то стрёмно ИМХО.

Я проверял, резолвер, что BIND, что unbound, первый запрос делают рекурсивно, за ~100 мс, а дальше из кэша отдают, за 0 мс

Но дело даже не в DNS, я просто чувствую, что сеть тормозит, а понять почему не могу — не хватает опыта траблшутинга сетей. Поэтому обращаюсь к сообществу, может кто-то встречал такую проблему? Может у меня там какая-то ошибка новичка?

Блин, мы на разных языках

сними трафик и отдай админам пусть скажут что да как

google: how to capture network traffic in docker...

какая нагрузка цпу при 3000reqs/min?

Но дело даже не в DNS, я просто чувствую, что сеть тормозит, а понять почему не могу — не хватает опыта траблшутинга сетей. Поэтому обращаюсь к сообществу, может кто-то встречал такую проблему? Может у меня там какая-то ошибка новичка?

Глянь в гугле статью с примерными настройками sysctl swarm

Да я уж все прогуглил до самых глубин, уже все крутил, что только мог, просто не знаю что делать, вот от отчаяняя сюда пришел (-:

Да я уж все прогуглил до самых глубин, уже все крутил, что только мог, просто не знаю что делать, вот от отчаяняя сюда пришел (-:

Есть подозрение, что ты долбишь днс по чём зря

у меня подозрения на то что cpu не хватает на виртуализацию сети

Может надо что-то знать про виртуализацию, чего я не учел? Мы все крутим на vSphere. Развернуты виртуалки с CentOS 7.5.1804, docker 18.06.0-ce. Может какой-то из этих компонентов проклятый?

скорее нужно знать как троубулешутить линукс и докер

Все вопросы по тормозной сети закрыли на 17.06

Я сам не верил, что DNS может быть причиной тормозов, но когда прописали все в /etc/hosts существенная часть тормозов ушла.

нужно знать причину, а не гадать

Я чувствовал себя идиотом: у нас не такая большая сеть, чтобы днс был причиной тормозов.

нужно знать причину, а не гадать

Ага

можно увеличить скорость тормозной системы отлючив аудио драйвер освободив немного оперативной памяти или прописать локальный днс тоже "помогает"

можно увеличить скорость тормозной системы отлючив аудио драйвер освободив немного оперативной памяти или прописать локальный днс тоже "помогает"

Я понимаю, что DNS это симптом, но что может быть причиной, нет ни одной здравой мысли )-:

И вот еще вопрос: сеть сворма работает на скорости самой медленной ноды, или как? То же самое, относительно latency? Может у меня просто в сворме есть "паршивая овца" из-за которой тормозит весь кластер?

нужно знать свое приложение, арх. операционой системы, арх. докера, арх. сети, арх. субд... думаешь, что сеть сними трафик, думаешь что приложение мониторь cpu & memory usage... может там dns failover... если субд мониторь субд запросы смотри стоимость...

может тупить файловая система это зависит от твоего приложения. может есть место где 3 млн файлов в одной папке и файловая система нагибает все.

может тиков цпу не хватает на сеть докера, т.к. приложение работает на максимальной нагрузке и выше уже быть не может

найди узкое горлышко. мониторь систему субд, фс, сеть, цпу, память...

Спасибо, конечно! Но я уже везде смотрел, думал, может что-то очевидное пропускаю. Значит придется еще глубже копать.

Видимо ничего не пропускаю, что могло бы быть на поверхности.

попробуй стабильную версию вашего приложения/сервиса/сайта маштабировать, а не дев версию. может в дев. версии есть перф. баги

Может надо что-то знать про виртуализацию, чего я не учел? Мы все крутим на vSphere. Развернуты виртуалки с CentOS 7.5.1804, docker 18.06.0-ce. Может какой-то из этих компонентов проклятый?

Обнови докер, в этой версии баг с роллаутом

18.06.0-ce это dev?

Не про днс, но всё же

18.06.0-ce это dev?

Не, стейбл

Обнови до последней 18.06.1

Обнови докер, в этой версии баг с роллаутом

Можно ссылку на issue?

Нет, я с телефона

Не обновляй)

Не обновлю (-: Подниму новый и смигрирую в него, этот достался от по наследству, уже устал его лечить.

всем привет! а насколько это плохая практика — делать специализированный ssh ключ на чтение из приватных репозиториев, чтобы при билде образа докер мог стягивать приватные зависимости? (ключ в итогое изображение не попадает)

пытался прокидывать ssh ключи из окружения при билде, но это не всегда работает. в частности в CI нету ключа, есть только ssh агент, который создается на время билда. если пробросить агента, то пользователь будет другой.

всем привет! а насколько это плохая практика — делать специализированный ssh ключ на чтение из приватных репозиториев, чтобы при билде образа докер мог стягивать приватные зависимости? (ключ в итогое изображение не попадает)

Как насчет скачать зависимость средствами CI, а в образ копировать с помощью простого COPY?

всем привет! а насколько это плохая практика — делать специализированный ssh ключ на чтение из приватных репозиториев, чтобы при билде образа докер мог стягивать приватные зависимости? (ключ в итогое изображение не попадает)

А докер тут причем? Не та группа

Как насчет скачать зависимость средствами CI, а в образ копировать с помощью простого COPY?

раньше так и было, но когда решил, что собираться тоже должно в идентичном окружении и стал использовать multi stage builds, то появилась такая проблема.

А докер тут причем? Не та группа

sorry, не совсем понял

всем привет! а насколько это плохая практика — делать специализированный ssh ключ на чтение из приватных репозиториев, чтобы при билде образа докер мог стягивать приватные зависимости? (ключ в итогое изображение не попадает)

В целом не очень хорошо - твой образ становится зависимым от приватного репозитория, но если только для личного пользования, то не вижу ничего в этом страшного

sorry, не совсем понял

О, da vi iz anglii

Как насчет скачать зависимость средствами CI, а в образ копировать с помощью простого COPY?

+

В целом не очень хорошо - твой образ становится зависимым от приватного репозитория, но если только для личного пользования, то не вижу ничего в этом страшного

в каком смысле зависимым? при сборке все зависимости стягиваются и образ от них уже не зависит. к тому же, он так или иначе все-равно из приватного репозитория собирается.

в каком смысле зависимым? при сборке все зависимости стягиваются и образ от них уже не зависит. к тому же, он так или иначе все-равно из приватного репозитория собирается.

Сборка будет падать

Хотя да, если всё равно всё это лежит в одной репе, то норм

Сборка будет падать

а, понял.

Я прокидывал ключи, что лежат на сервере, где идёт сборка, более логичный подход, как по мне

дело в том, что зависимости стягиваются менеджером пакетов, который стягивает пакеты под конкретную платформу. поэтому хочется запускать менеджер пакетов из окружения в котором сервис и будет выполняться. + если lock файл с пакетами не менялся, то менеджеру пакетов даже не надо запускаться, т.к. слой закеширован при прошлом билде. короче, у такого подхода есть плюсы.

Вообще подход может быть интересный. Если сделать "билд" образ со всеми ключами, скриптами и зависимостями И использовать его как первый степ в мультистейдже то может и не плохая затея. Но если это использовтать в в CI то получится билд образ внутри билд ноды.

ну, типа того, ага... зато один и тот же образ можно будет везде легко собрать, как локально, так и на билд ноде, не настраивая окружения для билда. ну ладно короче, поэкспериментирую. спасибо)

Привет! Подскажите плс, работает ли docker на подсистеме WSL ? Для тестового стенда, для экономии на виртуалках

Шта

Привет! Подскажите плс, работает ли docker на подсистеме WSL ? Для тестового стенда, для экономии на виртуалках

Нет, клиент только

Нет, клиент только

Спс

Привет! Подскажите плс, работает ли docker на подсистеме WSL ? Для тестового стенда, для экономии на виртуалках

Для экономии можно lcow взять, переключить на виндовс контейнеры. Но я там ничего не скажу, особо не тестил

Джокер мы согласовали Ядвиге. Дане пока рано, смысла нет. Тебе Девоопс согласовали. Олег очень попросил о следующем, цитирую:

Пусть сходит и обязательно потом сделает доклад по мониторингу - Мониторинг и аудит приложений (Prometeus, OkMeter, DataDog, BPF, Dynatrace, XRebel, Glimpse, Zipkin, OpenTrace и другие); И пообщается с Андреем Ермаковым из Tinkoff как у них выстроен этот процесс.

доброй ночи

подскажите как прокинуть .env файл внутрь контейнера. Не использовать его как переменные окружения, а именно прокинуть, чтобы внутри контейнера был /var/www/.env . У меня ларавел упорото хочет видеть именно файл и все ломается без него

подскажите как прокинуть .env файл внутрь контейнера. Не использовать его как переменные окружения, а именно прокинуть, чтобы внутри контейнера был /var/www/.env . У меня ларавел упорото хочет видеть именно файл и все ломается без него

Volume сделать или COPY во время билда

а нет какого-то варианта исключения, чтобы не извращаться? ну т.е. копи выглядит логично, но периодически надо править этот файл и не хотелось бы ради этого 10 минут ждать пересборки тома

volume - вариант без пересборки, но .... возможно я не понял как. в лоб не вышло

php: build: .docker/php-fpm volumes: - ./src:/var/www/ - ./src/.env:/var/www/.env

такой volume ?

php: build: .docker/php-fpm volumes: - ./src:/var/www/ - ./src/.env:/var/www/.env

Да, так

так не хочет

Так потому что папка вся уже маунтится, отдельно файл не надо

С чего решил что не хочет, нет в контейнере его?

угумс

в контейнере его нет