Не все есть под арм

Всё что надо мне

видел. Но это довольно кривой костыль. И именно поэтому я пришёл в чат спросить у людей, а не верить посту, которому 3 года — за это время могло что угодно поменяться

приветствую, подскажите - можно ли гарантировать как то ресурсы контейнеру?

в чем кейс - на одной vdsке по тарифу фиксированному крутится dante socks прокси и http сервер на питоне, оперативки гиг и в целом хватает, но иногда данте поджирает оперативку и http сервер встает

собственно думаю запустить прокси из контейнера и ограничить ресурсы ему

Тебе нужно ограничение, а не резервирование. Есть

вот это первое что на ум пришло но интересно - можно ли зарезервировать если например на сервере куча всего крутится и все по контейнерам не рассуешь а нужно чтобы один контейнер стопудово имел 100-200мб оперативки всегда

Только рассчитывать и лимитировать

спасибо

еще может подскажете socks5 прокси какой нить попроизводительнее данте

Есть резервация, но не поможет тут

а то он как не в себя чет с оперативкой

Есть резервация, но не поможет тут

а еще вопрос такой - как правильно будет сделать - у меня в контейнере ffpmeg с обвязкой обрабатывает видосы разные, если видео короткое - можно отдать контейнеру все ядра, чтобы он быстренько обработал и отдал пользователю, но если видос большой и много процессорного времени требует- лимитировать, чтобы он его долго, но все же обработал не загружая систему

например ВК примерно то же делает с каналом при отдаче видео - если запрашивать весь видос одним запросом - сервер отдает 5-10мб на хорошей скорости сперва(для буферизации), а затем ограничивает до 1мбит/с

причем если не одним запросом загружать, а несколькими через bytes-range - все пакеты отдаются на полной скорости

то есть видимо на каждый запрос выделяется воркер у которого настроены лимиты вот такие

Вы путаете процессы обработки и отдачи контента

Вы путаете процессы обработки и отдачи контента

я не путаю

я аналогичный пример привел

как это для канала работает у вк

Он совершенно не аналогичный

вот мне нужно то же самое, но для процессора в общем условие какое требуется - если среднее процессорное время за минуту меньше лимита - то отдавать все ресурсы процессу если превысило - тогда включается ограничение

вот мне нужно то же самое, но для процессора в общем условие какое требуется - если среднее процессорное время за минуту меньше лимита - то отдавать все ресурсы процессу если превысило - тогда включается ограничение

держать несколько воркеров, с разными лимитами, если видео маленькое - отдавать одному, если большое другому

держать несколько воркеров, с разными лимитами, если видео маленькое - отдавать одному, если большое другому

дело в том, что заранее не всегда известно сколько потребуется ресурсов

например мержить аудио/видео потоки с ютуба

Вам нужно что-то, вроде cpulimit, но с отслеживанием нагрузки

ну и раскидывать по воркерам - дополнительное усложнение балансировщика

сейчас просто в redis rpc поступает и свободный воркер хватает его а так придется дополнительно вводить приоритеты и тд что усложняет систему

Вам нужно что-то, вроде cpulimit, но с отслеживанием нагрузки

да

сейчас просто в redis rpc поступает и свободный воркер хватает его а так придется дополнительно вводить приоритеты и тд что усложняет систему

если деление на два случая, то не так уж и усложняет

ну не совсем два

короче динамически в процессе работы контейнера отслеживать его среднее потребление процессорного времени и менять cpulimit если оно превышает порог

и обнулять среднее по завершению обработки, чтобы следующий запрос уже не ждал пока среднее там опустится

что то вроде monit - там можно вот такие условия прописывать # php-fpm check process phpfpm with pidfile /var/run/php-fpm.pid if cpu > 50% for 2 cycles then alert if total cpu > 80% for 5 cycles then restart if memory > 300 MB then alert # if total memory > 500 MB then restart подумал, что было бы логично что то подобное в докере иметь, но не restart alert, а изменять например лимиты

погуглил - вроде можно менять on the fly лимиты, но видимо супервизор, который будет отслеживать потребление ресурсов контейнерами и менять лимиты придется самому писать. Пойду дальше гуглить, если кто то сталкивался с задачей такой и подсказать может - просьба тегнуть

Всем привет, ребят, подскажите плз: есть образ где приложение с графикой, если я пошарю его, человеку на винде будет сильно сложно его запустить?

Всем привет, ребят, подскажите плз: есть образ где приложение с графикой, если я пошарю его, человеку на винде будет сильно сложно его запустить?

да

пичаль

А traefik умеет вайтлистить для одного домена?

То есть у меня правило - "traefik.frontend.rule=Host:one.example.com,two.example.com" А вайтлист я хочу сделать только для одного из них

Я так понимаю это только в конфиге?

короче динамически в процессе работы контейнера отслеживать его среднее потребление процессорного времени и менять cpulimit если оно превышает порог

Зачем

По логике никакие ограничения тогда не нужны

а еще вопрос такой - как правильно будет сделать - у меня в контейнере ffpmeg с обвязкой обрабатывает видосы разные, если видео короткое - можно отдать контейнеру все ядра, чтобы он быстренько обработал и отдал пользователю, но если видос большой и много процессорного времени требует- лимитировать, чтобы он его долго, но все же обработал не загружая систему

Обоже

Можно софтом ловить размер / длину файла и посылать на бэк в зависимости от него

А бэк там уже с нужными лимитами

кто использует nginx-proxy образ? как прокидываете статику от других контейнеров? нагуглил что можно поднимать еще один nginx в новом контейнере а nginx-proxy работает именно как прокси. либо прокидывать volume на nginx-proxy но тогда его надо рестартовать что не очень

кто использует nginx-proxy образ? как прокидываете статику от других контейнеров? нагуглил что можно поднимать еще один nginx в новом контейнере а nginx-proxy работает именно как прокси. либо прокидывать volume на nginx-proxy но тогда его надо рестартовать что не очень

пусть прокси остается прокси. у него своя отдельная роль, ненадо ее ни с чем смешивать

кто использует nginx-proxy образ? как прокидываете статику от других контейнеров? нагуглил что можно поднимать еще один nginx в новом контейнере а nginx-proxy работает именно как прокси. либо прокидывать volume на nginx-proxy но тогда его надо рестартовать что не очень

Рядом ставь nginx и его проксируй

Можно софтом ловить размер / длину файла и посылать на бэк в зависимости от него

можно

но это неочень так как в софте могут быть и будут ошибки и если управление ресурсами выделяемых системе перекладывать на саму систему то получится Россия, операционная система для того и существует, чтобы не париться о других параллельно работающих процессах и потребляемых ими ресурсах. Программа пишется так, будто бы все ядро ей предоставлено и оперативка, а переключение контекста и распределение ресурсов выполняет операционная система. Докер это надстройка над операционной системой которая позволяет программисту в т.ч. ограничивать более гибко ресурсы выделяемые процессу. Так что мне непонятно желание делать то, что и так делает операционная система вместо того, чтобы настроить на уровне ОС

По логике никакие ограничения тогда не нужны

по какой логике

Можно и без операционки вообще программы писать (я кстати это делаю часто для микроконтроллеров) конечный автомат, прерывания, флаги и т.д. Если есть операционка которая управляет ресурсами - какой код в данный момент сейчас выполняется на процессоре уже не твоя забота, а ОС. Ты можешь приоритеты настроить или в случае докера более высокоуровневые параметры.

Можно софтом ловить размер / длину файла и посылать на бэк в зависимости от него

не всегда известно сколько потребуется ресурсов для запроса - зависит от используемого кодека, фильтра, транскодинг не транскодинг, переформатирование или нет и т.д. и т.п. Один и тот же файл может потребовать мало ресурсов - например выдернуть аудио дорожку в aac, а может много - переконвертировать ее в OPUS с ускорением с тонокомпенсацией и нормализацией. Вариантов много, постоянно добавляются новые, меняются комбинации, пытаться оценить по входным параметрам сколько потребуется разных ресурсов - бред.

не всегда известно сколько потребуется ресурсов для запроса - зависит от используемого кодека, фильтра, транскодинг не транскодинг, переформатирование или нет и т.д. и т.п. Один и тот же файл может потребовать мало ресурсов - например выдернуть аудио дорожку в aac, а может много - переконвертировать ее в OPUS с ускорением с тонокомпенсацией и нормализацией. Вариантов много, постоянно добавляются новые, меняются комбинации, пытаться оценить по входным параметрам сколько потребуется разных ресурсов - бред.

Тогда тем более стоит забить использовать для этого докер :)

Тогда тем более стоит забить использовать для этого докер :)

почему

@hitmaker

@hitmaker

Forex это не так плохо. Если бы не те "хомячки", которые являются участниками этого безобразия. Это как php: в целом хорошо, но коммьюнити... :)

Лучше уже голые жопы, там и коммюнити лучше)

какая то странная команда mkdir

где ты нашел ее?

там workdir

в ошибке твоей

https://github.com/docker/for-win/issues/573

Netstat -tlnp| grep 8080

Посмотри что у тебя на порту висит

Посмотри что у тебя на порту висит

то не моя ошибка:)

Всем привет как пофиксить фейлится запуск .NET Core 2.1 project в Docker сontainer. VS2017 for mac Error: The DOCKER_REGISTRY variable is not set. Defaulting to a blank string.

FROM python:3.6 RUN apt-get update && apt-get install -y redis-server nginx

RUN ln -s accounting_nginx.conf /etc/nginx/sites-enabled/