Просто ты специфику не рассказал полностью , поэтому я фантазирую

https://github.com/codercom/code-server Все уже потрогали? Я полчаса бегаю по квартире и ору :)

думал о таком, но не совсем вариант - требуемых образов с десяток, они прилетают с докерхаба, а результаты кеширования могут отличаться для разных проектов - получается какой-то комбинаторный взрыв можно конечно настроить отдельные задачки по автоматической модификации и публикации таких образов, но это уже как будто поворот не туда ¯\_(ツ)_/¯

А в чем вопрос тогда? "Как мне решить проблему ничего не меняя?"?

https://github.com/codercom/code-server Все уже потрогали? Я полчаса бегаю по квартире и ору :)

Типа "консоль не нужна"?

https://github.com/codercom/code-server Все уже потрогали? Я полчаса бегаю по квартире и ору :)

У гитлаба тоже своя web-ide есть)

А в чем вопрос тогда? "Как мне решить проблему ничего не меняя?"?

Тип того, да, "можно ли сделать так, чтобы docker run не запускал новый контейнер, а подключался к ужезапущенному"

Алиас настроить ?

Всем привет. Подскажите новичку в докере пару моментов: Стоит задача обеспечить переносимость проекта и окружения под различные OS(windows/linux), под различные версии OS(ubuntu 16/18) и под различное железо. 1) Подходит ли докер для обеспечения работы кроссплатформенно? (ubuntu/windows, стэк технологий - python+библиотеки, CUDA, CUDNN, и др. нативные либы). Т.е. я хочу создать один образ и запускать его как на linux, так и на Windows как можно меньшими усилиями. 2) В рамках только linux - как обеспечить работоспособность на разных версиях операционной системы?(например убунту 16 и 18). - сейчас я вижу так, что придется создавать отдельный образ с всей нативной частью с поддержкой конкретной версии, а это получается, что переиспользование образов будет только в очень малом количестве - а тогда какой профит) 3) Как работать с либами, собранными под конкретное железо?(соответственно нужно обеспечить работу на различном железе (GPU, CPU)). Заранее спасибо

Докер имиджу все равно где запускаться

Как я себе это вижу - в доке пишут, что windows не поддерживает контейниризацию - и тогда какие накладные расходы будут при работе с windows? и второе, я упаковал нативную библиотеку (SO-либы) в образ и хочу теперь запустить на windows их, где они не будут работать. соответственно докер мне сам с этим разберется и таки запустит ее?

Докер имиджу все равно где запускаться

Да, только вот с CUDA могут быть нюансы

Да, только вот с CUDA могут быть нюансы

с куда да конечно и будут вангую

Как я себе это вижу - в доке пишут, что windows не поддерживает контейниризацию - и тогда какие накладные расходы будут при работе с windows? и второе, я упаковал нативную библиотеку (SO-либы) в образ и хочу теперь запустить на windows их, где они не будут работать. соответственно докер мне сам с этим разберется и таки запустит ее?

Если это то, что я думаю, то у тебя докер внутри линукса под виндой

Как я себе это вижу - в доке пишут, что windows не поддерживает контейниризацию - и тогда какие накладные расходы будут при работе с windows? и второе, я упаковал нативную библиотеку (SO-либы) в образ и хочу теперь запустить на windows их, где они не будут работать. соответственно докер мне сам с этим разберется и таки запустит ее?

в винде можно запустить линукс контейнеры

https://github.com/NVIDIA/nvidia-docker/wiki/CUDA

Хорошо - значит докер таки разберется с линукс образом и запустит его под виндой. Спасибо за ответ. но дальше все еще нюансы - у некоторых нативных либ есть зависимости на версию ОС, соответственно как это будет разруливаться на windows?

Хорошо - значит докер таки разберется с линукс образом и запустит его под виндой. Спасибо за ответ. но дальше все еще нюансы - у некоторых нативных либ есть зависимости на версию ОС, соответственно как это будет разруливаться на windows?

вы видимо не понимаете что такое докер образ

Вы образ строите на базе какой-то ос, то есть за основу идет к примеру убунту и на него уже накатывается все что нужно

Хорошо - значит докер таки разберется с линукс образом и запустит его под виндой. Спасибо за ответ. но дальше все еще нюансы - у некоторых нативных либ есть зависимости на версию ОС, соответственно как это будет разруливаться на windows?

Оси пофиг

У тебя докер под линуксом только шарит ядро основной оси между контейнерами

вооот, это полезное замечание - значит я могу ОС упаковать прямо в образ и запуститься где угодно? тогда все немного понятнее.

вооот, это полезное замечание - значит я могу ОС упаковать прямо в образ и запуститься где угодно? тогда все немного понятнее.

Нет. Ты не ос пакуешь, а ее среду

вооот, это полезное замечание - значит я могу ОС упаковать прямо в образ и запуститься где угодно? тогда все немного понятнее.

так оно и работает любой образ строится на базовом образе

Нет. Ты не ос пакуешь, а ее среду

Он походу имеет ввиду что в основе все такие ос))

под средой понимается просто наличие стандартных библиотек ОС?

Повторюсь, что ядро общее. Внутри контейнера может вообще один исполняемый файл лежать (почитай про from scratch)

под средой понимается просто наличие стандартных библиотек ОС?

Да, и соответствующих настроек

под средой понимается просто наличие стандартных библиотек ОС?

https://proglib.io/p/docker/

Надо понять, что докер - это не виртуальная машина

Не путаем вм и контейнерезацию

Докер ближе в chroot или jail

Докер ближе в chroot или jail

Да, именно

Или zones, или lxc

да, все материалы уже вычитаны, но все еще не понятно, если на windows на уровне ядра нет контейнеров - как он релизуется тогда?

Или zones, или lxc

не не не зоны это другое совсем

да, все материалы уже вычитаны, но все еще не понятно, если на windows на уровне ядра нет контейнеров - как он релизуется тогда?

там виртуальная машина будет в кишках докера как и в маке

https://docs.docker.com/docker-for-windows/

и тут вспоминаем "не надо путать ВМ с Контейнерами") получается что на винде контейнеры запускаются под ВМ и мы получаем те же проблемы с ресурсами и скоростью, так?

и тут вспоминаем "не надо путать ВМ с Контейнерами") получается что на винде контейнеры запускаются под ВМ и мы получаем те же проблемы с ресурсами и скоростью, так?

какие проблемы с ресурсами то?

какие проблемы с ресурсами то?

лаги с томами

лаги с томами

с дисками грабли и в маке)

и больше с CPU и GPU - выделить полностью все мощности в ВМ

в том и суть

и больше с CPU и GPU - выделить полностью все мощности в ВМ

там вм немного по другому используется нежеле классические

и тут вспоминаем "не надо путать ВМ с Контейнерами") получается что на винде контейнеры запускаются под ВМ и мы получаем те же проблемы с ресурсами и скоростью, так?

Ну, в маке - да. Ты там в явном виде пишешь сколько рам и сколько диска дать вм

Если не хватило, то ой

Для начала бы документацию прочитать бы

Ну, в маке - да. Ты там в явном виде пишешь сколько рам и сколько диска дать вм

в винде так же там почти такой же тулл кит

просто все выглядит, что докер пилили под linux - все шикарно все классно, а потом захотели ну хотя бы запустить хоть как то все на винде - и довольствуйтесь тем, что вышло.

вопрос частично и сводится к тому, что если критично производительность поддержать, то стоит ли использовать удобство докера для кроссплатформенной работы, или на винде все будет очень плохо?

просто все выглядит, что докер пилили под linux - все шикарно все классно, а потом захотели ну хотя бы запустить хоть как то все на винде - и довольствуйтесь тем, что вышло.

Верно

так и было

докер нативный только в линухе

вопрос частично и сводится к тому, что если критично производительность поддержать, то стоит ли использовать удобство докера для кроссплатформенной работы, или на винде все будет очень плохо?

с кудой будет плохо для куда нужно юзать hpc

с кудой будет плохо для куда нужно юзать hpc

Э?

Э?

https://searchdatacenter.techtarget.com/definition/high-performance-computing-HPC

Я докеры под Линукс с куда гонял. Но там неудобно. Нужно правильно ресурсы распределять

https://searchdatacenter.techtarget.com/definition/high-performance-computing-HPC

Ок.

Сорри

Я докеры под Линукс с куда гонял. Но там неудобно. Нужно правильно ресурсы распределять

вот для этого и нужно hcp когда у тебя все распределяется равномерно

Форвард ни туда

так например скрининг делается в химии) и биологии

тут по-моему вы ушли немного в сторону, да HPC это вариант построения системы, но пока уточняем насколько докер подходит под конкретную задачу

в hpc у тебя и докеры могут быть и вм какбы

Реализация hpc с докером на борту это сингулярити

все верно, но от проблем с самим докером это не избавляет, грубо говоря

все верно, но от проблем с самим докером это не избавляет, грубо говоря

избавляет, докер пушиться на твой кластер и все

у тебя есть платформа и все ты пуликуешь на нее приложение

ну хорошо, я покопаю еще в этом направлении. Спасибо. Тогда по другим частям первоначального вопроса: дрова под GPU для работы с CUDA тоже придется паковать в образ, верно?

ну хорошо, я покопаю еще в этом направлении. Спасибо. Тогда по другим частям первоначального вопроса: дрова под GPU для работы с CUDA тоже придется паковать в образ, верно?

я вам ссылку дал на офф имидж нвидиа

это да, вопрос просто такой - если нужно поддержать железку с другой архитектурой ГПУ, то мне нужно будет соответственно делать зависимось на образ под конкретную железку - соответственно у меня потенциально может все сильно разрастись

это да, вопрос просто такой - если нужно поддержать железку с другой архитектурой ГПУ, то мне нужно будет соответственно делать зависимось на образ под конкретную железку - соответственно у меня потенциально может все сильно разрастись

для этого делают сборщики образов

Т.е первоначальная задумка такая - собрать один раз образ, и потом запускать его на "любой" машине с любой ОС. И получается, что для обеспечения поддержки разного железа, все равно придется сначала все аккуратно собрать под конкретное железо, и все равно деплоить конкретную сборку образа под конкретную ситуацию, а не один "убер-образ", так?

Т.е первоначальная задумка такая - собрать один раз образ, и потом запускать его на "любой" машине с любой ОС. И получается, что для обеспечения поддержки разного железа, все равно придется сначала все аккуратно собрать под конкретное железо, и все равно деплоить конкретную сборку образа под конкретную ситуацию, а не один "убер-образ", так?

можете собрать общий со всеми дравами, как вы соберете образ это уже ваша забота

боюсь, что тоже возникнут проблемы положить сразу все дрова в один образ, ну да ладно. Спасибо за ответы.

какие проблемы то?

в любом дистре линукса куча драйверов) включение или отключение драйвера не проблема

буду надеяться, что действительно проблем не возникнет)

сколько работал с кудой проблем не было, приготовил образ и живешь себе, как и говорил как приготовиться образ и какой процесс будет выкатывать это на сервера с приложений это уже твоя забота)

ну хорошо, я покопаю еще в этом направлении. Спасибо. Тогда по другим частям первоначального вопроса: дрова под GPU для работы с CUDA тоже придется паковать в образ, верно?

Да

Наследуется от базового образа убунту нвидия

Плюс в докер надо отдельный компонент поставить, чтобы внутри докера нвидия заработала

https://hub.docker.com/r/nvidia/cuda/

Всем привет, как можно внутри одного контейнера отправлять в другой контейнер команды?

Всем привет, как можно внутри одного контейнера отправлять в другой контейнер команды?

Зачем?

Зачем?

типа нужен триггер

типа нужен триггер

Ну по хорошему - очередь сообщений

Всем привет, как можно внутри одного контейнера отправлять в другой контейнер команды?

Http!

типа нужен триггер

В docker ps смотришь имя нужного контейнера и шлешь ему

Всем привет, как можно внутри одного контейнера отправлять в другой контейнер команды?

никак

1. либо взаимодействие по сети и там API внутри 2. либо тебе нужно пробросить докер сокет и через него фигачить

выбрал celery

Всем привет, помогите разобраться. Docker on Windows 1. На localhost:27017 моего ПК работает mongodb база данных. Я из контейнера хочу к ней достучаться. Строка подключения mongodb://localhost:27017 Затем docket run -p 27017:27017 Итого бд не видит, вылетает таймаут спустя 30 сек. 2. При long polling http запросе спустя какое-то время вылетает ошибка Timeout, я так понимаю докер ставит свои лимиты? Если так, то как их поменять?

Всем привет, помогите разобраться. Docker on Windows 1. На localhost:27017 моего ПК работает mongodb база данных. Я из контейнера хочу к ней достучаться. Строка подключения mongodb://localhost:27017 Затем docket run -p 27017:27017 Итого бд не видит, вылетает таймаут спустя 30 сек. 2. При long polling http запросе спустя какое-то время вылетает ошибка Timeout, я так понимаю докер ставит свои лимиты? Если так, то как их поменять?

1. нет. надо указать имя сервиса монги. Либо если у тебя виртуалка - почитать доку, как стучаться в контейнер

2. докер не ставит лимиты, но он вносит доп задержки. Нужно смотреть логи