а можно просто субмодули, чо париться

и он вам сделает файл с описанием зависимостей

Так мне надо не только описания а код самих библиотек

Так мне надо не только описания а код самих библиотек

ну вы можете коммитить ваши библиотеки, для этого вам нужно править gitignore

чтобы определить какие пути доступны для коммитов

а не логичней было бы, если у вас полноценные библиотеки свои пишутся делать их отдельным проектом, и после обновления подтягивать их в основной проект через pip update?

заодно будете уверены что с их инсталляцией никаких проблем =)

а если это жырно, то может имеет смысл подключать их как модули в проекте, тогда не понятно в чем вопрос

Чтобы как в остальных языках было

Это в каких языках так? В джаве? Плюсах?

Это в каких языках так? В джаве? Плюсах?

Даже в голанге есть такое

Даже в голанге есть такое

Насчёт го не скажу. Но вообще зависимости к себе никто не копирует руками. Кэш может сам втягивается, но не в репозиторий точно

а если это жырно, то может имеет смысл подключать их как модули в проекте, тогда не понятно в чем вопрос

Я мог бы подключить как модули - просто скопировав код в директорию но я хочу точно знать какой версии и из какого репозитория этот код. Поэтому нужна простая утилита которая будет читать файлик с зависимостями скачавать из и ложить в директорию с проектом

*класть

Почему обязательно рядом - вообще не понятно.

Венв + pip freeze?

Мне venv с бинарями надо потом в репу пихать?

Нет

А как?

Он должен создаваться

Я мог бы подключить как модули - просто скопировав код в директорию но я хочу точно знать какой версии и из какого репозитория этот код. Поэтому нужна простая утилита которая будет читать файлик с зависимостями скачавать из и ложить в директорию с проектом

файлик с зависимостями называется .gitmodules, утилита называется git submodule update --init

можно не благодарить

Как хоть раз юзал сабмодули не посоветует это другим

Я мог бы подключить как модули - просто скопировав код в директорию но я хочу точно знать какой версии и из какого репозитория этот код. Поэтому нужна простая утилита которая будет читать файлик с зависимостями скачавать из и ложить в директорию с проектом

подними свой pypi репозиторий в компании и хостите ваши внутренние пакеты там.

/me юзал и советует

А как?

Ну сначала делаешь фриз. Затем создаешь венв и ставишь все зависимости пипом

например через Pulp или Nexus

А как?

В репу коммитишь только список зависимостей с версиями. Но не сами зависимости

"даже в голанге есть такое" - это отсутствие нормального управления зависимостями что ли?

подними свой pypi репозиторий в компании и хостите ваши внутренние пакеты там.

+1

вендоринг в python не очень принят, есть отдельные исключения

Ну сначала делаешь фриз. Затем создаешь венв и ставишь все зависимости пипом

зависимости где будут лежать? в диретории правильно? я эту диреторию кладу в репу правильно? и в этой диретории бинари питона разве нет?

зависимости где будут лежать? в диретории правильно? я эту диреторию кладу в репу правильно? и в этой диретории бинари питона разве нет?

Зависимости будут лежать в pypi репозитории

зависимости где будут лежать? в диретории правильно? я эту диреторию кладу в репу правильно? и в этой диретории бинари питона разве нет?

вы хотите какую-то неведомую хрень.

А локально - там где венв сделаешь

Вообще пофиг где венв создавать. Можешь вообще без него в докере ставить.

вендоринг в python не очень принят, есть отдельные исключения

может быть и не принят, ну у меня тут просто контейнеры а с ними не очень удобно pip подягивать из приватных репозиториев. Вот да тоесть что я хочу это вендоринг называется? вот мне его походу надо

В смысле "не очень удобно"?

что значит не очень удобно?

что бы поюзать зависимость из приватной репы нужен ключ а его не хотелось бы в контейнер ложить

эм... бля

простите

еще раз - разверни в своей инфраструктуре pypi - раз

надо при создании контейнера сразу в него упаковать зависимость

Передай через параметры сборки контейнера

Передай через параметры сборки контейнера

+1

что бы поюзать зависимость из приватной репы нужен ключ а его не хотелось бы в контейнер ложить

Класть

когда разверну наверное вопрос будет снят а когда его нет?

А что за приватный репозиторий сейчас?

+1

у вас глаз не дергается когда вы такое предлагаете?

когда разверну наверное вопрос будет снят а когда его нет?

ну на крайняк идея, качаешь локально код, кладешь его в image и устанавливаешь.

В конце концов можно в одном контейнере создать венв и все скачать, потом его погасить и собрать с существующим венвом новый чистый

у вас глаз не дергается когда вы такое предлагаете?

эм.... у тебя должен быть отдельный приватный ключ для CI, в чем проблема?

у вас глаз не дергается когда вы такое предлагаете?

А что не так ?

нет у меня глаз не дергается, т.к. управление секретами - вполне нормальная практика в развитой CI/CD инфраструктуре

ну на крайняк идея, качаешь локально код, кладешь его в image и устанавливаешь.

вот я хочу этот процесс облагородить и спрашиваю у вас как это сделать а вы все говорите разверни тут сервера кластера итд

В ci настроен где-то ключ к репозиторию. Передаешь его как параметр в docker build. Внутри с ним все ставишь и норм.

проблема в другом. код лежит в приватной репе. к ней нужен доступ по ключу.

У него какая-то проблема со скачиванием конкретных либо хз откуда

проблема в другом. код лежит в приватной репе. к ней нужен доступ по ключу.

Приватная репа - это что? Pypi?

видимо приватный github или gitlab on premise

Или веб сервер с зип архивом с хттпс авторизацией по клиентским сертификатам, лежащим на аппаратном ключе?

пип умеет ставить с гита.... не обязательно с гитхаба

сначала надо заморочиться чтобы ci ключ хранила потом заморочиться чтобы он в конейре был а потом удалялся короче столько плясок пипец

Я все ещё не понимаю, в чем проблема прокинул ключ привет сборке контейнера

сначала надо заморочиться чтобы ci ключ хранила потом заморочиться чтобы он в конейре был а потом удалялся короче столько плясок пипец

ну а как ты хотел. добро пожаловать в DevOps мир

сначала надо заморочиться чтобы ci ключ хранила потом заморочиться чтобы он в конейре был а потом удалялся короче столько плясок пипец

Да. Зато один раз настроишь и во всех проектах можешь юзать

любишь проприетарный код писать, люби саночки возить ^W^W инфраструктуру поднимать

2 строки кода, десяток кликов мышью. Обсуждаем дольше

Я все ещё не понимаю, в чем проблема прокинул ключ привет сборке контейнера

ты кладешь ключ в контейнер с приложением чтобы установить зависимость через pip и любой дурак кто получит доступ к контейнеру поличт ключ - заебись

И да, для ci лучше иметь отдельный ключ. Который если что можно отозвать отдельно

ты кладешь ключ в контейнер с приложением чтобы установить зависимость через pip и любой дурак кто получит доступ к контейнеру поличт ключ - заебись

Разве параметры сборки контейнера видны после его сборки?

корневой сертификат еще предложи отозвать

ну блин чо нет тулзы простой?

ты кладешь ключ в контейнер с приложением чтобы установить зависимость через pip и любой дурак кто получит доступ к контейнеру поличт ключ - заебись

ну во-первых ты не поставляешь ключ вместе с контейнером

просто блин сказать по списку чо надо и рядом положить

ключ у тебя нужен только для сборки

Не клади ключ файлом, передавай через параметры сборки.

не хочешь шарить с контейнером ключ, бери качай все на хост и копируй в докер контейнер

ключ у тебя нужен только для сборки

а если я захочу на разработческой машине проверить как у меня контейнер запускается?

просто блин сказать по списку чо надо и рядом положить

Ну если боишься - я же предложил. Один контейнер для скачивания и создания венв. Второй - уже с ним и приложением

а если я захочу на разработческой машине проверить как у меня контейнер запускается?

В контейнере все должно быть установлено в момент сборки. А не при запуске

давайне без ci

давайне без ci

как вы без CI живете то?

просто как скачать по списку чо надо и положить рядом?

Без ci сам разбирайся

Без ci сам разбирайся

+1

просто как скачать по списку чо надо и положить рядом?

https://vsupalov.com/build-docker-image-clone-private-repo-ssh-key/

Можешь все что предложили сделать руками

просто как скачать по списку чо надо и положить рядом?

pip install -r requirements.txt