они только так работают)

артефакты - это как раз тот зашаренный билд

cache - все, что нужно для запуска, папки с вендором

можно попробовать вокруг вот этого поплясать: https://docs.gitlab.com/ee/ci/yaml/#cache но это уже такое, dark magic, имхо

я за кеш боюсь, не надёжно, а артефакты не умееют между бранчами

в смысле?

ты можешь дать имя кешу через key

там есть много переменных - коммит хеш, имя бранча

или имя проекта

но в целом это пиздец)

идея билда - иметь независимый от внешних воздействий процесс

https://docs.gitlab.com/ee/ci/caching/

artefacts работает так - объявляешь в первой таске, все следующие за ней этот артефакт наследуют

не поделитесь примером как "надо"? Всё же так все и делают - собирают и гоняют одинаковые тесты на каждой ветке?

Я же писал, брать докер образ ветки мастер или там образ собранный и запушанный для предыдущего коммита и делать докер билд с —cache-from этого образа. Дальше докер уже раздуплит, если правильно слои сделаны то если код не менялся он скипнет шаги копирования и следующие шаги билда

Я же писал, брать докер образ ветки мастер или там образ собранный и запушанный для предыдущего коммита и делать докер билд с —cache-from этого образа. Дальше докер уже раздуплит, если правильно слои сделаны то если код не менялся он скипнет шаги копирования и следующие шаги билда

идея, да. Но всё равно обмазывать вокруг логикой и тестами, даже если они не понадобятся. Да я понял что никто так не делает и надо "велосипедить" )

Ну почему, у меня вот так сделано

Кеш фром образ предыдущего коммита

в смысле?

у меня с тобой всё заново, зря имя сменил, я лишь по "троллингу" смог понять кто ты))

У меня контейнер с машин лернинг приложением, он с нуля будет минут 40 билдиться

Кеш фром и правильный порядок слоёв спасает

Кеш фром образ предыдущего коммита

ну тут главный вопрос - что есть предыдуший? я не знаю предыдущую версию, если её явно руками не вести

Подскажите, есть у kubectl какой-то verbose? Мастер очень долго отвечает на любой запрос, хочу посмотреть где именно подвисает.

Подскажите, есть у kubectl какой-то verbose? Мастер очень долго отвечает на любой запрос, хочу посмотреть где именно подвисает.

У любой команды есть help или man, можно оттуда начать

там такого не нашел

в логах apiserver controller-manager scheduler тоже в этот момент ничего подозрительного не пролетает

предполагаю что дело в etcd, но доказать не могу)

там такого не нашел

https://kubernetes.io/docs/reference/kubectl/cheatsheet/#kubectl-output-verbosity-and-debugging

У любой команды есть help или man, можно оттуда начать

и ещё доки)

ага, спасибо

там такого не нашел

# kubectl help ... Use "kubectl options" for a list of global command-line options (applies to all commands). # kubectl options ... -v, --v=0: log level for V logs

Опоздал правда)

Да, спасибо

Странно, вроде ошибок выводе нету, но уж очень медленно всё просиходит

камрады, не понимаю, ингресс экспоузится, как сервис на 3000+ портах, или он все таки должен слушать 80 и 443?

ну тут главный вопрос - что есть предыдуший? я не знаю предыдущую версию, если её явно руками не вести

я для каждой ветки пушаю в реджистри тег с текущим коммит хешем <branch name>-<commit sha> и <branch name>-latest

в вашем же случае может быть надо не так - тут вам виднее

я для каждой ветки пушаю в реджистри тег с текущим коммит хешем <branch name>-<commit sha> и <branch name>-latest

ну кроме как у вас, я не вижу вариантов. Я вот сейчас вытаскиваю последний коммит который мержится, вроде что-то выходит, но чувство велосипеда не покидает

Подскажите, есть у kubectl какой-то verbose? Мастер очень долго отвечает на любой запрос, хочу посмотреть где именно подвисает.

--v=... и да, как обычно оно незадокументировано https://github.com/kubernetes/kubernetes/issues/35054

я обычно юзаю -v=8 но это просто копипаст из какого-то мануала и какая цифра какие логи даст без понятия

--v=... и да, как обычно оно незадокументировано https://github.com/kubernetes/kubernetes/issues/35054

есть же в доках и в хелпе

ну кроме как у вас, я не вижу вариантов. Я вот сейчас вытаскиваю последний коммит который мержится, вроде что-то выходит, но чувство велосипеда не покидает

ну почему велосипед, про это есть статьи и даже на митапах выступления например https://medium.com/@gajus/making-docker-in-docker-builds-x2-faster-using-docker-cache-from-option-c01febd8ef84

есть же в доках и в хелпе

хмм если починили то странно что тикет так и не закрыли, ну тем лучше

Странно, вроде ошибок выводе нету, но уж очень медленно всё просиходит

что именно медленно? может куб в сиднее в датацентре или там в бразилии или просто латенси? Ещё квоты можно глянуть на апи сервер под, может у него там 0.1 цпу

ну почему велосипед, про это есть статьи и даже на митапах выступления например https://medium.com/@gajus/making-docker-in-docker-builds-x2-faster-using-docker-cache-from-option-c01febd8ef84

Блин, ну не в ту сторону это всё, да и можно кеши без dind

ну куда деваться, с убожеством гитлаба все равно без велосипедов никуда

что именно медленно? может куб в сиднее в датацентре или там в бразилии или просто латенси? Ещё квоты можно глянуть на апи сервер под, может у него там 0.1 цпу

Оказалось что на сервере дикий load average из-за нагрузки на диск копированием.

банальнейших же вещей там нет, апстрим билдов, или там чтобы в джобе можно было сделать инпут и выбрать какой енв продеплоить

и такой боли можно на несколько листов выписать

банальнейших же вещей там нет, апстрим билдов, или там чтобы в джобе можно было сделать инпут и выбрать какой енв продеплоить

какой-то внешний енвайремент там же запилили

Оказалось что на сервере дикий load average из-за нагрузки на диск копированием.

сурово, что ж там у вас за сервер если его копирование может так подгрузить, или там какой-то дофига-многопоточный скрипт занимается копированием?

какой-то внешний енвайремент там же запилили

ой эта такая штука сбоку и бред сивой кобылы вообще

можно енв создать и UI а удалить нет, только через апи

банальнейших же вещей там нет, апстрим билдов, или там чтобы в джобе можно было сделать инпут и выбрать какой енв продеплоить

ну то, что там не так как в других, не значит что это плохо) другой подход\реализация. Но это уже оффтоп

идиоты блять (с)

идиоты блять (с)

какой CI у вас?

да вот как раз загоняют все команды на gitlab CI

и там будет и весь код и CI ля всех команд и докер реджистри

создают новый single point of failure усиленно

учитывая что там решили юзать SoftNAS он уже у нас ложился и 3 дня хистори всех реп терял (потому что бекапы для дураков) я с нетерпением жду когда юта вся дженга завалится

создают новый single point of failure усиленно

так никто не мешает сделать его HA

да, но пока что этого нет

как раньше было хорошо - linux vs windows, сейчас тем для холиваров куда больше)))

просто надо инструмент под задачу а не всех загнать на какую-то хрень потому что кому-то там она понравилась и он ее пробустил

у нас так с опеншифтом вышло, теперь вот пушат гитлаб

а с гитлабом-то что не так?

да все не так, как CI то просто ниже плинтуса поделие

проблемы с импортом с гитхаба - банальнейшая же задача но нет

на уровне travis ci

куча багов

что за проблемы с импортом с гитхаба?

багов везде дофига, в багтрекер кубера ты сам регулярно смотришь

в полседней версии наконец осилили сделать аналог деплоймент кейс гитхаба, чтобы не пихать свой персональный токен для доступа в докер реджистри в пул секреты куба а можно было для каждого реджистри сделать отдельный токен

энтерпрайз супер-пупер премиум саппорт вместо ответа чараз 4 часа отвечает через 3 дня

слова вроде понятные, но ничо не понятно

про поддержку хз, мы юзали селф-хостед

импорт с гитхаба сначала вообще валился с 500, потом вроде в новой версии заработал через раз но упорно импортирует не в выбранный проект а в твой личный спейс

и тд. и т.п.

у меня работал вообще без проблем

так и у нас селф хостед но энтерпрайз

импортил проекты в версиях 9.х без каких-либо проблем

у меня работал вообще без проблем

ну это из раздела у меня такая же нога но ничего не болит

ну то есть вообще вопросов не возникало

может именно в энтерпрайз было сломано? %)

так и у нас селф хостед но энтерпрайз

ту на free Всё отлично, а ты на энтерпрайз жалуешься? (

у нас просто под 20 гитхаб организаций с сотнями или может тысячами репо в каждой, загоняют нас на гитлаб потому что гитхабу типа платить много

В гитлабе багов очень много, они правда и фиксятся быстро, но и так же быстро возникают новые)

Хотя когда используешь 20% от функционала оно не сильно напрягает)

и вот когда гитлаб пытается выгрести все репы из всех орг что мой юзер имеет доступ - происходят разные веселые вещи

ну вот это уже очень специфичный кейс

сомневаюсь что у многих пользователей есть доступы в тысячи репозиториев

что-то получилось ^_^

один образ, разные теги

сомневаюсь что у многих пользователей есть доступы в тысячи репозиториев

ну извини, это же энтерпрайз версия или мы тут в бирюльки поиграть пришли?

баг-то повесил им?

энтерпрайзы ваще в монорепо живут без гитов :)

один образ, разные теги

о кстати про это, в гитлабе можно один и тот же образ запушать с несколькими тегами (но ID у образа одинаковый), а вот если потом удалить любой из этих тегов то удалится этот тег, образ и все другие теги что на него ссылаются