Dmitry
знаете конечно. пайплайн в репе с кодом создает коммит в инфра репе, конечно он знает какой комит создал
прочитай выше. Условие @elemir90 : нельзя автоматически комитить в инфра репу.
Леннарт Zh 🕊
> Всё так. в инфра репу рендерятся готовые к деплою манифесты. Ну окей начнем заново. Смотри. У тебя есть инфра репа, есть репа с кодом сервиса. v1.0.1 код сервиса требует два деплоймента и cronjob v1.0.2 код сервиса требует только один деплоймент Нужно откатить с v1.0.2 до v1.0.1. Если мы просто пропишем v1.0.1 и запушим, приложение сломается, так как оно зависело от двух деплойментов и cronjob. А они пропали @elemir90 Как я понял предлагает, чтобы master инфра репы, всегда соотвесвтовал состоянию в кубе + никаких автоматических откатов. То есть для отката, нужно найти коммит в инфра репе, когда в нем был проиписан сервис версии v1.0.1 и сделать revert до этого коммита. И запушить. Сейчас я делаю по другому. У меня либо инфра репа это сабмодуль в репе сервиса, либо описание ифнры просто лежит вместе с сервисом. И для отката, нужно просто выбрать нужную версию сервиса и задеплоить, и это гарантировано дает описание инфры совместимое с нужной версией сервиса. И я не понимаю в чем приемущество его описанного подхода. Вот и все. Пытаюсь выяснить
Кронджоб зачем?
G72K
Вот опять юзание гита в качестве базы данных
нет, юзаю гит в качестве иммьютабл лога. могу кафку, но гит удобнее так как можно делать реверты
Dmitry
я не способ инстала, а про то что из одно комита репы кода можно несколько деплоев сделать. т.е. одна версия кода, но несколько версий в инфре
да нет тут проблемы. Еще раз проблема про то что надо связывать версию инфра репы с репой кодовой. А у нас этой связи нет, только через поиск артифактов в коммитах
Евгений
нет, юзаю гит в качестве иммьютабл лога. могу кафку, но гит удобнее так как можно делать реверты
Ну это и есть база данных и гит очень плохой инструмент для этого
Dmitry
Кронджоб зачем?
это условный пример, вмест cronjob допиши что нравится
Евгений
😂
Чувствую наболело :)
George
С остановкой сервиса, что ли ?
Леннарт Zh 🕊
> Всё так. в инфра репу рендерятся готовые к деплою манифесты. Ну окей начнем заново. Смотри. У тебя есть инфра репа, есть репа с кодом сервиса. v1.0.1 код сервиса требует два деплоймента и cronjob v1.0.2 код сервиса требует только один деплоймент Нужно откатить с v1.0.2 до v1.0.1. Если мы просто пропишем v1.0.1 и запушим, приложение сломается, так как оно зависело от двух деплойментов и cronjob. А они пропали @elemir90 Как я понял предлагает, чтобы master инфра репы, всегда соотвесвтовал состоянию в кубе + никаких автоматических откатов. То есть для отката, нужно найти коммит в инфра репе, когда в нем был проиписан сервис версии v1.0.1 и сделать revert до этого коммита. И запушить. Сейчас я делаю по другому. У меня либо инфра репа это сабмодуль в репе сервиса, либо описание ифнры просто лежит вместе с сервисом. И для отката, нужно просто выбрать нужную версию сервиса и задеплоить, и это гарантировано дает описание инфры совместимое с нужной версией сервиса. И я не понимаю в чем приемущество его описанного подхода. Вот и все. Пытаюсь выяснить
Если у тебя есть staging - ты должен код продукта (сервиса) тестировать со ВСЕМИ [поддерживаемыми] версиями инфраструктуры
Dmitry
Какое-то глупое условие, кмк
ну то есть таки хранить инфу о совместимости версии инфра репы с кодовой репы таки надо
George
У тебя инфра в принципе в количестве одна штука
Леннарт Zh 🕊
С остановкой сервиса, что ли ?
Нет, graceful/reload, коллега. Только не спрашивай деталей про то как это сделать в кластере
George
Это фундаментальное свойство этого мира
Dmitry
я кароче понял, что ничего не понял. Буду пока делать как делаю. Но мне подход нравится. Спасибо @elemir90 , я тоже за gitops
Леннарт Zh 🕊
У тебя инфра в принципе в количестве одна штука
NYET! Она у тебя так же НЕПРЕРЫВНО ИЗМЕНЯЕТСЯ, как и всё остальное. Твоя работа - контролировать эти изменения, т.е. уметь быстро делать RollBack
G72K
Ну это и есть база данных и гит очень плохой инструмент для этого
чем плох? где то же надо хранить желаемое состояние. кто-то в last-applied-configuration, кто то в configmap. в гите самое удобное - есть уникальный идентификатор каждого состояния, можно метадату об успехах деплоя через git notes добавить, дифы, реверты, атомарные комиты чтоб гонки не устраивать,
Евгений
Предложи лучше. Или ты не гитопс ? 🤔
Лучше не держать данные об инфраструктуре в базе данных, недекларативненько это
George
Оно тянет необходимость бекапа етсд и привет
Евгений
George
Ответ
Увы, но нет
Евгений
То что тебе неудобно, не значит, что это плохо. Неудобство это тоже инструмент
Dmitry
@yamlcoder Вопрос свелся к тому что, сохранять ли инфу о совместимости версий репы кодовой с инфра репой. Если сохранять, то ифра репу можно хранить как сабмодуль или в прям в кодовой репе. Если нет, то я пока не понял, как решать свои проблемы, свзяанные с этим.
Евгений
Начнёшь хранить стейты инфры в базе и вернёшься в мир заббикса и винды
Леннарт Zh 🕊
Ролбек куда ?
В кластер. Ты напоминаешь 23-летнего сеньёра из Э42. Ты не всю инфру обновляешь везде и сразу. А по canary/rolling/blue-green
George
У тебя не все изменения в инфре обратно совместимы. Упыри, которые пишут те же операторы, пишут их одной левой
Леннарт Zh 🕊
Начнёшь хранить стейты инфры в базе и вернёшься в мир заббикса и винды
Евгений, мы все знаем, что ты умняш. Пиши сразу КАК НАДО/правильно делать (в идеале - ещё и почему)
Евгений
Там есть выше как надо за моим авторством
George
Повтори плиз для тупых
George
Я понимаю, что селфконтейнд эпликейшн это терминальный и идеальный случай
George
Ньет
Леннарт Zh 🕊
> Всё так. в инфра репу рендерятся готовые к деплою манифесты. Ну окей начнем заново. Смотри. У тебя есть инфра репа, есть репа с кодом сервиса. v1.0.1 код сервиса требует два деплоймента и cronjob v1.0.2 код сервиса требует только один деплоймент Нужно откатить с v1.0.2 до v1.0.1. Если мы просто пропишем v1.0.1 и запушим, приложение сломается, так как оно зависело от двух деплойментов и cronjob. А они пропали @elemir90 Как я понял предлагает, чтобы master инфра репы, всегда соотвесвтовал состоянию в кубе + никаких автоматических откатов. То есть для отката, нужно найти коммит в инфра репе, когда в нем был проиписан сервис версии v1.0.1 и сделать revert до этого коммита. И запушить. Сейчас я делаю по другому. У меня либо инфра репа это сабмодуль в репе сервиса, либо описание ифнры просто лежит вместе с сервисом. И для отката, нужно просто выбрать нужную версию сервиса и задеплоить, и это гарантировано дает описание инфры совместимое с нужной версией сервиса. И я не понимаю в чем приемущество его описанного подхода. Вот и все. Пытаюсь выяснить
Никаких сабмодулей, толко номера версий (теги) в пайплайн
G72K
@yamlcoder Вопрос свелся к тому что, сохранять ли инфу о совместимости версий репы кодовой с инфра репой. Если сохранять, то ифра репу можно хранить как сабмодуль или в прям в кодовой репе. Если нет, то я пока не понял, как решать свои проблемы, свзяанные с этим.
инфра репа этот тот условный кронжоб для 1.0.2? не важно как, важно что б всё что хочется задеплоить хранилось в доступном месте в уже отрендереном виде. можно как артифакт в сиай, можно как комит в инфра репе
George
Начнем с того, что ci != Cd
George
И я не говорю о том, что если никто не смотрит в инфра репу, то грош ей цена (а как это проверить - думали ?)
Леннарт Zh 🕊
> То есть для отката, нужно найти коммит в инфра репе, когда в нем был проиписан сервис версии v1.0.1 и сделать revert до этого коммита. И запушить. Не совсем. для отката надо найти коммит v1.0.2 и заревертить его. т.е. в общем случае мы не откаывается к чему-то, а отменяем что-то. > И я не понимаю в чем приемущество его подхода. преимущество инфра репы в том, что оно отделяет состояние инфры от состояния кода, инфра репа вообще не знает ничего о версиях приложения, она как байткод - что сказали, то и исполняет. это дает возможность откатывать не боясь что что-то забыли. скажем приложение не деплоили полгодо, нактили новую версию, стало плохо, решили откатить, пробуете задеплоить тег полугодичной давности а за это время CI скрипты ушли вперед, что-то где то поменялось и деплой не срабатывает. Инфра репа тупая как пробка, там нечему ломаться и пока образ в докер регистри есть и версия куба совместима накатывать откатывать можно сколько угодно Так же инфра репа сериализует все изменения: пока одно изменения инфра репы выкатывается, другие ждут. это позволяет избежать некоторых ошибок.
Поэтому всё должно быть обмазано тестами и должны быть известны/указаны совместимые версии. Requirements.txt
George
И никаких хот фикусов вручную, кончено же
Леннарт Zh 🕊
Это идеальный мир
Идеальный мир это когда протестированые на совместимость версии всего на свете ещё в базу пишутся в табличку и эта табличка из базы в Wiki/Confluence - всегда актуальная. А отредактировать её руками нельзя, - только запустив соответствующий пайплайн
Dmitry
Слушайте, если вам нужно в 10 конфигурациях деплоить одно и то же приложение для прода, то это легаси. Бессмысленно обсуждать как применять практики, рассчитанные на микросервисную архитектуру, к такой конфигурации, тут несомненно нужны костыли
ну вот реальный кейс. Давай еще раз Есть одно и тоже приложение для разных платформ: google, ios - юзеры во сновном из европы. wechat, tiktok - китай yahoojp - япония Базы общие не нужны, бэкенды тоже. Самый просто способ - деплоить их отдельно. Нет никакой причины держать для них общий бэк и базу. Иначе проблем с тем что у тебя бэкенды и база геораспределены по всему земному шару просто уйма. + у тебя нет всяких там AS и bgp anycast и тому подобного. Просто не понимаю, почему когда ты идешь в сторону упрощения архитектуры, чтобы не страдать от сложных проблем это легаси?
Леннарт Zh 🕊
> Не совсем. для отката надо найти коммит v1.0.2 и заревертить его. т.е. в общем случае мы не откаывается к чему-то, а отменяем что-то. нет. Если например ты откатываешь с v1.0.3 до v1.0.1 разреверт тебя откатит на v1.0.2 > преимущество инфра репы в том, что оно отделяет состояние инфры от состояния кода, инфра репа вообще не знает ничего о версиях приложения Да, это приемущество. Удобно отдельно и выкатывать, я не спорю. Я говорю о минусах. Как в примере выше, когда у тебя конкретная версия приложения, зависит от конкретной версии описания инфраструктуры. Либо тебе нужно хранить зависимость версии приложения от версии описания инфраструктуры через сабмодули, что противоречит подходу предложенному @elemir90 Евгением. > скажем приложение не деплоили полгодо, нактили новую версию, стало плохо, решили откатить, пробуете задеплоить тег полугодичной давности а за это время CI скрипты ушли вперед Ну эту проблему я и решаю, храня CI скрипты и описание инфры либо как сабмодули либо вместе с кодом сервиса. Откат на тег полугодичной давно = использования CI скриптов и описания инфры полугодичной давности. > Инфра репа тупая как пробка, там нечему ломаться и пока образ в докер регистри есть и версия куба совместима накатывать откатывать можно сколько угодно Ну я вот и спрашиваю, как принято решать проблемы. Когда у тебя одна версия приложения зависит от определенной версии тупой как пробки репы. Я ее решаю через сабмодули или сохраняя вместе с кодом сервиса
У тебя проблема или с долгом, или с архитектурой. Кто-то за кем-то не успевает. Или одменам или разрабам не хватает человеко-часов.
G72K
для ясности моя позиция: гитопс инфра репа это то откуда синкается состояние кластера. эта такая штука скажем одна на весь куб кластер или хотя б на одну команду и все её неймспейсы. там хранятся отрендеренне манифесты, просто голые ямлы без никаких темплейтов или кастомайзов. туда комиты попадают из сиай разных реп, не важно что там они делают, но на выходе выдают пачку ямлов и комитят ее в инфра репу, затем у себя записывают комит инфра репы, что потом позволяет отследить деплои
Леннарт Zh 🕊
Слушайте, если вам нужно в 10 конфигурациях деплоить одно и то же приложение для прода, то это легаси. Бессмысленно обсуждать как применять практики, рассчитанные на микросервисную архитектуру, к такой конфигурации, тут несомненно нужны костыли
Да. С точки зрения бизнеса дешевле чтобы девопс допиливали как можно больше версий инфры под версии кода (последние-точно), если это не тупо миграции схемы в обе стороны
Евгений
Я навидался описаний инфры, которые не читаются человеком. Не хочу туда обратно
Леннарт Zh 🕊
Ну такое вот требование не у легаси проекта. Хотелки бизнеса. Сказать бизнесу что у них неправильные хотелки ?)
Бизнесу нужно всё менять очень быстро, в т.ч. и "как было до". Ты - слабое звено и должен делать инфру, на которой будет работать и старый и новый код.
G72K
А как этот комшар контролировать? Там будет человеконечитаемая каша
что значит контролировать? каких действий хочется?
Vladimir
Ну такое вот требование не у легаси проекта. Хотелки бизнеса. Сказать бизнесу что у них неправильные хотелки ?)
Если хотелка определенно приведет к великой боли и в общем вредна для бизнеса. А что бизнес ее не понимает - твоя задача как инженера объяснить
Vladimir
бизнес вообще по хорошему не должен в это лезть, так-то
Леннарт Zh 🕊
Ревертить через версию это безумие :)
Это явно не то место, где надо чинить. Возможно, ему так проще или не оставляют другого выхода
Dmitry
Ну это же другой вопрос совершенно. Почему ты не спросил сразу — как деплоить в 5 кластеров одновременно?
ну так суть же не изменилась. Как было куча разных весрий для разных платформ, так и осталась. + это простым образом решает проблему, когда нужно иметь разные версии для разных платформ
Vladimir
Какое-то готовое решение должно быть для этого. Типа чётных (стабильных) и нечётных минорных версий. Мне лень гуглить.
а что делать когда ты выкатили релиз 1.0, в нем нашли баг, выкатили фикс, потом еще фикс, потом еще фикс (1.03), а потом выяснили что в текущем релизме что-то сломано и в прошлом сломано и простой способ все поднять это откатить на 1.01?
Евгений
Я исхожу из трёх принципов: 1. Принцип единой ответственности, т.е. за одну вещь в один момент времени должен отвечать один агент. Если ответственность передаётся, то механизмы её передачи должны быть читаемыми и прозрачными для всех участников процесса 2. Принцип повторяемости инфраструктуры, при наличии бекапов приложения инфраструктура уметь быть легко развернута повторно на новых мощностях 3. Принцип читаемости кода инфраструктуры, человек должен легко уметь прочитать код из 2 и сделать выводы о том как устроена инфраструктура приложения
Vladimir
Не знаю. Я же джун. Ты мне вопросы задаёшь как будто я …
ну ты сказал про решение, которое должно быть. Значит и вопрос к тебе.