Vladimir
но ваще пойду спать, эт да
Andrey
Народ, привет ))) подскажите пожалуйста по GitHub Actions для iOS. Хочу организовать CICD пет-проекта. Хочу чтоб пулл-реквест с веток bug/.... который я влил в мастер сразу деплоился на TestFlight. Что написать в on: ....?
Combot
Алена Швед has been banned! Reason: CAS ban.
Dmitry
Народ, привет ))) подскажите пожалуйста по GitHub Actions для iOS. Хочу организовать CICD пет-проекта. Хочу чтоб пулл-реквест с веток bug/.... который я влил в мастер сразу деплоился на TestFlight. Что написать в on: ....?
что написать в on: - это твоя меньшая из проблем. В доках есть все варианты того, что там можно написать https://docs.github.com/en/actions/reference/workflow-syntax-for-github-actions#on Основная твоя проблема, это то что testflight не имеет методов API для заливки туда билда. Можно поискать в доках и удивиться: https://developer.apple.com/documentation/appstoreconnectapi/apps https://developer.apple.com/documentation/appstoreconnectapi/builds Но есть fastlane, который умеет заливать билды в testflight и делает это не через API. Для заливки в testflight требуется логин и пароль от appleId + живая сессия +appleid specific password, иначе надо будет пройти двух факторную авторизацию например через sms. Сессию тоже можно создать и сохранить в переменной среды FASTLANE_SESSION (https://docs.fastlane.tools/best-practices/continuous-integration/). Но эта сессия протухает, примерно через месяц, и ее каждый раз надо вручную пересоздавать проходя двух факторку. + Сессия скорее всего привязывается к ип адресу. А в случае github actions при каждой сборке поднимается отдельная виртуалочка и у нее скорее всего внешний ип адрес будет другим. То есть сессия каждый раз скорее всего будет сбрасываться и надо будет проходить двух факторку вручную. Но можно использовать self-hosted runner, тогда останется проблема с протуханием сессии каждые 30 дней. Я сильно костылил чтобы автоматизировать процесс прохождения двух факторки. И не парится о протухших сессиях или новых раннерах
Andrey
что написать в on: - это твоя меньшая из проблем. В доках есть все варианты того, что там можно написать https://docs.github.com/en/actions/reference/workflow-syntax-for-github-actions#on Основная твоя проблема, это то что testflight не имеет методов API для заливки туда билда. Можно поискать в доках и удивиться: https://developer.apple.com/documentation/appstoreconnectapi/apps https://developer.apple.com/documentation/appstoreconnectapi/builds Но есть fastlane, который умеет заливать билды в testflight и делает это не через API. Для заливки в testflight требуется логин и пароль от appleId + живая сессия +appleid specific password, иначе надо будет пройти двух факторную авторизацию например через sms. Сессию тоже можно создать и сохранить в переменной среды FASTLANE_SESSION (https://docs.fastlane.tools/best-practices/continuous-integration/). Но эта сессия протухает, примерно через месяц, и ее каждый раз надо вручную пересоздавать проходя двух факторку. + Сессия скорее всего привязывается к ип адресу. А в случае github actions при каждой сборке поднимается отдельная виртуалочка и у нее скорее всего внешний ип адрес будет другим. То есть сессия каждый раз скорее всего будет сбрасываться и надо будет проходить двух факторку вручную. Но можно использовать self-hosted runner, тогда останется проблема с протуханием сессии каждые 30 дней. Я сильно костылил чтобы автоматизировать процесс прохождения двух факторки. И не парится о протухших сессиях или новых раннерах
Да я читал доку но не понял этого принципа как затриггерить не В какую ветку а ИЗ какой ветки 😏
Dmitry
on.<push|pull_request>.<branches|tags>
Dmitry
Если чего-то в доках нет, значит этого функционала нет
Dmitry
то есть остается только из гита это проверять уже когда билд был зыпущен. Смотреть с какой ветки был merge и в зависимости от этого заливать или не заливать в testflight. Не уверен что можно красиво в гите найти ветку с которой был мерж, она ведь может быть удалена совсем. Наверное тут только парсить комментарий, который оставляет gtihub после мержа в мастер из PR
Andrey
Спасибо большое! То есть в принципе советуешь пока не мучить гитхаб а сделать все через Jenkins+Fastlane?
Dmitry
Спасибо большое! То есть в принципе советуешь пока не мучить гитхаб а сделать все через Jenkins+Fastlane?
в jenkins тоже нет ничего готового, чтобы тригерить развертывание в зависимости от того, с какой ветки был мерж в мастер. Такие же костыли будут
Dmitry
fastlane пригодится в обоих случаях скорее всего
Andrey
fastlane пригодится в обоих случаях скорее всего
Извини что оч общий вопрос. Как тогда лучше сделать? Надо и тестфлайт и в итоге аппстор)
Aleksandr
Почему нельзя использовать апи ключи, зачем использовать сессию?
Dmitry
Извини что оч общий вопрос. Как тогда лучше сделать? Надо и тестфлайт и в итоге аппстор)
testflight и appstore это щас одно и тоже. Один API. То есть testflight это сейчас просто вкладочка в приложеньки в appstore. Заливается все в testflight. Потом вроде как вручную надо одну из готовых сборок при создании релиза
Dmitry
Почему нельзя использовать апи ключи, зачем использовать сессию?
Подскажи какой метод из API можно использовать для заливки билда в appstore/testflight? Я таких не нашел, разрабы fastlane тоже не нашли по всей видимости
Dmitry
Вот дока https://developer.apple.com/documentation/appstoreconnectapi/apps по API для работы с приложениями Вот по работе с билдами https://developer.apple.com/documentation/appstoreconnectapi/builds
Aleksandr
lane :get_app_store_connect_api_key do ensure_env_vars( env_vars: [ 'APP_STORE_CONNECT_API_KEY_AIGL', 'APP_STORE_KEY_ID_AIGL', 'APP_STORE_ISSUER_ID_AIGL' ] ) app_store_connect_api_key( key_id: "#{ENV["APP_STORE_KEY_ID_AIGL"]}", issuer_id: "#{ENV["APP_STORE_ISSUER_ID_AIGL"]}", key_content: "#{ENV["APP_STORE_CONNECT_API_KEY_AIGL"]}", in_house: false, ) end upload_to_testflight( skip_waiting_for_build_processing: true)
Aleksandr
это выдержки из фастфайла
Dmitry
Тебе же сам fastlane попросит пройти двух факторку в интерактивном вводе надо будет ввести код
Dmitry
https://github.com/fastlane/fastlane/blob/master/spaceship/lib/spaceship/two_step_or_factor_client.rb#L334
Aleksandr
ничего не просит, в .fastlane ничего нет
Aleksandr
в методе upload_to_testflight есть аргументы для api
Dmitry
Да, похоже это добавили наконец. И можно убирать костыли fastlane has historically used Apple IDs with username and password to authenticate using a cookie-based web session. fastlane will continue using this same cookie-based web session to authenticate with an unofficial version of the App Store Connect API.
Aleksandr
и в доке фасталейна написано, два метода, один апи, другая двухфакторка
Aleksandr
ну вот, с подключением
Dmitry
Блин, они это в августе 2020 сделали, а я все это фигачил в июне 2020. Надо было подождать два месяца.
Dmitry
Я там такие костыли делал капец. Но все таки непонятно какой метод они используют для заливки. Либо дока apple устарела. Надо в коде поискать.
Aleksandr
Я переделал на ключи, когда они включили обязательную двухфакторку в марте
Dmitry
Я переделал на ключи, когда они включили обязательную двухфакторку в марте
ну у меня двух факторка автоматом проходит. Там костыли, смски направляются в приложеньку. Через fastfile читаем последние смски с приложеньки и вставляем код для прохождения двух факторки. Поэтому даже не следил за этим делом
Dmitry
зато автоматом работает до сих пор =)
Dmitry
Всем привет! Пытаюсь разобраться как делать полный бекап VPS сервера Ubuntu 20.04.2 LTS, наткнулся на duplicity и начал тестировать, написал такой простенький скрипт для бекапа, бекап делает замечательно, сначала полный затем инкрементальный если команду повторить.
Dmitry
Далее я написал скрипт для восстановления системы из текущих бекапов, и при его запуске получаю кучу ошибок
Dmitry
Dmitry
Может кто знает как решить проблему? И правильно ли я исключаю директории в первом скрипте для бекапа? Взял их здесь https://help.ubuntu.com/community/BackupYourSystem/TAR Это вообще правильно запускать из консоли реверт системы будучи в самой системе? Может быть надо с лайвсд загружаться?
Dmitry
Всем привет! Пытаюсь разобраться как делать полный бекап VPS сервера Ubuntu 20.04.2 LTS, наткнулся на duplicity и начал тестировать, написал такой простенький скрипт для бекапа, бекап делает замечательно, сначала полный затем инкрементальный если команду повторить.
таким никто не занимается. Либо готовят образ системы с помощью packer, либо настраивают с помощью систем управления конфигурациями. Бэкпы всей системы не нужны. Лучше иметь возможность воспроизвести настройки с нуля и автоматически
Dmitry
таким никто не занимается. Либо готовят образ системы с помощью packer, либо настраивают с помощью систем управления конфигурациями. Бэкпы всей системы не нужны. Лучше иметь возможность воспроизвести настройки с нуля и автоматически
Мне показалось это удобным, например я делаю бекап всей системы перед её обновлением apt update && apt (upgrade | full-upgrade) Если что-то сломалось то взял и восстановил все назад через дуплисити, это же норм? Образ системы же будет занимать очень много места?
Dmitry
Мне показалось это удобным, например я делаю бекап всей системы перед её обновлением apt update && apt (upgrade | full-upgrade) Если что-то сломалось то взял и восстановил все назад через дуплисити, это же норм? Образ системы же будет занимать очень много места?
а с чего бы ему много весить? Это всего лишь базовый образ системы + установленные зависимости для ПО которое в нем будет запускаться + само ПО. Чуть больше образа контейнера, но не на очень много. Но это точно будет весить <= бэкапа. А если бэкапов >= 3, то образ точно выгодней по месту. Тебе в единый момент времени максимум нужно два образа. Любые итерации имзинений ты можешь собрать packer'ом c нуля, откатившись на нужный коммит и пересобрав заново образ из шаблона в этом коммите. Нет смысла делать apt upgrade. Когда можешь запечь еще один образ с обновленным ПО/новым дистибитувом и выкатить. А старый удалить. С scm аналогично, сломалось после apt-upgrade, выкатываешь систему с нуля, и scm ее готовит.
Евгений
Всем привет! Пытаюсь разобраться как делать полный бекап VPS сервера Ubuntu 20.04.2 LTS, наткнулся на duplicity и начал тестировать, написал такой простенький скрипт для бекапа, бекап делает замечательно, сначала полный затем инкрементальный если команду повторить.
А сервис vps не предоставляет снапшоты? Ну и да, согласен с коллегой: бекап файловой системы это не очень хороший процесс. Лучше создавать образ для развёртывания, а бекапы снимать только с прикладных приложений (с баз данных и чего-то подобного)
Vladimir
а CMS решает вопросы развертывания новых инстансов, в отличии от чистых бэкапов
Антон [R13 🍆 Ivelok]
Я бы вообще поставил под сомнение надёжность бэкапа файловой системы. Совершенно не факт, что ОС будет работоспособна, если положить всё файлики назад
Антон [R13 🍆 Ivelok]
Vladimir
Я бы вообще поставил под сомнение надёжность бэкапа файловой системы. Совершенно не факт, что ОС будет работоспособна, если положить всё файлики назад
Если ФС осталась той же и предварительно все сносить - то должно работать, иначе это уже нельзя называть бэкапом
Евгений
Если ФС осталась той же и предварительно все сносить - то должно работать, иначе это уже нельзя называть бэкапом
Ну, если бы можно было взять лок, то сработало. А если содержимое ФС меняется слишком быстро, то всё развалится
Vladimir
и разворачивать это дело из условного recovery iso 🙂
Евгений
Ну, это же VPS, можно тупо пустой диск создать
Рашит
Ну, если бы можно было взять лок, то сработало. А если содержимое ФС меняется слишком быстро, то всё развалится
Не, ну всегда есть fsfreeze и всякие там lvm со снепшотами, но это тяжкий путь конечно
Антон [R13 🍆 Ivelok]
Про снапшоты zfs уже можно набрасывать?
Евгений
Делаешь снапшот, а потом побайтово копируешь
Рашит
Делаешь снапшот, а потом побайтово копируешь
Ну может и на файловом уровне наверное снепшотам подмонтировать и скопировать, если уж очень хочется
Рашит
Байтиками, кажется, надёжнее
Факт и универсальнее в целом
Евгений
Ну да и бтрфс
А бррррфс жив? Его же в основном редхат писал, а они его поддержку депректейнули
Dmitry
Ну, снапшоты lvm можно прям так снять
Кстати снапшоты lvm же по сути удваивают нагрузку на запись. С zfs снапшотами также?
Евгений
На SSD нет разницы -- перезаписывать старое, либо писать новое. А карта хранится в памяти
Евгений
Т.е. нагрузка на cpu будет больше, а вот на сам диск не изменится
Dmitry
На SSD нет разницы -- перезаписывать старое, либо писать новое. А карта хранится в памяти
я имел в виду снапшоты с толстых томов, для тонких вроде не сильно теряется производительность записи.
Евгений
Хз как в толстых оно устроено, в тонких COW
Евгений
В btrfs точно COW
Евгений
А пишут его где?
Alexander 🐕
И там он как был дефолтной фс, так и остался
Alexander 🐕
Alexander 🐕
С чего бы удваивают?
Thick snapshots удваивают
rus
Нет, его, в основном, использовали в Suse
Её там продолжают использовать. Вроде как даже дефолтной.
Евгений
В Suse и FB
@spuzirev, а у вас юзается btrfs? Или это фо фан?
Dmitry
Еще вроде Fedora при установке по дефолту его предлагает
Liliya Stepanenko
Hey! Who knows how with puppet to rotate logs, for example, for nginx, using the logrotate or cron module. Need to write it in the nginx class manifest?
Alexander 🐕
Hey! Who knows how with puppet to rotate logs, for example, for nginx, using the logrotate or cron module. Need to write it in the nginx class manifest?
No, you can create a separate Puppet module to rotate logs Basically, you should configure logrotate, it’s a dedicated log curation service You can extend the nginx manifest as well
Liliya Stepanenko
extend nginx manifest?