О да, снапшот фс!!!

Круто, но, спрашивали про другое, мне кажется :)

Лучше чтобы попроще. Тар делается в потоке, списка файлов нет пока он весь не сделается, а повторно читать нельзя

ну пиши потоковый разархиватор, который будет перезаписывать файлик и запоминать имя

в конце получишь восстановленные из потока файлы и список их

а затем удаляеешь лишнее

мда..

мда..

ну или задачу еще полнее тогда

русские чаты. человек пришел с задачей и ему весь чат доказывает как у него все плохо.

на самом деле, русские чаты тут не так чтобы уникальны

стековерфлоу/суперюзер часто такие же

мда..

уже б решил сто раз за время обсуждений.

ну или задачу еще полнее тогда

куда полнее то, все уже написано

куда полнее то, все уже написано

и потонуло в обсуждении )

я вот написал тебе что думаю про то что я понял ты описал

то есть есть поток без хедера со списком, нужно восстановить из него файлы и удалить что не было в потоке

есть borgbackup, у него есть экспорт файлов и есть экспорт потоком в тар. надо восстановить архив, но большая часть файлов совпадает с тем, что в бекапе. поэтому надо восстановить так, как это бы делал rsync —delete borgbackup сам так не умеет сейчас и не будет в ближайшие две версии. Потом - будет, но это через 1-2 года, если ориентироваться на текущие темпы разработки

есть borgbackup, у него есть экспорт файлов и есть экспорт потоком в тар. надо восстановить архив, но большая часть файлов совпадает с тем, что в бекапе. поэтому надо восстановить так, как это бы делал rsync —delete borgbackup сам так не умеет сейчас и не будет в ближайшие две версии. Потом - будет, но это через 1-2 года, если ориентироваться на текущие темпы разработки

ну в таком случаи ты реализуешь потоковый untar который будет работать как rsync :)

файлов - например, 3м, на 100 гиг

то есть rolling checksum'ы

и пр.

ну в таком случаи ты реализуешь потоковый untar который будет работать как rsync :)

вручить денег авторам борга и очень сильно возжелать, чтобы фича появилась здесь и сейчас - реалистичнее.

напиши и закоммить

дел реально на пару часов.

вручить денег авторам борга и очень сильно возжелать, чтобы фича появилась здесь и сейчас - реалистичнее.

ну пессимистично работы там неделя с отлакдой, тестами и бенчмарками, если включить перерывы на кофе и только рабочее время

оно на питоне. Я не пишу на питоне. И у них там есть нюансы внутренностей, это не очень просто делается в их случае

оно на питоне. Я не пишу на питоне. И у них там есть нюансы внутренностей, это не очень просто делается в их случае

ты можешь написать это как отдельный сервис на $язык_нейм

ну пессимистично работы там неделя с отлакдой, тестами и бенчмарками, если включить перерывы на кофе и только рабочее время

это если добавить еще "разобраться в говнокоде боргбекап" (ничего личного, не знаю) и подучить питон.

это если добавить еще "разобраться в говнокоде боргбекап" (ничего личного, не знаю) и подучить питон.

да что уж там, любой большой проект говнокод на сколько-то процентов

консольную тулзёвину написать, которая будет это делать на месте - пара часов

консольную тулзёвину написать, которая будет это делать на месте - пара часов

ну за неделю можно даже будет и язык какой-нибудь выучить )

заодно

типа так - хм, пишу на расте, я его не знаю, но пишу

хоп-хоп и за неделю рабочее решение

А что за херотень показывает ls -l на файлы, к которым применено setfacl?

Точечку

господа, а какую литературу можно почитать что б "войти в девопс"?)

Точечку

Не. Пьюсик. Но при этом он херь на права показывает

господа, а какую литературу можно почитать что б "войти в девопс"?)

Войти в девопса? Камасутра?

еще та)

Войти в девопса? Камасутра?

и инструкцию к дилдо

господа, а какую литературу можно почитать что б "войти в девопс"?)

А что ты хочешь? Девопс сейчас вцелом бузворд аля импортозамещение

Почитать что это такое и с чем это едят. Подход к организации рабочего процесса, какими инструментами и тд. Сейчас девопс для меня - это те же админы, только которые все автоматизировали)

Может хотя бы так devops engineer ~ release engineer? Но в широких кругах сейчас девопс = админ-разгребатель г за всеми, и за разработчиками и за недо опсами

Может хотя бы так devops engineer ~ release engineer? Но в широких кругах сейчас девопс = админ-разгребатель г за всеми, и за разработчиками и за недо опсами

нет, это неверно

нет, это неверно

вот потому и спрашиваю) что почитать который только собирается ступить на эту скользкую дорожку)

не стоит вскрывать эту тему.

почему? продолжать держать парк хостов на уровне скриптов и ручной работы?

почему? продолжать держать парк хостов на уровне скриптов и ручной работы?

А ты думаешь у девопсов нет парка скриптов?

Есть. Но это же не все их инструменты

А что есть из годных rpc-фреймворков есть с поддержкой python?

grpc

да ладно, можно войти в девопсы))

Ansible / Molecule / Jenkins / Jenkins JJB / Terraform / Testinfra/ TestCafe / Invoke / Gitlab-CI

закрывает 98% работы

@kevit вот и я так считаю. спасибо)

если страшно можно взять какой готовый проект типа kargo

там уже все обернуто другими девопсами и можно просто рассматривать внутренности

когда страшно, всегда есть тестовая площадка

закрывает 98% работы

я не девопс похоже, из всего этого чуть-чуть работал с дженкинсом, терраформом и гитлаб-си

есть еще несколько стеков

chef или босх простигосподи

очень сложно. девопсы это реально про технологии и стеки? :)

конечно. стек это отражение внутреннего света девопса

ансибл вот императивен и повелевающ

фу, тогда девопсы какие-то убогие

шеф весь такой ориентированный и состояниями

в босхе есть деплой и мы его рабы

впрочем, этот чатик нормальный, лучше этот срач продолжить в девопс-ру, там больше с вентилятора летит.

ансибл вот императивен и повелевающ

ансибл императивен?

да, точн

Всем привет! нужна помощь! не могу разобраться с gitlab-CI при запуске pipeline получаю такую ошибку - fatal: repository 'https://gitlab-ci-token:xxxxxxxxxxxxxxxxxxxx@gitlab.company.ru/DevOps/baseimage.git/' not found при этом в gitlab-ci.yml script: - echo "$CI_REGISTRY_IMAGE" просто для теста, что он вообще запустился, собственно, третий день рою мануал по гитлабу, раннеру и смежные, но нигде не могу найти этот поганый gitlab-ci-token - откуда его брать и где потом указывать, чтобы он проявился в pipeline?

А есть линк на проект?

Класть в netrc

А есть линк на проект?

конечно есть. gitlab.company.ru/DevOps/baseimage.git по этому линку на рабочей тачке он успешно коннектится

echo -e "machine gitlab.com\nlogin gitlab-ci-token\npassword ${CI_JOB_TOKEN}" > ~/.netrc

Но должны быть права

На репо

https://docs.gitlab.com/ee/user/project/new_ci_build_permissions_model.html

ну я хз... для локальной тачки генерятся ключи и прописываются потом в гитлабе, чтобы юзер ходил в репу по ключу. а тут как бы авторизация по токену, как я понял... и либо я чего то не понял, либо она не работает