размер проекта не размер компании, а скорее сложность логики и количества кода управления конфигурацией

т.е. энтерпрайз тоже может юзать ансибл, но... Только если у них там простенький конфиг

большую инфраструктуру лучше писать на Puppet

ну в общем да. Это не универсальное решение. Но Птчёл считает, что универсальное

я никогда такого не говорил

Птчёл предлагает менять парадигму. Он верит, что микросервисы универсальны

про парадигму говорил, про микросервисы сама придумала

лучше прочитать в общем в оригинале холивар, что бы не было испорченного телефона

испорченный телефон это ты и он никуда не денется

про парадигму говорил, про микросервисы сама придумала

Я считаю, что никакой смены парадигмы нет. Придумали очередную нишевую штуку, скоро хайп пройдёт

испорченный телефон это ты и он никуда не денется

если отмотать наверх, то он сможет прочитать тебя в оригинале

я только это предлагаю

я вот бэкапы делаю контейнерами и мне настолько зашибись что вы даже не представляете как

я последние 10 лет так мучался с бекапами

так они меня задалбывали

а сейчас взял 2 тулзы и я пздц счастлив.

я вот бэкапы делаю контейнерами и мне настолько зашибись что вы даже не представляете как

у меня никаких проблем с онсайт бэкапами ни в S3, ни в OpenStack Swift, ни через снапшоты (c)lvm для openvz, тоже не было лет десть. Проблема оффсайт бэкапов так и не решена нормально никем

и как же ты делаешь бэкапы и ротируешь их ?

и как же ты делаешь бэкапы и ротируешь их ?

расскажу, если не забуду, на днях. У меня over9000 работы ещё сегодня

сорри

может, сегодня расскажу

если твоё решение это "у меня есть скрипты которые умеют бекапить мускул \ пг \ файлики и скрипты которые умеют ротировать это всё" то унылое гавно а не бэкапы

если твоё решение это "у меня есть скрипты которые умеют бекапить мускул \ пг \ файлики и скрипты которые умеют ротировать это всё" то унылое гавно а не бэкапы

А как ты делаешь бекапы контейнеров с бд?

Ведь нельзя же просто заснапшотить и схоронить

Там ведь будет БД шредингера унутре

также как и с любой другой БД

если мы говорим не про бейзбекапы а дампы, то подходы не отличаются ничем

оба - и puppet и ansible лютое говно (опять же ИМХО)

Всё говно если руки из жопы... ?

если мы говорим не про бейзбекапы а дампы, то подходы не отличаются ничем

Т.е. у тебя есть скрипты, которые умеют бекапить мускул \ пг \ файлики и скрипты, которые умеют ротировать это все?

Т.е. у тебя есть скрипты, которые умеют бекапить мускул \ пг \ файлики и скрипты, которые умеют ротировать это все?

неа. нету.

неа. нету.

А как? Я нипонимат

всё магически делают докеры

Ну вот как всегда, сплошная магия

аха

Если серьезно, я жду рассказа Ксении про то как она один раз написала скрипты и между проектами теперь таскает и что эти скрипты все умеют бекапить, и нотифайки умеют и в слаки и в почты а ещё и в дедман снитч.

И что что бы разобраться в этом не нужно тратить неделю.

Да я тоже послушал бы историю про универсальные скрипты.

Если серьезно, я жду рассказа Ксении про то как она один раз написала скрипты и между проектами теперь таскает и что эти скрипты все умеют бекапить, и нотифайки умеют и в слаки и в почты а ещё и в дедман снитч.

я не говорила, что у меня всё хорошо с оффсайт бэкапами, как раз всё плохо. Я тоже жду

мне не нравятся почти все фреймворки, что существуют для оффлайн бэкапов :(

жду, что появится что-нибудь прекрасное, или, что, может, я доберусь до того, что ещё раз их все посмотрю

а с техническими копиями, как их обычно называют в хостингах, у меня всё нормально. Если это AWS, то снапшоты в S3 - что ещё можно желать?

в опенстеках точно так же одним вызовом из скрипта cinder block storage можно кинуть в Swift. На низком уровне, тоже ничего не мешает засуспензить виртуалку, сделать снапшот кластерного тома lvm или снапшот ceph (я правда ещё их не юзала), и слить точно так же бэкап хоть на свой swift, s3, хоть даже на локальный ZFS (на нём ещё и красиво можно поюзать собственные снапшоты)

но всё это не то, если ты хочешь оффсайт и бэкапить приложения, а не виртуалки

И что что бы разобраться в этом не нужно тратить неделю.

Расскажи про удобные и дешёвые оффсайт бэкапы нагруженных кластеров баз данных с помощью магии докера :)

Не технические же копии у меня обычно часть приложения, как и инфраструктура

Но внутри (в коде, что бэкапит) костыли

@polnoch у нас написан костыль, который 1. определяет slave 2. выключает на него коннекты с HAproxy 3. стопает на нем реплику 4. стартует на нем бэкап всей виртуалки (спэпшот vmware через вимбэкап) 5. после поднимает в обратном порядке

Но все равно удобно, что такое есть, и работает, например, у разных IaaS провайдеров

@polnoch у нас написан костыль, который 1. определяет slave 2. выключает на него коннекты с HAproxy 3. стопает на нем реплику 4. стартует на нем бэкап всей виртуалки (спэпшот vmware через вимбэкап) 5. после поднимает в обратном порядке

Да-да. Я примерно так же делаю, только для технических копий, и ещё суспенжу VM (рядом кладется дамп памяти)

Я так бэкапила ещё ovz

Но это не бэкап приложения

Хочется что-то замечательное, что будет бэкапить именно приложение, не завязываясь на инфраструктуру Private cloud, исключая её глюки, и оффсайт

Там на гитхабе стотыщмиллионов фреймворков для бэкапа приложений. Но меня смущает, что почти всегда один разработчик. А если его машина переедет, или он/она влюбится в кого-нибудь, заведет ребёнка/попугая/кошку/собаку, и бросит проект?

ну.... тут у меня есть вариант - самому дописать :)

ибо до ДевОпса я 20 лет рабоал обычным программером :)

ну.... тут у меня есть вариант - самому дописать :)

Дописать кто угодно может, но как говорит птчел, техдолг же

Одно дело, патч там предложить, другое дело мантайнить форк

в опенстеках точно так же одним вызовом из скрипта cinder block storage можно кинуть в Swift. На низком уровне, тоже ничего не мешает засуспензить виртуалку, сделать снапшот кластерного тома lvm или снапшот ceph (я правда ещё их не юзала), и слить точно так же бэкап хоть на свой swift, s3, хоть даже на локальный ZFS (на нём ещё и красиво можно поюзать собственные снапшоты)

Засуспензить это типа разъебать до состояния пыли ? )

Люблю такое

@polnoch у нас написан костыль, который 1. определяет slave 2. выключает на него коннекты с HAproxy 3. стопает на нем реплику 4. стартует на нем бэкап всей виртуалки (спэпшот vmware через вимбэкап) 5. после поднимает в обратном порядке

Перестань называть это костылем, назови сервисом дай редми, и вуаля

Засуспензить это типа разъебать до состояния пыли ? )

Ну в докерах criu пока нет

Хотя давно можно было имплементировать этот говнодемон параллельса

Ну в докерах criu пока нет

Ошибка

Ошибка

ну тогда хорошо, раз доделали наконец

а в кубике CRIU уже работает? или через одно место?

Только как связаны криу и бэкапы ?

Только как связаны криу и бэкапы ?

суспендишь контейнер, бэкапишь, в бэкап кладёш дамп памяти

вуаля, у тебя при восстановлении восстанавливается консистентная БД

Снепшот стейта , и резервная копия данных это как говорят в Одессе две большие разницы

Снепшот стейта , и резервная копия данных это как говорят в Одессе две большие разницы

разумеется, я выше писала об этом

вуаля, у тебя при восстановлении восстанавливается консистентная БД

Ошибка

Ты не имеешь право так делать

Ошибка

нет

Подумай почему.

ещё write lock конечно нужно сделать

я делаю :)

Если ты делаешь врайт Лок тебе дамп памяти ненужен

Если ты делаешь врайт Лок тебе дамп памяти ненужен

на всякий случай

Да люди много чо делают потому что могут

А !

клиентские бэкапы если -

Вон оно чё !

там райт лок не сделаешь

ну и всякие базы данных своих же сотрудников,

Тогда возвращаемся к тому что ты не можешь так делать

тестовые виртуалки

Тогда возвращаемся к тому что ты не можешь так делать

ещё никогда проблем не было

Тестовые энвы не бэкапят

ещё никогда проблем не было

Аргумент

потерянные TCP/IP соединения фигня

такое от пакетлосса может быть

Я бэкапами тож пользовался последний раз лет 8 назад

потерянные TCP/IP соединения фигня

Не в этом дело

Я бэкапами тож пользовался последний раз лет 8 назад

я постоянно юзаю. У меня приложение после деплоя через паппет грузит последний бэкап

т.е. почти каждый день :)

но это другие бэкапы

приложений

не уровня виртуалки