Muwahhid Wiki

Бэкап папки "appdata" в Облака

Скрипт

Бэкап папки appdata в Облака.


Описание каждой команды скрипта.

Общее описание всего сценария.

Есть папка, где хранятся бэкапы appdata.
Бэкапятся они с плагина CA autobackup and restore в архив appdata.tar.
Это папка и архив находятся в /mnt/user/Backups/Unraid/appdata/appdata.tar.
Из нее, копируем appdata.tar, попутно архивируя его еще раз, уже в zip, и ставим пароль.
Копируем в папку: /mnt/user/Backups/Cloud_Backup/appdata/appdata.tar.zip.
Это папка для Облачных бэкапов /mnt/user/Backups/Cloud_Backup/appdata/.
Далее, как архив appdata.tar превращается в архив appdata.tar.zip с паролем, разбиваем его на 30 частей, даем новое название 'appdata--'.
После символов --, в названии, автоматически им присваиваются индивидуальные цифры от 0 до 29, по которым можно уже их дальше сортировать.
Эти разбитые части оказываются в той же папке, что и целый бэкап, с которого мы их получили.
Поэтому, целый бэкап удаляем, то есть бэкап с именем appdata.tar.zip, а 30 частей, раскидываем по равными долям в 3 папки.
Путь для каждой из частей:
Первая часть тут: /mnt/user/Backups/Cloud_Backup/appdata/part_0
Вторая часть тут: /mnt/user/Backups/Cloud_Backup/appdata/part_1
Третья часть тут: /mnt/user/Backups/Cloud_Backup/appdata/part_2
Затем синхронизирую эти папки, с папками в облаке.
Есть два варианта, синхронизировать всю папку /mnt/user/Backups/Cloud_Backup/appdata/, тогда бэкап будет в 30 частей мелкими архивами, но весь целиком и в одном месте.
Или же второй вариант, 1-часть из 10-ти мелких архивов в одном Облаке, 2-часть в другом, и так далее, т.е. в облако синхронизируем одну из подпапок /mnt/user/Backups/Cloud_Backup/appdata/part_0 или же другую.

Конкретное описание каждой команды.

data=$(date +%Y-%m-%d_%H_%M_%S)
find /mnt/user/Backups/Cloud_Backup/appdata/ -type f -mmin +5 -exec rm -rf {} \;

Локальный бэкап appdata и бэкап в Облака по расписанию в один день.

cd /mnt/user/Backups/Unraid/appdata && find . -type f -mtime -1 | xargs zip -P myPasswordForArchive -r /mnt/user/Backups/Cloud_Backup/appdata/appdata_"$data"_.tar.zip
cd /mnt/user/Backups/Unraid/appdata/ && split -n 30 appdata_"$data"_.tar.zip -d "appdata_"$data".tar.zip--"
cd /mnt/user/Backups/Unraid/appdata/ && rm -R appdata_"$data"_.tar.zip
cd /mnt/user/Backups/Cloud_Backup/appdata/ && find -name 'appdata'$data'.tar.zip--0*' -exec mv {} /mnt/user/Backups/Cloud_Backup/appdata/part_0/ \;
cd /mnt/user/Backups/Cloud_Backup/appdata/ && find -name 'appdata'$data'.tar.zip--1*' -exec mv {} /mnt/user/Backups/Cloud_Backup/appdata/part_1/ \;
cd /mnt/user/Backups/Cloud_Backup/appdata/ && find -name 'appdata'$data'.tar.zip--2*' -exec mv {} /mnt/user/Backups/Cloud_Backup/appdata/part_2/ \;
rsync -avP --delete --stats /mnt/user/Backups/Cloud_Backup/appdata/ /mnt/disks/Clouds/mailru_my_disk_1/appdata/
rsync -avP --delete --stats /mnt/user/Backups/Cloud_Backup/appdata/ /mnt/disks/Clouds/meganz_my_disk_1/appdata/
rsync -avP --delete --stats /mnt/user/Backups/Cloud_Backup/appdata/part_0/ /mnt/disks/Clouds/google_my_disk_1/appdata/part_0/
rclone cleanup google_my_disk_1:
rsync -avP --delete --stats /mnt/user/Backups/Cloud_Backup/appdata/part_1/ /mnt/disks/Clouds/google_my_disk_2/appdata/part_1/
rclone cleanup google_my_disk_2:
rsync -avP --delete --stats /mnt/user/Backups/Cloud_Backup/appdata/part_2/ /mnt/disks/Clouds/google_my_disk_3/appdata/part_2/
rclone cleanup google_my_disk_3:

Склеиваем архив обратно в единое целое.

Делается командой cat:

cat название_частей* > возврат.zip

Символ*, надо ставить вместо цифры, которые были автоматически присвоены. Т.е в нашем случае их надо две **.

Весь скрипт целиком.

# appdata.
## Задаем переменную дата, чтоб добавить ее в название бэкапа.
data=$(date +%Y-%m-%d_%H_%M_%S)

## Удаляем все файлы, что старше 5 минут, в папках, которые будем синхронизировать с папками в Облаке:
find /mnt/user/Backups/Cloud_Backup/appdata/ -type f -mmin +5 -exec rm -rf {} \;

## Идем в папку, где лежат бэкапы, и забираем самый свежий. Тот, что не старше 1 дня.
## Затем, паролим, архивируем, то что нашли и отправляем в папку, которую, будет синронизироваться с Облаком.
cd /mnt/user/Backups/Unraid/appdata && find . -type f -mtime -1 | xargs zip -P myPasswordForArchive -r /mnt/user/Backups/Cloud_Backup/appdata/appdata_"$data"_.tar.zip

## Далее, идем в ту папку, что будем синхронизировать и разбиваем в ней целый архив на архив из 30 частей.
cd /mnt/user/Backups/Unraid/appdata/ && split -n 30 appdata_"$data"_.tar.zip -d "appdata_"$data".tar.zip--"

## Идем туда же, и удаляем целый архив, тот, что уже поделили на 30 частей. Он нам уже не нужен.
cd /mnt/user/Backups/Unraid/appdata/ && rm -R appdata_"$data"_.tar.zip


## Идем в папку где разбитый на 30 частей архив, и забираем оттуда 3 раза, 3 разные части по 10 частей, от общего архива:
cd /mnt/user/Backups/Cloud_Backup/appdata/ && find -name 'appdata'$data'.tar.zip--0*' -exec mv {} /mnt/user/Backups/Cloud_Backup/appdata/part_0/ \;
cd /mnt/user/Backups/Cloud_Backup/appdata/ && find -name 'appdata'$data'.tar.zip--1*' -exec mv {} /mnt/user/Backups/Cloud_Backup/appdata/part_1/ \;
cd /mnt/user/Backups/Cloud_Backup/appdata/ && find -name 'appdata'$data'.tar.zip--2*' -exec mv {} /mnt/user/Backups/Cloud_Backup/appdata/part_2/ \;


## !!! 1-вариант, весь архив в 30 частей, в одном месте !!!
### Синхронизируем папки, исходную и удаленную папку в облаке.
    #### mail.ru:
rsync -avP --delete --stats /mnt/user/Backups/Cloud_Backup/appdata/ /mnt/disks/Clouds/mailru_my_disk_1/appdata/ # Синхронизация папок.
    #### mega.nz:
rsync -avP --delete --stats /mnt/user/Backups/Cloud_Backup/appdata/ /mnt/disks/Clouds/meganz_my_disk_1/appdata/ # Синхронизация папок.


## !!! 2-вариант, одна из 3-х частей, в которой 10 архивов, в одном из облаков. !!!
### Синхронизируем папки, исходную и удаленную папку в облаке.
### 1-я часть. (10 частей от 00 до 09).
    #### google:
rsync -avP --delete --stats /mnt/user/Backups/Cloud_Backup/appdata/part_0/ /mnt/disks/Clouds/google_my_disk_1/appdata/part_0/ # Синхронизация папок.
rclone cleanup google_my_disk_1: # Чистим корзину.

### 2-я часть. (10 частей от 10 до 19).
    #### google:
rsync -avP --delete --stats /mnt/user/Backups/Cloud_Backup/appdata/part_1/ /mnt/disks/Clouds/google_my_disk_2/appdata/part_1/ # Синхронизация папок.
rclone cleanup google_my_disk_2: # Чистим корзину.

### 3-я часть. (10 частей от 20 до 29).
    #### google:
rsync -avP --delete --stats /mnt/user/Backups/Cloud_Backup/appdata/part_2/ /mnt/disks/Clouds/google_my_disk_3/appdata/part_2/ # Синхронизация папок.
rclone cleanup google_my_disk_3: # Чистим корзину.