маштабируемый инкрементальный бэкап

bname="`hostname`-`date +%m-%d-%y`-inc"
bname01="`hostname`-`date +%m-01-%y`-full"
bpasswd="passwd"
ssh_host="user@local"
ssh_path="/srv/backup/"
ssh_key_path="/home/admin/.ssh/local/id_rsa"

exclude="backup/*|cache/*|temp/*"

include=(
#dir
    /srv/http/*/
#work
    /home/*/work/doc/
)

opt_tar=(
    --create
    --gzip
    --one-file-system
    --recursion
    --preserve-permissions
    --sparse
    --dereference
)

opt_ssh=(
    -o UserKnownHostsFile=/dev/null
    -o StrictHostKeyChecking=no
    -i $ssh_key_path
)

opt_cp=(
    --archive
    --one-file-system
    --parents
}

cd $(cd $(dirname $0) && pwd)

if [[ ! -e $bname01.sum || `date +%d` == "01" ]];then
    bfile=$bname01 && mkdir -p $bname01
    find ${include[*]} -type f | grep -Ev "$exclude" | while read fname; do
        fhash=`sha256sum "$fname"`
        echo "$fhash" >> $bname01.sum
        cp ${opt_cp[*]} "$fname" $bname01
    done
else
    bfile=$bname &&  mkdir -p $bname
    find ${include[*]} -type f | grep -Ev "$exclude" | while read fname; do
    fhash=`sha256sum "$fname"`
        if [[ -z `grep -w "$fhash" $bname01.sum` ]]; then
            echo "$fhash" >> $bname01.sum
            cp ${opt_cp[*]} "$fname" $bname
        fi
    done
fi

cd $bfile && tar ${opt_tar[*]} --file=../$bfile.tar.gz . && cd ..

openssl enc -aes-256-cbc -in $bfile.tar.gz -out $bfile.enc -k $bpasswd

scp ${opt_ssh[*]} $bfile.enc $ssh_host:$ssh_path

bverlocal=($(sha256sum "$bfile.enc"))
bverssh=`ssh ${opt_ssh[*]} $ssh_host 'sha256sum '$ssh_path'/'$bfile'.enc' | awk '{print $1}'`
if [[ "$bverlocal" == "$bverssh" ]]; then
    rm -rf $bfile
    rm -f $bfile.tar.gz
    rm -f $bfile.enc
else
    echo checksum not match!!!
fi

unison /home/что  ssh://юзер@адрес:порт//где   -batch -ui text  -times  -prefer /главное_при_конфликте_версий  -ignore 'Name *~' -ignore 'Name .*~' -ignore 'Name *#'  -ignore 'Name *.tmp' -ignore 'Path *d/игнорируемый_директорий_указывается_с_конца_пути'  -ignore 'Name *.log'  -ignore 'Name .~*.*'    -backup 'Name *.*' -backupsuffix .bak.'$VERSION' -backupprefix ""

indeviral
через rsync получилась сделать полностью рабочую структуру. Однако ему для инкрементального бэкапа нужна эталонная директория с файлами относительно которой происходит верификация.

jim945
Что-то не пойму. В чем тут проблема?

indeviral
сначала идея была сделать инкременталку через tar ….., после проверки оказалось что не всё изменённые файлы верифицируются им как изменённые.

indeviral
разве не удобнее его один раз в месяц прогнать заархивировать и отправить подальше, а себе оставить файлик с хэшами?

indeviral
да никаких проблем, просто меня не устраивает необходимость держать большие объёмы чужих данных. (тем более хз что там будет может ещё и с шифрованием прийдётся возится если на долго надо будет оставлять...)
разве не удобнее его один раз в месяц прогнать заархивировать и отправить подальше, а себе оставить файлик с хэшами?