mysql backup e problema de script rsync

Question

Eu tenho um script bash para fazer backup de bancos de dados MySQL e, em seguida, rsync-los para um local remoto. Ontem à noite este falhou espetacularmente e encheu o diretório de backup-db casa com 33GB! Eu tenho o script em execução em um cron job a cada 4 horas. Quando olhei para a pasta, parecia que o backup estava sendo executado a cada minuto da hora a cada 4 horas. por exemplo, não uma vez às 4 da manhã, mas a cada minuto dessa hora. Mesmo às 8h, etc.

Eu acho que o problema é que o rsync está rodando antes que o backup seja feito e está entrando em loop sem sair. Existe uma maneira de obter o script para sair em caso de falha de backup ou confirmar o sucesso do backup antes de executar o rsync?

Por enquanto eu acabei de remover o rsync de um pequeno script separado (mas gostaria de ter tudo em um só lugar, já que preciso replicar isso em muitos servidores.

#!/bin/bash

NOW=$(date +"%Y-%m")
BACKUPDIR="/home/deploy/backup-db/$NOW"
BKUPSSH="[email protected]"
BKUPSERVDIR="/home/user/backups/databases"

# Remove files older than 30 days
find $BACKUPDIR/ -mtime +31 -exec rm {} \;

# DO NOT BACKUP these databases
IGNOREDB="
information_schema
mysql
test
"

#* MySQL binaries *#
MYSQL=$(which mysql)
MYSQLDUMP=$(which mysqldump)
GZIP=$(which gzip)

# assuming that BACKUPDIR exists
if [ ! -d $BACKUPDIR ]; then
  mkdir -p $BACKUPDIR
else
 :
fi

# get all database listing
DBS="$(mysql --login-path=dbbkup -Bse 'show databases')"


# SET DATE AND TIME FOR THE FILE
NOW=$(date +"%Y-%m-%d_%H.%M"); # year-month-day_hour.minute format

# start to dump database one by one
for db in $DBS
do
        DUMP="yes";
        if [ "$IGNOREDB" != "" ]; then
                for i in $IGNOREDB # Store all value of $IGNOREDB ON i
                do
                        if [ "$db" == "$i" ]; then # If result of $DBS(db) is equal to $IGNOREDB(i) then
                            DUMP="NO";         # SET value of DUMP to "no"
                            #echo "$i database is being ignored!";
                    fi
            done
    fi

    if [ "$DUMP" == "yes" ]; then # If value of DUMP is "yes" then backup database
            FILE="$BACKUPDIR/$NOW-$db.sql.gz";
            echo "BACKING UP $db";
    $MYSQLDUMP --login-path=dbbkup --add-drop-database --opt --lock-all-tables --set-gtid-purged=OFF $db | $GZIP > $FILE
    fi
done

# change permissions on files
chmod -R 755 $BACKUPDIR

# rsync backup to the backup server and append the log file
rsync -azv $BACKUPDIR -e ssh $BKUPSSH:$BKUPSERVDIR >> /home/deploy/db_rsync.log 2>&1
RESULT="$?"

# check result or rsync
if [ "$RESULT" != "0" ]; then
echo -e "Rsync exit Code:" $RESULT "\nFailed to rsync databases" >> /home/deploy/db_rsync.log 2>&1
else
echo "succesfully rsynced databases" >> /home/deploy/db_rsync.log 2>&1
fi

    

Answer 1

Por favor, poste sua tarefa de cronjob, assim como você pode ter um problema lá. O que eu também sugeriria fazer é criar um arquivo de bloqueio em algum lugar apenas tocando o arquivo em algum local que você pode verificar se existe antes de executar qualquer backup. Não tenho certeza de quão grande é o seu banco de dados, mas no meu caso, por vezes, bancos de dados são tão grandes que o processo de backup pode se sobrepor com outro já em execução, portanto, eu sempre toco como um arquivo /tmp/backup.lock e antes de executar qualquer coisa no script Eu coloquei algo como if [-e /tmp/backup.lock]; então ...

No seu caso, eu tenho certeza que você tem um erro no seu cronjob e você o executa a cada minuto a cada 4 horas ou algo assim.