編寫劇本令Xtrabackup對MySQL數據停止備份的教程。本站提示廣大學習愛好者:(編寫劇本令Xtrabackup對MySQL數據停止備份的教程)文章只能為提供參考,不一定能成為您想要的結果。以下是編寫劇本令Xtrabackup對MySQL數據停止備份的教程正文
Xtrabackup備份恢回復復興理
備份innodb表時,xtrabackup若干個線程拷貝自力表空間的.ibd文件,其實不停監督此進程中redo log的變更,添加到本身的事務日記文件(xtrabackup_logfile)中。在此進程中,產生的物理寫操作越多,xtrabackup_logfile越年夜。在拷貝完成後的第一個prepare階段,xtrabackup采取相似於innodb瓦解恢復的辦法,把數據文件恢復到與日記文件分歧的狀況,並把未提交的事務回滾。假如同時須要備份myisam表和innodb表構造等文件,那末就須要用flush tables with lock來取得全局鎖,開端拷貝這些不再變更的文件,同時取得binlog地位,拷貝停止後釋放鎖,也停滯對redo log的監督。
許多同窗對下面的懂得有混雜,認為拷貝.ibd文件就跟操作體系拷貝文件一樣。其實這裡觸及到fractured page的成績,他應當會從新讀取(應當也有重試次數,跨越後備份不勝利)。
其實這個道理很簡略,懂得下doublewrite便可以懂得了“本段摘錄自《MySQL技巧內情:InnoDB存儲引擎》”:
假如說拔出緩沖帶給InnoDB存儲引擎的是機能,那末兩次寫帶給InnoDB存儲引擎的是數據的靠得住性。當數據庫宕機時,能夠產生數據庫正在寫一個頁面,而這個頁只寫了一部門(好比16K的頁,只寫前4K的頁)的情形,我們稱之為部門寫掉效(partial page write)。在InnoDB存儲引擎未應用double write技巧前,曾湧現過由於部門寫掉效而招致數據喪失的情形。
有人或許會想,假如產生寫掉效,可以經由過程重做日記停止恢復。這是一個方法。然則必需清晰的是,重做日記中記載的是對頁的物理操作,如偏移量800,寫“aaaa”記載。假如這個頁自己曾經破壞,再對其停止重做是沒成心義的。這就是說,在運用(apply)重做日記前,我們須要一個頁的正本,當寫入掉效產生時,先經由過程頁的正本來復原該頁,再停止重做,這就是doublewrite。
1、下載和裝置
XtraBackup如今最新版本為2.1.5,官方也供給了2.0的版本可供下載,官方鏈接地址:http://www.percona.com/software/percona-xtrabackup;可以下載源碼編譯裝置,也能夠下載合適的RPM包或應用yum停止裝置。因為沒有須要特別定制的,是以建議直接應用RPM裝置便可。
裝置辦法一:
下載RPM裝置包:
wget http://www.percona.com/downloads/XtraBackup/LATEST/RPM/rhel6/x86_64/percona-xtrabackup-2.1.5-680.rhel6.x86_64.rpm
裝置依附:
[root@localhost ~]# yum install -y perl-DBD-MySQL perl-DBI perl-Time-HiRes libaio*
裝置:
[root@localhost ~]# rpm -ivh percona-xtrabackup-2.1.5-680.rhel6.x86_64.rpm
Preparing... ########################################### [100%] 1:percona-xtrabackup ########################################### [100%]
裝置辦法二:
裝置percona源:
[root@localhost ~]# rpm -Uhv http://www.percona.com/downloads/percona-release/percona-release-0.0-1.x86_64.rpm
應用yum裝置percona-xtrabackup:
[root@localhost ~]# yum -y install percona-xtrabackup
檢查裝置成果:
[root@localhost ~]# rpm -qa |grep xtrabackup
percona-xtrabackup-2.1.5-680.rhel6.x86_64
[root@localhost ~]# rpm -ql percona-xtrabackup-2.1.5-680.rhel6.x86_64
/usr/bin/innobackupex /usr/bin/innobackupex-1.5.1 /usr/bin/xbcrypt /usr/bin/xbstream /usr/bin/xtrabackup /usr/bin/xtrabackup_55 /usr/bin/xtrabackup_56 /usr/share/doc/percona-xtrabackup-2.1.5 /usr/share/doc/percona-xtrabackup-2.1.5/COPYING
Xtrabackup中重要包括兩個對象:
xtrabackup:是用於熱備份innodb, xtradb表中數據的對象,不克不及備份其他類型的表,也不克不及備份數據表構造;
innobackupex:是將xtrabackup停止封裝的perl劇本,供給了備份myisam表的才能。
2、備份劇本
#!/bin/sh
#===================================================================================================
## 備份對象:
## percona-xtrabackup-2.2.6
##
## 備份戰略:
## (1)、天天清晨04:20點停止全量備份一次;
## (2)、每隔1小時增量備份一次;
##
#===================================================================================================
PATH=/sbin:/bin:/usr/sbin:/usr/bin:/usr/local/bin:/usr/local/sbin
## DB備份基途徑
BACKUP_BASE_DIR="/data/mysql_backup"
## 增量備份時,用到的基准目次列表文件
## 內容格局:基准目次|本次備份目次|備份類型【full|inc】
INC_BASE_LIST="${BACKUP_BASE_DIR}/incremental_basedir_list.txt"
## 備份對象途徑
XTRABACKUP_PATH="/usr/local/xtrabackup/bin/innobackupex"
## MySQL設置裝備擺設途徑
MYSQL_CNF_PATH="/etc/my.cnf"
## 線程數
THREAD_CNT=6
#===================================================================================================
function print_help_info()
{
echo "--------------------------------------------------------------"
echo "Usage: $0 full | inc | help"
echo "--------------------------------------------------------------"
echo ""
exit 1
}
[[ $# -lt 1 ]] && print_help_info
[[ -d ${BACKUP_BASE_DIR} ]] || mkdir -p ${BACKUP_BASE_DIR}
## xtrabackup基本套件不存在時,停止主動下載裝置
if [[ ! -e ${XTRABACKUP_PATH} ]]; then
cd /usr/local
wget -q -O xtrabackup-2.2.6.tgz http://www.percona.com/redir/downloads/XtraBackup/LATEST/binary/tarball/percona-xtrabackup-2.2.6-5042-Linux-x86_64.tar.gz
tar xvzf xtrabackup-2.2.6.tgz >/dev/null 2>&1 && rm -f xtrabackup-2.2.6.tgz
mv percona-xtrabackup-2.2.6-Linux-x86_64 xtrabackup-2.2.6
rm -rf xtrabackup && ln -s xtrabackup-2.2.6 xtrabackup
for FNAME in `ls -1t /usr/local/xtrabackup/bin`
do
rm -f /usr/bin/${FNAME} && ln -s /usr/local/xtrabackup/bin/${FNAME} /usr/bin/${FNAME}
done
fi
## 只許可一個正本運轉,以免全量備份與增量備份湧現穿插,產生數據紊亂的能夠性
##[[ -n `ps uax | grep innobackupex | grep -v grep` ]] && exit 1
## 目次名默許准確到分鐘,為防止不測情形,招致備份義務掉敗,可以准確到秒
CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M`
[[ -d ${CURRENT_BAK_PATH} ]] && CURRENT_BAK_PATH="${BACKUP_BASE_DIR}/"`date +%F_%H-%M-%S`
#===================================================================================================
## 全量備份
if [[ "$1" == "full" ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 增量備份
elif [[ "$1" == "inc" ]]; then
## 基准目次列表文件不存在或許為空的情形,須要做一次全量備份
if [[ ! -f ${INC_BASE_LIST} || `sed '/^$/d' ${INC_BASE_LIST} | wc -l` -eq 0 ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 不存在任何目次的情形,須要做一次全量備份,以免增量備份掉敗
elif [[ `find ${BACKUP_BASE_DIR} -maxdepth 1 -type d | wc -l` -eq 1 ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
## 在上一次備份的基本上,停止增量備份
else
PREV_BACKUP_DIR=`sed '/^$/d' ${INC_BASE_LIST} | tail -1 | awk -F '|' '{print $2}'`
## 前次的備份目次不存在或許目次為空的情形,以免工資刪除的能夠性【針對部門歹意刪除的情形,今朝還沒有較好的檢討辦法】
if [[ ! -d ${PREV_BACKUP_DIR} || -z `ls ${PREV_BACKUP_DIR}` ]]; then
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp ${CURRENT_BAK_PATH}
echo "NULL|${CURRENT_BAK_PATH}|full" >> ${INC_BASE_LIST}
else
${XTRABACKUP_PATH} --user=root --defaults-file=${MYSQL_CNF_PATH} --parallel=${THREAD_CNT} --no-timestamp --incremental ${CURRENT_BAK_PATH} --incremental-basedir=${PREV_BACKUP_DIR}
echo "${PREV_BACKUP_DIR}|${CURRENT_BAK_PATH}|inc" >> ${INC_BASE_LIST}
fi
fi
elif [[ "$1" == "help" ]]; then
print_help_info
else
print_help_info
fi
## 刪除2周前的數據備份
rm -rf ${BACKUP_BASE_DIR}/`date -d '14 days ago' +'%F'`_*
sed -i "/`date -d '14 days ago' +'%F'`/d" ${INC_BASE_LIST}
#===================================================================================================
##The End
####################################################################################################
## 須要添加的crontab信息:
## (1)、全量備份
## 20 04 * * * /data/scripts/mysql_backup.sh full >/dev/null 2>&1
##
## (2)、增量備份
## 00 * * * * /data/scripts/mysql_backup.sh inc >/dev/null 2>&1
##
####################################################################################################
####################################################################################################
## DB數據恢復步調:
## (1)、運用基准
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log --redo-only /data/mysql_backup/full
##
## (2)、運用第一個增量備份
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log --redo-only /data/mysql_backup/full --incremental-dir=/data/mysql_backup/inc_one
##
## (3)、運用第二個增量備份
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log /data/mysql_backup/full --incremental-dir=/data/mysql_backup/inc_two
##
## (4)、再次運用基准
## innobackupex --user=root --defaults-file=/etc/my.cnf --use-memory=8G --apply-log /data/mysql_backup/full
##
## (5)、恢復
## innobackupex --user=root --defaults-file=/etc/my.cnf --copy-back /data/mysql_backup/full
####################################################################################################
3、後果展現


