percona-xtrabackup主要是有两个工具,其中一个是xtrabackup,一个是innobackupex,后者是前者封装后的一个脚本。在针对MySQL的物理备份工具中,大概是最流行也是最强大的工具了,此外著名的物理备份工具还有官方的mysqlbackup。xtrabackup只可备份事务表,不能用于备份非事务表,而innobackupex不仅可用于备份事务表,也可以备份非事务表如MyISAM
此文主要介绍innobakcupex的使用和原理。
本文所用到的版本:
xtrabackup 2.3.7 + MySQL 5.6.30
若MySQL版本为5.7.x,建议使用xtrabackup 2.4.x
〇 xtrabackup可以做的
对InnoDB引擎的表做热备
增量备份
流压缩传输到另外的服务器上
在线移动表
更简单的创建从库
备份时不增加服务器负载
〇 原理
备份及恢复大致涉及三个步骤:备份 -> prepare -> 恢复
备份运行时,工具会记住当时的LSN号,并打开xtrabackup_logfile,然后开始对datafile进行copy,即ibdata1及ibd文件。
复制需要一定的时间,在复制期间,如果文件被修改,工具将监视redo log file并将每一次更变记录下来,保存在xtrabackup_logfile中。
接下来处理非事务表如MyISAM的备份操作,innobackupex通过FLUSH TABLES WITH READ LOCK来阻塞DML。
并在此时获取binlog的position[和GTID](此处我理解为和mysqldump --single-transaction处理方式类似)
在做完非事务表的copy之后,执行UNLOCK TABLES,完成备份,并停止记录xtrabackup_logfile。
接下来就是需要做prepare的过程,该过程类似InnoDB的crash-recovery。
对redo log进行前滚(到数据文件),并将没提交的事务进行回滚操作(rollback),这样便可以保证数据的一致性,所以对于事务表,整个过程是不会影响写操作的。
注:InnoDB、XtraDB、MyISAM是肯定支持的,其他的存储引擎不确定,待测。
〇 权限需求
操作系统:
对datadir需要有rwx的权限。
MySQL:
最小所需要的权限有:
RELOAD
LOCK TABLES(如果加上--no-lock的话可以不要)
REPLICATION CLIENT(为了获得binary log的position)
PROCESS(为了执行show engine innodb status,并且需要查看所有运行的线程)
其他可能需要用到的权限:
CREATE TABLESPACE(如果需要通过5.6+ 的TTS恢复/迁移单个表的话)
SUPER(可能需要在复制环境里启动或者停止slave线程)
CREATE\INSERT\SELECT(对PERCONA_SCHEMA.xtrabackup_history进行操作)
〇 安装
安装超简单(只能在linux上用,不过但这就够了)
https://www.percona.com/downloads/XtraBackup/LATEST/
戳进去选择版本down下来很容易就可以用了。
有RPM包、DEB包、源码包、二进制包。
个人推荐使用二进制包,解压,配置环境变量即可使用,在debian系或RHEL系通用,方便的一比。
源码包的安装,可以参考我这篇博文:
http://blog.itpub.net/29773961/viewspace-1853405/
〇 配置
默认读取my.cnf的选项,读取优先级与MySQL相同。
比如在备份和恢复的时候无需指定datadir等,因为可以读取[mysqld]组下的选项。
同样也可以读取[client]的信息,比如可以将socket,user,password加载到(虽然因为安全因素不建议使用,但是可以这么做)。
当然也可以通过innobackupex --defaults-file=xxxx/my.cnf 去指定将要读取的配置文件。
〇 全备
① 备份:
若加上--no-timestamp,则不会在所指定的目录里生成一个时间戳目录,而是直接放在所指定的目录里,我一般是加的:
innobackupex --user= --password= $basedir [--no-timestamp](当然--user/--password可以直接写作 -u $username -p $password)
在备份的文件夹中,有几个文件值得注意:
xtrabackup_binlog_info记录了binlog的position,若开启了GTID,也会将GTID取出。
在用于备份+binlog恢复或建立slave的场景里十分有用。
xtrabackup_checkpoints记录了此次备份的类型和lsn号的起始值,是否压缩等
xtrabackup_info