########################################################################################
增量备份与增量恢复
一、启用binlog日志实现增量备份
1、binlog日志介绍:
又被称为二进制日志,是mysql数据库服务日志文件的一种。
好处:
记录 除查询以外的所有SQL命令
可用于数据恢复
配置mysql主从同步的必要条件
############################################################
2、启用binlog日志
#vim /etc/my.cnf
[mysql]
server_id=id号 //数值范围1-255,不能重复
log-bin[=dir/name]
//日志存放默认位置为/var/lib/mysql/,如果需要自己指定日志文件的名称以及存放位置,需要写成中括号内的格式。
注意:自己指定存放的位置的目录需要修改文件属主及属组。chown -R mysql:mysql 存放路径。
binlog_format="mixed" //日志格式
#systemctl restart mysqld
#ls /var/lib/mysql/
主机名-bin.000001 //默认的binlog日志文件名
主机名-bin.index //记录当前已有的binlog日志文件名
日志格式:
statement:每一条修改数据的命令都会记录在binlog日志中。
row:不记录sql命令的上下文信息,仅保存哪条记录被修改。
mixed:前两种的综合。
#############################################################
3、查看binlog日志:
#mysqlbinlog binlog日志文件名
#############################################################
4、binlog日志文件记录sql命令的方式:
时间点 //根据修改的时间记录
pos点 //根据数据偏移量记录
#############################################################
5、恢复数据
格式:
mysqlbinlog 选项 binlog日志文件名 | mysql -uroot -p密码
选项:
–》根据时间点恢复
–start-datatime="yyyy-mm-dd hh:mm:ss" –stop-datatime="yyyy-mm-dd hh:mm:ss"
–》根据偏移量恢复 –start-position=数字 –stop-position=数字
##############################################################
6、生成日志与删除日志
–》生成日志
mysql> flush logs;
#mysql -uroot -p123456 -e "flush logs"
#systemctl restart mysqld
–》删除日志
mysql>reset master; //删除所有
mysql>purge master logsto "日志文件名" //删除指定日志之前的所有日志
mysql>purge master logs to "mysql11-bin.000003" //1和2 已经删除,但是3以后的保留
##################################################################
7、举例
启用binlog日志
重启服务
写入数据
#mysql -uroot -p123456
show master status; //查看当前使用的binlog日志
create database db1;
create table db1.t1(id int);
insert into table db1 values(100);
insert into table db1 values(200);
select * from db1.t1; //查看数据是否插入成功
删除数据
drop databases db1;
查看日志
mysqlbinlog /var/lib/mysql/mysql11-bin.000001
//通过查询日志,create database db1; 建表的偏移量at 296
//insert into table db1 values(200); 插入这条记录的偏移量 at 1097
恢复数据(通过偏移量)
mysql>show databases; //确认库已经删除
mysql>quit
#mysqlbinlog –start-position=296 –stop-position=1097 \
/var/lib/mysql/mysql11-bin.000001 | mysql -uroot -p123456
查看结果
mysql>show databases;
mysql>select * from db1.t1;
###################################################################
二、使用第三方软件percona提供的命令innobackupex做增量备份
物理备份缺点:
备份时间长,冗余备份,浪费村数空间
跨平台性差
mysqldump备份缺点:
效率低,备份和还原时间慢
备份过程中,数据插入与更新会被挂起
percona优点:
备份过程不锁表,适合生产环境
支持InnoDB/XtraDB
以Perl脚本封装Xtrabackup还支持MyISAM
##########################################################
1、安装软件包(网上下载)
libev-4.15-1.el6.rf.x86_64.rpm
percona-xtrabackup-24-2.4.7-1.el7.x86_64.rpm
###########################################################
2、innobackupex基本选项
–host //主机名
–user //用户名
–password //登陆密码
–databases //数据库名
–no-timestamp //备份文件不用日期命名
–apply-log //回滚日志(准备还原)
–redo-only //日志回滚合并(最后一次的回滚合并不需要添加此选项)
–incremental 目录名 //增量备份
–incremental-basedir=目录名 //增量备份时指定上一次备份数据村存储的文件名
–export //导出表信息
import //导入表空间
##############################################################
3、完全备份
#innobackupex –user root –password 123456 –databases="系统库 存储库" 备份目录名 –no-timestamp
#rm -rf /var/lib/mysql
#mkdir /var/lib/mysql
完全恢复数据
#innobackup –user root –password 123456 –databases="系统库 存储库" –apply-log 备份目录名
//回滚日志
#innobackupex –user root –password 123456 –databases="系统库列表 存储数据库" –copy-back 备份目录名
//恢复数据
#ls /var/lib/mysql/
#chown -R mysql:mysql /var/lib/mysql
#systemctl stop mysqld
#systemctl start mysqld
#mysql -uroot -pabc123
mysql>show databases;
###############################################################
4、增量备份
增量备份之前,通常先作一次完全备份
增量备份第一次:
#innobackupex –user root –password 123456 –databases="系统库列表 存储数据库" –incremental 目录名1 –incremental-basedir=完全备份名 –no-timestamp
增量备份第二次:
#innobackupex –user root –password 123456 –databases="系统库列表 存储数据库" –incremental 目录名2 –incremental-basedir=目录名1 –no-timestamp
//相当于你的下一次备份,参照的时上一次的备份文件。
5、删除信息
rm -rf /var/lib/mysql
mkdir /var/lib/mysql
6、增量恢复日志文件
#innobackupex –user root –password 123456 –databases=“系统库 存储库” –apply-log –redo-only 完全备份目录名
#innobackupex –user root –password 123456 –databases=“系统库 存储库” –apply-log –redo-only 完全备份目录名
–incremental-dir=目录名1
#innobackupex –user root –password 123456 –databases=“系统库 存储库” –apply-log –redo-only 完全备份目录名
–incremental-dir=目录名2
#cat 备份目录/xtraback_checkpositions //文件可以查看日志序列号
7、恢复数据
#innobackupex –user root –password abc123 –databases="系统库列表 存储数据库" –copy-back 完全备份目录名
#chown -R mysql:mysql /var/lib/mysql
8、重启服务查看
#systemctl stop mysqld
#systemctl start mysqld
###############################################################################
9、增量举例
/allbak //自定义完全备份的目录名
/new1 //自定义第一次增量备份目录名
/new2 //自定义第二次增量备份目录名
//无需自己创建
完全备份
#innobackupex –user root –password 123456 –databases="系统库列表 gamedb" /allbak
–no-timestamp
增量第一次:
mysql>create table gamedb.t2(id int);
mysql>insert into gamedb.t2 values(200);
#innobackupex –user root –password 123456 –databases="系统库列表 gamedb" –incremental /new1 –incremental-basedir=/allbak –no-timestamp
增量第二次:
mysql>create table gamedb.t3(id int);
mysql>insert into gamedb.t3 values(300);
#innobackupex –user root –password 123456 –databases="系统库 gamedb" –incremental /new2
–incremental-basedir=/new1 –no-timestamp
删除数据
rm -rf /var/lib/mysql
mkdir /var/lib/mysql
恢复日志文件
#innobackupex –user root –password abc123 –databases="系统库列表 gamedb" –apply-log –redo-only
/allbak
//回滚日志
#cat /allbak/xtraback_checkpositions //文件可以查看日志序列号
#innobackupex –user root –password abc123 –databases="系统库列表 gamedb" –apply-log –redo-only
/allbak –incremental-dir=/new1
//增量回滚/new1
#cat /new1/xtraback_checkpositions //文件可以查看日志序列号
#cat /allbak/xtraback_checkpositions //文件可以查看日志序列号
//对比可以发现,回滚成功,它们的序列号是首尾相接的
#innobackupex –user root –password abc123 –databases="系统库列表 gamedb" –apply-log –redo-only
/allbak –increment-dir=/new2
//增量回滚/new2
#cat /new2/xtraback_checkpositions //文件可以查看日志序列号
#cat /allbak/xtraback_checkpositions //文件可以查看日志序列号
//对比可以发现,回滚成功,它们的序列号是首尾相接的
恢复数据
#innobackupex –user root –password abc123 –databases="系统库列表 gamedb" –copy-back /allbak
查看
#systemctl stop mysqld
#systemctl start mysqld
##############################################################################################
10、恢复单个表:
10.1 备份库
#innobackup –user root –password 123456 –databases="gamedb" /gamedbbak
10.2 删除单个表
mysql> drop table gamedb.t1;
10.3 按照原表结构创建表
mysql> create table gamedb.t1(id int);
10.4 导出表信息
#innobackup –user root –password abc123 –databases=“gamedb.t1” –apply-log –export /gamedbbak
10.5 删除表空间
mysql>alter table gamedb.t1 discart tablespace;
10.6 将导出的表信息,拷贝到对应的数据库目录下
#cd /gamedbbak/gamedb
#cp t1.{exp,ibd,cfg} /var/lib/mysql/gamedb/
#ls /var/lib/mysql/gamedb/t1.
#chown mysql:myql /var/lib/mysql/gamedb/t1.
10.6 导入表空间
alter table t1 import tablespace;
10.7 验证
select * from gamedb.t1;
###########################################################################################################
4、