MySQL数据库备份之mysqldump

创建用户备份的用户

MariaDB [mysql]> create user 'backdata'@'localhost' identified by 'test@123456';
Query OK, 0 rows affected (0.00 sec)

MariaDB [mysql]> grant select,lock tables,replication client,reload,show view,event,trigger on *.* to 'backdata'@'localhost';
Query OK, 0 rows affected (0.00 sec)

在本地电脑上,找一块大的硬盘,然后创建一个目录,专门存放备份

[root@blog ~]# mkdir /opt/mysql_backup

mysqldump参数详解

-u 指定用户

-p 密码

-P 端口

-S socket文件

-h 主机

--master-data=2表示在dump过程中记录主库的binlog和pos点,并在dump文件中注释掉这一行;

-A 备份所有的数据库

-B 数据库  指定要备份的数据库

-d 不备份数据,只备份表结构

-e event  事件

-R 存储过程

--triggers 触发器

--single-transaction

--lock-all-tables

注意:在从库上执行备份时,即--dump-slave=2,这时整个dump过程都是stop io_thread的状态

理解--single-transaction

thread_id: 35
 argument: FLUSH TABLES WITH READ LOCK
说明:因为开启了--master-data=2,这时就需要flush tables with read lock锁住全库,记录当时的master_log_file和master_log_pos

thread_id: 35
 argument: SET SESSION TRANSACTION ISOLATION LEVEL REPEATABLE READ
说明:--single-transaction参数的作用,设置事务的隔离级别为可重复读,即REPEATABLE READ,这样能保证在一个事务中所有相同的查询读取到同样的数据,也就大概保证了在dump期间,如果其他innodb引擎的线程修改了表的数据并提交,对该dump线程的数据并无影响

thread_id: 35
 argument: START TRANSACTION /*!40100 WITH CONSISTENT SNAPSHOT */
这时开启一个事务,并且设置WITH CONSISTENT SNAPSHOT为快照级别,如果只是可重复读,那么在事务开始时还没dump数据时,这时其他线程修改并提交了数据,那么这时第一次查询得到的结果是其他线程提交后的结果,而WITH CONSISTENT SNAPSHOT能够保证在事务开启的时候,第一次查询的结果就是事务开始时的数据A,即使这时其他线程将其数据修改为B,查的结果依然是A

理解--lock-all-tables

thread_id: 120
 argument: FLUSH TABLES WITH READ LOCK
这里flush tables with read lock之后就不会主动unlock tables,保证整个dump过程整个db数据不可更改,也没有事务的概念了

一)备份和恢复所有库

[root@blog ~]# mysqldump -S /tmp/mysql.sock -u backdata -p -A >/opt/mysql_backup/alldata_$(date +%F_%H).sql

[root@blog ~]# cat /opt/mysql_backup/alldata_2018-04-27_11.sql---查看是否存在

如下

MySQL数据库备份之mysqldump

(插入完毕后,然后执行UNLOCK tables)

  •  模拟恢复数据

mysql> drop database louisblog;
Query OK, 12 rows affected (0.09 sec)

[root@blog ~]# mysql -u root -p < /opt/mysql_backup/alldata_2018-04-27_11.sql
Enter password:

(由于备份数据的用户,没有权限create table和create database,已经insert权限,这边需要root用户来操作)

二)备份单个库

[root@blog ~]# mysqldump -S /tmp/mysql.sock -u backdata -p -B louisblog > /opt/mysql_backup/louisblog_$(date +%F_%H).sql
Enter password:
[root@blog ~]# mysqldump -S /tmp/mysql.sock -u backdata -p -B mysql > /opt/mysql_backup/mysql_$(date +%F_%H).sql
Enter password:
[root@blog ~]# cd /opt/mysql_backup/
[root@blog mysql_backup]# ll
total 4900
-rw-r--r-- 1 root root 1669688 Apr 27 11:41 alldata_2018-04-27_11.sql
-rw-r--r-- 1 root root 1669688 Apr 27 12:01 alldata_2018-04-27_12.sql
-rw-r--r-- 1 root root 994517 Apr 27 13:19 louisblog_2018-04-27_13.sql
-rw-r--r-- 1 root root 676300 Apr 27 13:20 mysql_2018-04-27_13.sql

  • 还原数据库

mysql> source /opt/mysql_backup/louisblog_2018-04-27_13.sql
Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

Query OK, 0 rows affected (0.00 sec)

三) 分库备份脚本

#!/bin/bash
#定义变量
USER="backup"
PASS="Aa123321"
HOST="localhost"
DATE="$(date +%F_%H)"
MYCMD="/usr/local/mysql/bin/mysql -u$USER -p$PASS"
BACKUPDIR="/opt/backup/database/"
MYDUMP="/usr/local/mysql/bin/mysqldump -u$USER -p$PASS  -B  -R -E --triggers  --single-transaction --master-data=2"
DBLIST=`$MYCMD -e "show databases;"|sed 1d|egrep -v "_schema|test"`
#判断备份目录是否存在
[ ! -d ${BACKUPDIR}/${DATE} ] && mkdir -p ${BACKUPDIR}/${DATE}
#刷新生成二进制日志
$MYCMD -e "flush logs;"
#循环备份数据库
for dbname in $DBLIST;do
$MYDUMP $dbname|gzip >${BACKUPDIR}/${DATE}/${dbname}.sql.gz
done
#删除7天前的文件
cd $BACKUPDIR && find . -type d -mtime +7 |xargs rm -f

四)分库分表备份

#!/bin/bash
#description: Use mysqldump to backup mysql.
# GRANT SELECT, RELOAD, SUPER, LOCK TABLES, REPLICATION CLIENT, SHOW VIEW, EVENT, TRIGGER ON *.* TO 'backup'@'localhost'
#编写my.cnf文件,添加
#[client]
#user = backup
#password = Aa123321

#定义变量
HOST="localhost"
DATE="$(date +%F_%H)"
MYCMD="/usr/local/mysql/bin/mysql --defaults-extra-file=/etc/my.cnf"
BACKUPDIR="/opt/backup/database"
MYDUMP="/usr/local/mysql/bin/mysqldump --defaults-extra-file=/etc/my.cnf -R -E --triggers -x --master-data=2"
DBLIST=`$MYCMD -e "show databases;"|sed 1d|egrep -v "_schema|test"`
#判断备份目录是否存在
[ ! -d ${BACKUPDIR}/${DATE} ] && mkdir -p ${BACKUPDIR}/${DATE}
#刷新生成二进制日志
$MYCMD -e "flush logs;"
#循环备份数据库
for dbname in $DBLIST;do
TLIST=`$MYCMD -e "show tables from $dbname;"|sed 1d`
for tname in $TLIST;do
mkdir -p $BACKUPDIR/${DATE}/$dbname
$MYDUMP $dbname $tname|gzip >${BACKUPDIR}/${DATE}/${dbname}/${dbname}_${tname}_${DATE}.sql.gz
done
done