Mysql数据库备份与恢复

一、备份

1、备份数据库表结构及数据

其中,-h指定主机地址,-u指定数据库用户名,-p指定数据库密码,test为数据库。

1
mysqldump -hlocalhost -uroot -p123456 test > ./test.sql

2、备份一张表student

1
mysqldump -hlocalhost -uroot -p123456 test student > ./student.sql

3、备份多张表,如student、grade

1
mysqldump -hlocalhost -uroot -p123456 test student grade > ./test.sql

4、备份整个数据库,包含创建数据库脚本

1
mysqldump -hlocalhost -uroot -p123456 -B test > ./test2.sql

通过指定参数:-B,备份整个数据。

5、备份所有数据库

1
mysqldump -hlocalhost -uroot -p123456 --all-databases > back.sql

6、只备份表结构,不包含数据

1
mysqldump -hlocalhost -uroot -p123456 -d test > ./test3.sql

通过指定参数:-d

7、只备份数据,不包含表结构

1
mysqldump -hlocalhost -uroot -p123456 -t test > ./test4.sql

通过指定参数:-t

8、忽略某个表,比如忽略student、grade表

1
mysqldump --ignore-table=test.student --ignore-table=test.grade -hlocalhost -uroot -p123456 -d test > ./test3.sql

二、恢复

1、source 命令

1
2
mysql -uroot -p123456
mysql> source /backup/mysql_all.sql

2、mysql 命令

1
mysql -uroot -p123456 -e 'drop database auth;' #删除数据库

恢复所有数据库:

1
mysql -uroot -p123456 < /backup/mysql_all.sql

恢复单个数据库:

1
mysql -uroot -p123456 auth </backup/auth_user-2019-04-22.sql

三、备份方案参考:

三种备份方案:

1、shell 脚本

①、描述
  • 备份 mysql 数据库
  • 凌晨一点执行 shell 脚本
  • 删除超过七天的备份
②、脚本
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
#!/bin/bash
dateBackup=$(date +%Y-%m-%d_%H:%M:%S)
dir="/root/backupDB/sql/${dateBackup}"
if [ ! -d "${dir}" ]
then
mkdir ${dir}
echo "创建文件夹成功"
else
echo "文件夹已经存在"
fi
# 需要备份的数据库名
dbNames=(mybatis mybatis-plus)

for dbName in ${dbNames[@]}
do
echo "-----------------> 备份 ${dbName} 数据库 <-----------------" >> /root/backupDB/log/${dateBackup}.log
# 备份MySQL, 1>> 为正常输出,2>> 为错误或者警告输出到日志文件
mysqldump -utest -p123456 ${dbName} 1>> ${dir}/${dbName}.sql 2>> /root/backupDB/log/${dateBackup}.log
# 压缩文件 解压为 gzip -d mybatis.sql.gz
gzip ${dir}/${dbName}.sql
done

echo -e " \n ----------------> 删除过期文件 <---------------------------" >> /root/backupDB/log/${dateBackup}.log
# 判断文件夹数量是否大于7,防止程序意外停止,删除所有备份
dirCount=`ls -l /root/backupDB/sql/|grep "^d"|wc -l`
if [ ${dirCount} -gt 7 ]
then
# 删除超过七天的 sql 备份
find /root/backupDB/sql -mtime +6 -name "*_*" -exec rm -rf {} \;
#删除超过七天的 日志
find /root/backupDB/log -mtime +6 -name "*.log" -exec rm -rf {} \;
echo -e " 删除过期文件成功" >> /root/backupDB/log/${dateBackup}.log
else
echo "删除过期文件失败,文件数量小于 7 " >> /root/backupDB/log/${dateBackup}.log
fi
③、执行 shell 脚本
1
可以使用 chmod 777 backup.sh 添加执行权限, ./backup.sh 启动

或者

1
使用 sh ./backup.sh 启动

执行脚本生成目录如下
在这里插入图片描述

④、docker 容器

如果你的 mysql 是 docker 容器,则需要修改上面的 mysqldump 备份命令如下

1
docker exec -i 111122223333 /bin/bash -c 'mysqldump -utest -p123456 ${dbName} 1>> ${dir}/${dbName}.sql 2>> /root/backupDB/log/${dateBackup}.log'

可以在启动时加一个挂载目录 ,我备份 sql 的挂载目录为 -v /opt/docker/mysql/backup:/opt/backup ,/opt/docker/mysql/backup宿主机目录,/opt/backup容器目录

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
#!/bin/bash
dateBackup=$(date +%Y-%m-%d_%H:%M:%S)
dir=/opt/docker/mysql/backup/${dateBackup}
# 宿主机新建目录,通过挂载会自动添加到容器
if [ ! -d "${dir}"]
then
mkdir ${dir}
echo "创建文件夹 ${dir} 成功" >> ${dir}/error.log
else
echo "创建文件夹 ${dir} 失败,文件夹已存在" >> ${dir}/error.log
fi
# 需要备份的数据库名
dbNames=(student teacher car dog cat)
for dbName in ${dbNames[@]}
do
echo "-----------------> 备份 ${dbName} 数据库 <-----------------" >> ${dir}/error.log
docker exec -i 642c89599d9b sh -c "mysqldump -ubackup -pAdmin@123 -h127.0.0.1 -P32773 ${dbName} 1>> /opt/backup/${dateBackup}/${dbName}.sql 2>> /opt/backup/${dateBackup}/error.log"
gzip ${dir}/${dbName}.sql
done

echo -e " \n ----------------> 删除过期文件 <---------------------------" >> ${dir}/error.log
# 判断文件夹数量是否大于7,防止程序意外停止,删除所有备份
dirCount=`ls -l /opt/docker/mysql/backup/|grep "^d"|wc -l`
if [ ${dirCount} -gt 7 ]
then
# 删除超过七天的带"_"的目录
find /opt/docker/mysql/backup/ -mtime +6 -name "*_*" -exec rm -rf {} \;
echo -e " 删除过期文件成功" >> ${dir}/error.log
else
echo "删除过期文件失败,文件数量小于 7 " >> ${dir}/error.log
fi
⑤、开启定时任务

如果上面的脚本可以正常执行,下面开启定时任务,固定在每天凌晨一点执行

如果没有 crontab 命令自行百度,cron 表达式不清楚的自行百度

  • 1、添加定时任务
    crontab -e
  • 2、凌晨 01:00 分执行 /root/backupDB/backup.sh 文件
    0 1 * * * /root/backupDB/backup.sh
  • 3、查看定时任务
    crontab -l
  • 4、查看定时任务日志
    tail -f /var/log/cron
  • 5、crond 服务
    开启、关闭、重启 可以使用 systemctl start、stop、restart crond

添加定时任务,记得重启 crond 服务,systemctl restart crond

如果手动启动脚本可以执行,定时任务报错找不到命令,则大概是环境变量问题,我们可以添加环境变量,你需要判断你用到的命令是在用户环境变量配置还是系统环境变量配置,添加即可

shell 脚本中添加

1
2
3
4
5
#!/bin/bash
# 当前用户环境变量
source ~/.bashrc
# 系统环境变量
source /etc/profile

定时任务中添加

1
2
3
4
# 当前用户环境变量
0 1 * * * . ~/.bashrc;/root/backupDB/backup.sh
# 系统环境变量
0 1 * * * . /etc/profile;/root/backupDB/backup.sh

其他应该注意的问题

参考:https://blog.csdn.net/coolhe21cn/article/details/117445973

  • 1)新创建的 cron job,不会马上执行,至少要过2分钟才执行。如果重启 crond 则马上执行。
  • 2)每条 JOB 执行完毕之后,系统会自动将输出发送邮件给当前系统用户。日积月累,非常的多,甚至会撑爆整个系统。所以每条 JOB 命令后面进行重定向处理是非常必要的: > /dev/null 2>&1 。前提是对 Job 中的命令需要正常输出已经作了一定的处理, 比如追加到某个特定日志文件。
  • 3)当 crontab 突然失效时,可以尝试 systemctl restart crond 解决问题。或者查看日志看某个job有没有执行/报错 tail -f /var/log/cron。
  • 4)千万别乱运行 crontab -r。它从 Cronta b目录(/var/spool/cron)中删除用户的 Crontab 文件。删除了该用户的所有 crontab 都没了。
  • 5)在 crontab 中 % 是有特殊含义的,表示换行的意思。如果要用的话必须进行转义 %,如经常用的date ‘+%Y%m%d’ 在crontab里是不会执行的,应该换成 date ‘+%Y%m%d’`。

crontab中的输出配置

crontab中经常配置运行脚本输出为:> /dev/null 2>&1,来避免 crontab 运行中有内容输出。

  • shell 命令的结果可以通过‘> ’的形式来定义输出
  • /dev/null 代表空设备文件
  • 1 表示 stdout 标准输出,系统默认值是1,所以 “> /dev/null” 等同于”1 > /dev/null”
  • 2 表示 stderr 标准错误, & 表示等同于的意思,2>&1,表示2的输出重定向等同于1
  • 1>/dev/null 首先表示标准输出重定向到空设备文件,也就是不输出任何信息到终端,不显示任何信息。
  • 2>&1 表示标准错误输出重定向等同于标准输出,因为之前标准输出已经重定向到了空设备文件,所以标准错误输出也重定向到空设备文件。
⑥、重点:使用 scp 传输备份文件

一般数据库备份都不是一份且不放在同一个服务器上,如果 mysql 直接在 Linux 服务器,则可以不用 scp 传输,因为备份命令可以指定另一台服务器 ip ,但是如果是 docker 容器中 mysql ,需要将备份文件拷贝到远程主机(或许 docker 有一些高端操作,暂时没遇到),因为 docker 容器备份 MySQL 只能在当前主机,scp 拷贝 docker 中 备份的 mysql 到另一台服务器看我另一篇博客 scp 传输文件到另一台服务器

2、Java 代码

这种用的不多

1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
public class TestBackup {
public static void main(String[] args) throws Exception {
dbBackUp("111.111.111.111", "test", "123456", "3306", "mybatis,mybatis-plus", "I:\\spring\\sendsms\\");
//reduction("111.111.111.111", "3306", "root", "123456", "mybatis-plus", "2021-07-27_14-19-04/mybatis-plus.sql");
}

public static void dbBackUp(String host, String userName, String password, String port, String dbNames, String backupPath) {
String format = new SimpleDateFormat("yyyy-MM-dd_HH-mm-ss").format(new Date());
boolean mkdir = new File(format).mkdir();
if (!mkdir) return;
String[] dbNameArray = dbNames.split(",");
for (String dbName : dbNameArray) {
String pathSql = backupPath + format + "\\" + dbName + ".sql";
String cmd = "cmd /c mysqldump" + " -h" + host + " -P" + port + " -u" + userName + " -p" + password + " " + dbName + " > " + pathSql;
System.out.println("cmd命令为:" + cmd);
try {
Process process = Runtime.getRuntime().exec(cmd);
if (process.waitFor() == 0) {
System.out.println(dbName + "数据库备份成功!");
} else {
System.out.println(dbName + "数据库备份失败!");
}
} catch (IOException | InterruptedException e) {
e.printStackTrace();
}
}
}

public static void reduction(String host, String port, String userName, String password, String databaseName, String fileName) throws Exception {
File datafile = new File(fileName);
if (!datafile.exists()) {
System.out.println(fileName + "文件不存在,请检查");
return;
}
String cmd = "cmd /c mysql -h" + host + " -P" + port + " -u" + userName + " -p" + password + " " + databaseName + " < " + datafile;
System.out.println(cmd);
//拼接cmd命令
Process exec = Runtime.getRuntime().exec(cmd);
if (exec.waitFor() == 0) {
System.out.println(databaseName + "数据库还原成功,还原的文件为:" + datafile);
} else {
System.out.println(databaseName + "数据库还原失败");
}
}
}

运行结果如下,备份成功
在这里插入图片描述

3、bat 批处理

核心命令和上面类似,适用与 window系统服务器

①、新建 backup.bat 文件,输入下面脚本

1
2
3
4
5
6
7
d:
::格式化时间,如20210808
set "Ymd=%date:~,4%%date:~5,2%%date:~8,2%"
::新建文件夹
md D:\备份mysql\%ymd%
::循环数据库,备份数据库到指定目录,打印日志到指定文件
for %%I in (mybatis,mybatis-plus) do mysqldump -utest -h1.*.*.107 -p123456 -P3306 %%I > D:\备份mysql\%ymd%\%%I.sql 2> D:\备份mysql\%ymd%\error.log

备份成功,结果如下
在这里插入图片描述
②、添加定时任务
在 window 搜索中搜索管理工具,或者任务计划,打开任务计划添加定时任务
在这里插入图片描述
右键任务计划程序库创建任务

配置权限

这里是引用
配置触发器
在这里插入图片描述

配置刚才写的批处理文件
在这里插入图片描述

最后出入密码,定时任务配置成功
在这里插入图片描述

定时任务成功执行
在这里插入图片描述