微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

MySQL的物理备份lvm-snapshot具体是指什么

本篇文章给大家主要讲的是关于MySQL的物理备份lvm-snapshot具体是指什么的内容,感兴趣的话就一起来看看这篇文章吧,相信看完MysqL的物理备份lvm-snapshot具体是指什么对大家多少有点参考价值吧。                                                          

lvm-snapshot(工具备份)

优点:

  • 几乎是热备(穿件快照前把表上锁,创建完成后立即释放)

  • 支持所有引擎

  • 备份速度快

  • 无需使用昂贵的商业软件(它是操作系统级别的)

缺点:

  • 可能需要跨部门协作(使用操作系统级别的命令,DBA一般没有权限

  • 无法预计服务停止时间

  • 数据如果分布在多个卷上比较麻烦(针对存储级别而言)

逻辑卷快照的原理

为什么选择lvm快照备份?

原因:因为锁表的时间不一致,在锁表的瞬间是不能写入的,对其进行快照备份,备份完成后立即解锁,然后服务可以正常使用(写入等操作)比如数据量大的时候,做快照一下子就拍了,然后立即解锁,就不影响写入等操作。如果用MysqLdump备份,那么数据量大的时候,锁表时间长,就会影响效率。

操作流程

1、flush table with read locak;   
2、create snapshot  
3、show master status; show slave status; [可选]
4、unlock tables;
5、copy files from the snapshot
6、Unmount the snapshot. 
7、Remove snapshot
快照备份:
1.迁移数据到逻辑卷(不是必须,视情况而定)
2.锁表(时间)
3.给数据库所在的逻辑卷拍快照
4.解锁
5.将快照挂载到临时挂载点上
6.将快照上的所有数据拷贝到相应的备份目录里(不同主机)
7.卸载快照并删除

lvm备份示例

一、数据迁移到逻辑卷上

环境:数据文件不在逻辑卷上,那么需要将数据文件迁移到逻辑卷上

[root@Admin ~]# pvcreate /dev/sdb
[root@Admin ~]# vgcreate vg01 /dev/sdb
[root@Admin ~]# lvcreate -n lv_MysqL -L 4G vg01
[root@Admin ~]# mkfs.ext4 /dev/mapper/vg01-lv_MysqL
1>先停止应用
2>停止MysqL服务
[root@Admin ~]# service MysqLd stop
3>备份所有的数据文件到指定的地方
[root@Admin ~]# tar -czvf /tmp/backMysqL/MysqL.tar.gz /data/DB/*
4>挂载逻辑卷到当前MysqL的数据目录里
[root@Admin ~]# mount /dev/mapper/vg01-lv_MysqL /data/DB/
5>将刚刚备份的数据解压到数据目录里
[root@Admin ~]# tar xf /tmp/backMysqL/MysqL.tar.gz -C /data/DB/
[root@Admin ~]# mv /data/DB/data/DB/* /data/DB/ && rm -rf /data/DB/data/
6>启动数据库
[root@Admin ~]# service MysqLd start
此处启动失败原因/data/DB/数据目录的权限变成了root,
更改权限重新启动
[root@Admin ~]# chown MysqL. -R /data/DB/ && service MysqLd start

二、快照备份数据库

MysqL> flush table with read lock;
[root@Admin ~]# lvcreate -n lv_MysqL_s -L 50M -s /dev/vg01/lv_MysqL
[root@Admin ~]# dmsetup --tree ls
vg01-lv_MysqL (253:0)
 └─vg01-lv_MysqL-real (253:1)
    └─ (8:16)
vg01-lv_MysqL_s (253:3)
 ├─vg01-lv_MysqL_s-cow (253:2)
 │  └─ (8:16)
 └─vg01-lv_MysqL-real (253:1)
    └─ (8:16)
[root@Admin ~]# unlock tables
  • 上面1~3步可以合并为一步

[root@Admin ~]# echo "flush tables with read lock; system lvcreate -n lv_MysqL_s -L 50M -s /dev/vg01/lv_MysqL;unlock tables;" |MysqL -p123
  • 4、将快照挂载到临时目录里

[root@Admin ~]# mkdir /mnt/MysqL && mount /dev/vg01/lv_MysqL_s /mnt/MysqL/
  • 5、备份数据

[root@Admin ~]# ls /mnt/MysqL/    # 可以看到新的挂载目录里面的数据
Admin.pid  db01     ib_logfile0  MysqL             MysqL-bin.000003  MysqL-bin.000006  MysqL-bin.000009  performance_schema
auto.cnf   db02     ib_logfile1  MysqL-bin.000001  MysqL-bin.000004  MysqL-bin.000007  MysqL-bin.000010  test
binlog     ibdata1  login        MysqL-bin.000002  MysqL-bin.000005  MysqL-bin.000008  MysqL-bin.index
[root@Admin ~]# mkdir /backup && rsync -av /mnt/MysqL /backup
[root@Admin ~]# umount /mnt/MysqL/ && lvremove /dev/vg01/lv_MysqL_s
  • 7、测试验证(将数据目录里面的东西全部删除)然后再将备份的数据目录恢复过来

    1>我们来点狠的,直接把MysqL的数据目录/data/DB/删除。
    [root@Admin ~]# rm -rf /data/DB/* && ls /data/DB/
    2>删除后可以看到重启MysqL直接报错了
    [root@Admin ~]# service MysqLd restart 
    MysqL server PID file Could not be found!                  [失败]
    Starting MysqL...The server quit without updating PID file [失败]/DB/Admin.pid).
    3>根据上面的/backup里面备份的数据进行恢复
    [root@Admin ~]# mv /backup/MysqL/* /data/DB/
    [root@Admin ~]# ls /data/DB/
    auto.cnf  db02         ib_logfile1  MysqL-bin.000001  MysqL-bin.000004  MysqL-bin.000007  MysqL-bin.000010    test
    binlog    ibdata1      login        MysqL-bin.000002  MysqL-bin.000005  MysqL-bin.000008  MysqL-bin.index
    db01      ib_logfile0  MysqL        MysqL-bin.000003  MysqL-bin.000006  MysqL-bin.000009  performance_schema
    4>重新启动
    [root@Admin ~]# chown MysqL. /data/DB/ -R 
    [root@Admin ~]# service MysqLd restart
    这里权限更改了如果启动还是报错的话,查看下是否MysqL进程还存在,如果存在,将其kill掉再重启就OK
    [root@Admin ~]# MysqL -p123
    MysqL> show databases;
    +--------------------+
    | Database           |
    +--------------------+
    | information_schema |
    | binlog             |
    | db01               |
    | db02               |
    | login              |
    | MysqL              |
    | performance_schema |
    | test               |
    +--------------------+
rows in set (0.00 sec)

将上面备份整理为脚本 + Crontab 计划任务定时完成备份

#!/bin/bash
#LVM BackMysqL
back_dir=/backup/`date +%F`
[ -d $back_dir ]  mkdir -p $back_dir
echo "flush tables with read lock; system lvcreate -n lv_MysqL_s -L 50M -s /dev/vg01/lv_MysqL;unlock tables;" |MysqL -p123
mount /dev/vg01/lv_MysqL_s /mnt/MysqL/
rsync -a /mnt/MysqL/ $back_dir
if [ $? -eq 0 ];then
    umount /mnt/MysqL/ && lvremove -f /dev/vg01/lv_MysqL_s
fi

自动化实现快照备份mylvmbackup

1、安装相应的软件

2、两种备份方式

  1>mylvmbackup    xxx终端备份

  2>修改配置文件指定相应的参数

正常安装MysqL:
1. 安装系统
2. 准备LVM,例如 /dev/vg_back/lv-MysqL,mount /usr/local/MysqL
3. 源码安装MysqL到 /usr/local/MysqL

可选操作: 将现在的数据迁移到LVM
1. 准备lvm及文件系统
# lvcreate -L 2G -n lv-MysqL vg_back
# mkfs.ext4 /dev/vg_back/lv-MysqL
 
2. 将数据迁移到LVM
# service MysqLd stop
# mount /dev/vg_back/lv-MysqL /u01/ //临时挂载点
# rsync -va /usr/local/MysqL/ /u01/ //将MysqL原数据镜像到临时挂载点

# umount /u01/
# mount /dev/vg_back/lv-MysqL /usr/local/MysqL //加入fstab开机挂载
# df -Th
/dev/mapper/vg_back-lv-MysqL ext4 2.0G 274M 1.7G 15% /usr/local/MysqL
# service MysqLd start

手动基于LVM快照实现备份:
1. 加锁
MysqL> flush table with read lock;

2.创建快照
# lvcreate -L 500M -s -n lv-MysqL-snap /dev/vg_back/lv-MysqL
# MysqL -uroot -p123 -e 'show master status' > /backup/`date +%F`_position.txt
或者
MysqL> show master status;
+-------------------+----------+--------------+------------------+-------------------+
| File | Position | binlog_Do_DB | binlog_Ignore_DB | Executed_Gtid_Set |
+-------------------+----------+--------------+------------------+-------------------+
| MysqLd-bin.00003 | 135 | | | |
+-------------------+----------+--------------+------------------+-------------------+

3. 释放锁
MysqL> unlock tables;

4. 从快照中备份
# mount -o ro /dev/vg_back/lv-MysqL-snap /u01/
# mkdir /backup/`date +%F`
# rsync -a /u01/ /backup/2015-07-02/

5. 移除快照
# umount /u01/
# lvremove -f /dev/vg_back/lv-MysqL-snap

脚本 + Cron完成:
#!/bin/bash
#LVM backMysqL...
back_dir=/backup/`date +%F`

[ -d $back_dir ] || mkdir -p $back_dir

MysqL -uroot -p123 -e 'flush table with read lock'
lvcreate -L 500M -s -n lv-MysqL-snap /dev/vg_back/lv-MysqL
MysqL -uroot -p123 -e 'show master status' |grep MysqL > $back_dir/position.txt
MysqL -uroot -p123 -e 'flush logs'
MysqL -uroot -p123 -e 'unlock tables'

mount -o ro /dev/vg_back/lv-MysqL-snap /u01

rsync -a /u01/ $back_dir

if [ $? -eq 0 ];then
umount /u01/
lvremove -f /dev/vg_back/lv-MysqL-snap
fi
===============================================================
mylvmbackup

功能:利用LVM快照实现物理备份,即LVM快照备份的自动版

安装perl模块
1. 在线安装
http://www.lenzg.net/mylvmbackup
它依赖于perl 模块,可用以下命令安装
perl -MCPAN -e 'install Config::IniFiles'

2. 离线安装
# rpm -ivh mylvmbackup-0.16-0.noarch.rpm
warning: mylvmbackup-0.16-0.noarch.rpm: Header V4 DSA/SHA1 Signature, key ID b27291f2: NOKEY
error: Failed dependencies:
perl(Config::IniFiles) is needed by mylvmbackup-0.16-0.noarch
perl(Date::Format) is needed by mylvmbackup-0.16-0.noarch
perl(File::copy::Recursive) is needed by mylvmbackup-0.16-0.noarch

解决:
# yum -y localinstall atrpms-77-1.noarch.rpm perl-File-copy-Recursive-0.38-1.el6.rfx.noarch.rpm perl-IO-stringy-2.110-1.2.el6.rfx.noarch.rpm perl-Config-IniFiles-2.56-1.el6.rf.noarch.rpm

安装mylvmbackup软件包
# yum -y install mylvmbackup-0.15-0.noarch.rpm 解决依赖关系perl-TimeDate

备份方法一:
# mylvmbackup --user=root --password=123 --host=localhost --mycnf=/etc/my.cnf --vgname=vg_back --lvname=lv-MysqL --backuptype=tar --lvsize=100M --backupdir=/backup

# tar xf backup-20140903_000236_MysqL.tar.gz
# ls
backup backup-cnf-20150702_000236_MysqL
backup-20150702_000236_MysqL.tar.gz backup-pos

备份方法二:
# vim /etc/mylvmbackup.conf
[MysqL] #连接数据库配置
user=root
password=123456
host=localhost
port=3306
socket=/tmp/MysqL.sock
mycnf=/etc/my.cnf
[lvm] #LVM逻辑卷的配置
vgname=vg_server #卷组名称
lvname=lv_MysqL #逻辑卷名称
backuplv=MysqL_snap #快照卷名称
lvsize=500M
[fs] #文件系统配置
xfs=0
mountdir=/var/tmp/mylvmbackup/mnt/ #挂载目录
backupdir=/backup #备份目录,也可以备份到行程主机
[misc] #定义备份选项
backuptype=tar #定义备份的类型
backupretention=0
prefix=backup #定义备份文件名前缀
suffix=_MysqL #定义备份文件名后缀
tararg=cvf #定义tar参数,认为cvf
tarfilesuffix=.tar.gz #定义备份文件后缀名格式
datefmt=%Y%m%d_%H%M%s #定义备份文件名时间戳格式
keep_snapshot=0 #是否保留snaphot
keep_mount=0 #是否卸载snaphot
quiet=0 #定义记录日志类型
注释:其他配置保持输入即可

然后直接执行mylvmbackup即可

mylvmbackup 参考示例

以上关于MysqL的物理备份lvm-snapshot具体是指什么详细内容,对大家有帮助吗?如果想要了解更多相关,可以继续关注我们的行业资讯板块。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐