浅谈使用Binlog实现MySQL增量备份
在写文章的时候,我一直在纠结,这个到底能不能算增量备份,因为使用binlog的这种方式,按照官方文档的说话,应该叫做 point-in-time ,而非正经的增量模式,但是也聊胜于无。
首先我先阐述一下,他的基本原理,就是定时制作基线,然后定时更新binlog,形成增量数据文件,然后在必要的时候进行恢复,追溯。
下面是一个简单的流程图,首先我们来创建一个表
然后,我们来创建一个基线,并且刷新binlog
现在我们来模拟一些业务操作,插入数据
好了,这一天平安过去,我们进行增备
然后,不幸的事情发生了,昨天的数据被删除了
接下来,我们进行数据恢复就好了
这里也只是深入浅出的描述一下增备的流程,实际生活中往往要比这个案例残酷的多。那么我们又该如何选择备份方案呢?
1, 按天备份
这样做的好处,显然是恢复时间短,维护成本低,同样缺点也很明显,就是占用资源多,而且需要频繁锁表,影响用户的使用体验
2, 按周备份
这么做的优缺点则刚好和上面案例相反,优点是占用资源少,不频繁锁表,用户体验相对好一些,不过代价就是维护成本较高,如果数据出现问题,恢复时间较长。
综上所述,这是一个非常尴尬的问题,造成这个问题的原因即复杂又简单。说简单,是因为可以高度概括为资源不足,四个字。但是细扣下来,就变成时间、空间、成本、智力投入等诸多因素的博弈问题了
较佳实践:
全备份
mydump -B test -lF -uroot-pdafei1288 > test.sql
参数 --lock-all-tables
对于InnoDB将替换为 --single-transaction。
该选项在导出数据之前提交一个 BEGIN SQL语句,BEGIN不会阻塞任何应用程序且能保证导出时数据库的一致性状态。它只适用于事务表,例如 InnoDB 和 BDB。本选项和 --lock-tables 选项是互斥的,因为 LOCK TABLES 会使任何挂起的事务隐含提交。要想导出大表的话,应结合使用--quick 选项。
参数 --flush-logs,结束当前日志,生成并使用新日志文件
参数 --master-data=2,该选项将会在输出SQL中记录下完全备份后新日志文件的名称,用于日后恢复时参考,例如输出的备份SQL文件中含有:CHANGE MASTER TOMASTER_LOG_FILE='MySQL-bin.000002', MASTER_LOG_POS=106;
参数 test,该处的test表示数据库test,如果想要将所有的数据库备份,可以换成参数 --all-databases
参数 --databases 指定多个数据库
参数 --quick或-q,该选项在导出大表时很有用,它强制 MySQLdump 从服务器查询取得记录直接输出而不是取得所有记录后将它们缓存到内存中。
参数 --ignore-table,忽略某个数据表,如 --ignore-tabletest.user 忽略数据库test里的user表
-lF,注意必须大写F,当备份工作刚开始时系统会刷新log日志,产生新的binlog日志来记录备份之后的数据库“增删改”操作。
全恢复
mysql -uroot -pdafei1288 <test.sql
恢复指定库
mysql -uroot -pdafei1288 test1< test1.sql
增备
环境配置
检查是否开始 binlog
show variables like'%log_bin%';
表示没开启,在my.inf主配置文件中直接添加三行
log_bin=ON
log_bin_basename=
log_bin_index=
重启mysql,
表示已开启。
show binary logs;
查看binlog文件列表
增备
show master status;
当前正在记录日志的文件名是 binlog.000003
mysqladmin -uroot -pdafei1288flush-logs
生成并使用新的日志文件,再重新查看日志文件列表
恢复
mysqlbinlog --no-defaults--start-position=1082 binlog.000001 | mysql -uroot -pdafei1288
命令列表
mysqldump -B test -lF -uroot-pdafei1288 > test.sql
mysql -uroot -pdafei1288 <test.sql
show variables like'%log_bin%';
show binary logs;
show master status;
mysqladmin -uroot -pdafei1288 flush-logs
mysqlbinlog --no-defaults--start-position=1082 binlog.000001 | mysql -uroot -pdafei1288
参考资料:
https://dev.mysql.com/doc/refman/8.0/en/mysqlbinlog.html
https://dev.mysql.com/doc/refman/8.0/en/mysqldump.html
https://dev.mysql.com/doc/refman/8.0/en/point-in-time-recovery.html
https://www.cnblogs.com/wangke2017/p/9745183.html
声明:文章收集于网络,版权归原作者所有,为传播信息而发,如有侵权,请联系小编删除,谢谢!
时间:2020-04-23 12:39 来源: 转发量:次
声明:本站部分作品是由网友自主投稿和发布、编辑整理上传,对此类作品本站仅提供交流平台,转载的目的在于传递更多信息及用于网络分享,并不代表本站赞同其观点和对其真实性负责,不为其版权负责。如果您发现网站上有侵犯您的知识产权的作品,请与我们取得联系,我们会及时修改或删除。
相关文章:
- [数据挖掘]谷歌甲骨文Java专利大战终审判决:安卓使用Java
- [数据挖掘]使用Go语言编写的恶意软件激增2000%
- [数据挖掘]如何使用 Prometheus 轻松实现监控?
- [数据挖掘]Twitter 把 Kafka 当作存储系统使用
- [数据挖掘]为什么阿里不建议MySQL使用text类型?
- [数据挖掘]大数据关键技术浅谈之大数据存储及管理
- [数据挖掘]Vue 项目打包部署总结
- [数据挖掘]C++之父:成功来自有效使用硬件,C++ 11是转折点
- [数据挖掘]使用Prometheus和Grafana构建Redis实时监控平台
- [数据挖掘]Java 2020:使用者近 680 万,中国开发者占比最高
相关推荐:
网友评论:
最新文章
热门文章