如何使用MySQL增量备份保护数据? (mysql数据库增量备份)

MySQL是全球最为流行的关系型数据库管理系统,简称为RDBMS。但是即使拥有最为优秀的软件也无法避免数据丢失或者损坏的风险。数据的保护是数据库管理员工作中最为基础、最为核心的一项工作。采用合适的备份方式是确保数据安全的最有效的手段之一。

目前在备份数据时,最常用的是完全备份和增量备份两种方式。完全备份是备份整个数据库。增量备份是备份自上次备份以来的变化。两种方式各有利弊。完全备份消耗时间和磁盘存储空间,而增量备份备份时间短,并且占用空间小,但需要对备份历史做处理,还是会有数据可能丢失的风险。接下来将会详细介绍如何使用MySQL增量备份保护数据。

通过设置日志来开启增量备份

MySql提供了一种叫做binlog的日志功能,他们能够记录的只是已经修改的数据,由此可以生成所谓的“增量备份”。在MySQL中,binlog可以记录所有修改了的数据库,其中就包括创建表、修改表结构等都可以被自动记录下来,还可以让数据库自己处理日志的复杂问题,所以备份数据的方式也非常灵活。

操作步骤:

1. 开启日志记录

在MySQL中,为了记录所有修改了的数据库,需要将日志开启。

可以通过修改配置文件,添加以下语句启动日志功能:

log-bin = mysql-bin

2. 检查是否开启日志记录

开启日志记录后首先需要检查是否已经正确启动了日志,并确认binlog命令被执行。可以通过以下命令查看和确认当前的binlog名称。

show binary logs;

如果出现多个记录,那么表示日志记录已经启动成功。

3. 创建全量备份

在备份前,需要先备份整个数据库中的数据,来作为下一次增量备份的基础。这个全量备份的名称可以为dump.sql,我们将其保存在/usr/local/mysql/backup目录下。

mysqldump -u username -p –single-transaction –master-data=2 –all-databases > /usr/local/mysql/backup/dump.sql

4. 创建增量备份

增量备份操作步骤包含两部分:

1)将binlog文件复制到新的目录下

cp /var/lib/mysql/mysql-bin.00000X /usr/local/mysql/backup

2)将binlog生成SQL语句备份

mysqlbinlog /root/mysql_binlog/mysql-bin.000001 > /usr/local/mysql/backup/binlog.sql

最后将增量备份的binlog.sql的内容拼接到dump.sql后面,再保存到备份目录中。这样下次要进行的备份操作便会根据上次备份到的位置继续进行,从而实现增量备份的目的。

增量备份需要重复进行上述操作,不断生成新的增量备份,这样就可以保护数据不丢失,还可以方便名为修复数据。但是需要注意的是,增量备份到一定阶段,需要将数据重新生成全量备份,否则不仅备份过程会变得越来越复杂,而恢复数据也会成为难题。

结论

MySQL增量备份是一种高效、可靠的数据备份方式,对数据进行有效保护。但是需要注意的是,数据备份只是数据安全措施中的一环,对于整个数据安全措施来说,还需要采用其他措施,如定期进行数据同步、数据恢复测试等。良好的数据保护习惯可以保障数据的持续安全和稳定性,让我们的业务在数据的稳定和安全中飞速发展。

相关问题拓展阅读:

请问mysql怎么自动备份数据库?

在LINUX下:

可以芦宴岩写一个shell脚本,由crontab定时调用祥猜这个脚陪御本以实现备份数据库。

参考网址:

数据库的自动备份,可以减轻维护者的工作量也便于系统恢复,对于比较重要的数据库,更好还是设置下自动备份。

工具/原料

navicat for mysql

mysql 5.5

方法/步骤

打开navicat客户端,连上mysql后,双击左边你想要备份的数据库。点击“计划”,再点击“裂顷正新建批处理作业”。

双击上面的可用任务,它就会到下面的列表里去,代表你选择了这个任务。

点击保存,弹出个命名对乎伍话框,给这个任务取个名字,肆悔点击“确定”

点击“设置”计划任务。

弹出的对话框,选择“计划”,再点击“新建”。

这里设置为从2023年1月24号起每天早上九点备份该数据库。如果想提高备份频率、或者设置备份截止日期,请点击“高级”。

高级选项可以把备份设置的更精细,比如这里设置的是在24小时内每隔2小时就备份一次。加上前面的基本设置,任务计划就是:从2023年1月24号开始,每天九点,每隔2小时备份一次,每天的备份都持续24小时。

最后,输入电脑密码就大功告成。

windows下:

具体来说,数明我们若需利用任务计划程序自动运行则应执行如下步骤:

1.单击“开始”按钮,然后依次选择“程序”→“附件”→“系统工具”→“任务计划”(或者是“设置”→“控制面板”→“任务计划”),启动Windows的任务计划管理程序。

2.在“任务计划”窗口中双击“添加任务计划”图标,启动系统的“任务计划向导”,然后单击“下一步”按钮,在给出的程序列表中选择需要自动运行的应用程序,然后单击“下一步”按钮。

设置适当的任务计划名称并选择自动执行这个任务的时间频率(如每天、每星期、每月、一次性、每次启动计算机时、每次登录时等),然后单击“下一步”按钮。

此时系统将会要求用户对程序运行的具体时间进行设置,如几号、几点钟、哪几个时间段才能运行等,我们只需根据自己的需要加以设置即可。

4.接下来系统将会要求用户设置适当的用户名及密码(如图5所示),以便系统今后能自动加以运行。

5.最后,我们只需单击“完成”按钮即可将相应任务添加到Windows的任务计划程序中,此后它就会自动“记住”这个任务,一旦系统时间及相关条件与用户设置的计划相符,它就会自动调用用户所指定的应用程序,十分方便(每次启动Windows的时候,任务计划程序都会自动启动,并在后台运行,确保用户的计划能够按时执行)。

现在我们来测试一下刚才所建的任务是否成功,鼠标右键单击“php”程序图标(如图6所示),在弹出的菜单里面选择“运行”。一般情况下程序图标只要这样激活运行就可以正常启动。如果运行失败可查看用户和密码是否薯歼告设置正确,还有确定“Task Scheduler”服务是否已启动,本人当初就是为了节省系统资源把它关掉了导致运行失败,害我找了大半天。另外也可从“系统日志”里查看到底是什么原因造成运行失败的。

好了,讲了这么多任务计划的应用,现在我们切入正题,下面将介绍两个例子:

一、让PHP定时运行吧!

1、编辑如下代码,并保存为test.php:

2、添加一个任务计划,在(如图2所示)这一步输入命令:D:\php4\php.exe -q D:\php4\test.php

3、时间设置为每隔1分钟运行一次,然后运行这个任务。

4、现在我们来看看d:\php4\test.txt文件的内容时候是否成功。如果内容为如下所示,那么恭喜你成功了。

11:08:01 让PHP定时运行吧!

11:09:02 让PHP定时运行吧!

11:10:01 让PHP定时运行吧!

11:11:02 让PHP定时运行吧!

二改蚂、让MYSQL实现自动备份变成可能!

1、编辑如下代码,并保存为backup.php,如果要压缩可以拷贝一个rar.exe:

backup Ver 0.01, for Win95/Win98/WinNT/Win2023/WinXP on i32

Copyright (C)ptker All rights reserved.

This is free software,and you are welcome to modify and redistribute it

under the GPL license

PHP Shell script for the backup MySQL database.

Usage:

can be database name you would like to backup.

With the –help, or -? options, you can get this help and exit.

./$dbname.sql”);

@exec(“$rar_tool a -ag_yyyy_mm_dd_hh_mm $dbname.rar $dbname.sql”);

@unlink(“$dbname.sql”);

echo “Backup complete!”;

}

?>

2、添加一个任务计划,在(如图2所示)这一步输入命令:

D:\php4\php.exe -q D:\php4\backup.php databasename

3、时间设置为每天运行一次,然后运行这个任务。

4、最后会在d:\php4\目录下生成一个以数据库名和当前时间组成的rar文件。

linux下:

MySQL :: Linux 下自动备份数据库的 shell 脚本

Linux 服务器上的程序每天都在更新 MySQL 数据库,于是就想起写一个 shell 脚本,结合 crontab,定时备份数据库。其实非常简单,主要就是使用 MySQL 自带的 mysqldump 命令。

脚本内容如下:

#!/bin/sh

# File: /home/mysql/backup.sh

# Database info

DB_NAME=”test”

DB_USER=”username”

DB_PASS=”password”

# Others vars

BIN_DIR=”/usr/local/mysql/bin”

BCK_DIR=”/home/mysql/backup”

DATE=`date +%F`

# TODO

$BIN_DIR/mysqldump –opt -u$DB_USER -p$DB_PASS $DB_NAME | gzip > $BCK_DIR/db_$DATE.gz

然后使用将此脚本加到 /etc/crontab 定时任务中:

01 5 * * 0 mysql /home/mysql/backup.sh

好了,每周日凌晨 5:01 系统就会自动运行 backup.sh 文件备份 MySQL 数据库了。

/home/www/inc/back

直接利用第三方工具“多备份”来实现MySQL自动备份数据库吧,非常芦碧大方便,可以设置按时/天/周/月/频率进行设置慧返自动增量备份,兼容windows、Linux、Unix等系统,在线陪竖就可以一键恢复,不需要写php代码

数据备份绝晌是数据容灾的最后一道防线,即便有着两地三中心的架构,备份也依然重要。如果备份出问题,备份时影响了交易业务,备份数据无法恢复,这些也是企业难以承受的。所以选择合适的备份工具尤为重要。

每个企业级数据库都会有配套的备份工具,MEB(MySQL Enterprise Backup)就是MySQL企业版中非常重要的工具之一,是为企业级客户提供的数据备份方案。

Xtrabackup一直作为MEB 开源版备胎而存在,从MySQL 8.0开始情况可能会变得有所不同。

在 MySQL 8.0的Backup Lock、Redo Log Archiving、Page Tracking等新特性的加持下,MEB备份/恢复体验会更好,目前xtrabackup还不支持这些特性。

MySQL 企业版还有哪些功能?

特性1:Backup Lock

8.0之前使用xtrabackup或MEB做物理备份,为了保证备份时InnoDB引擎表与其他引擎数据文件、及binlog日志的一致性会上全局读锁,再拷贝非InnoDB文件,这期间MySQL会变成只读,数据无法写入。表数量越多,可能加上时间越长尘宏肢,如果使用的xtrabackup 不小心没加rsync参数,逐个拷贝frm文件,锁定时间会更长,对业务影响较大。

我曾遇到过部署在虚拟机的实例有12023多张表,当时使用的xtrabackup,备份脚本中没加rsync参数,结果锁了十几分钟,而MEB就没有这样的问题。

MySQL 8.0支持轻量级备份锁 LOCK INSTANCE FOR BACKUP,数据字典也重构了由InnoDB存储。若不创建非InnoDB表,MEB默认使用备份锁获取binlog日志一致性位置,并阻止DDL操作,但不影响DML操作。

只有InnoDB表,仅上备份锁

请点击输入图片描述

若有非InnoDB表,上全局锁

请点击输入图片描述

特性2:Redo Log Archiving

MEB能做到在线热备,备份时不影响数据库读写,这是利用了InnoDB事务日志,在备份期间持续监视redo log的变化,读取增量变化,写入到ibbackup_logfile,也就不需要上锁来保障备份一致性。(对非InnoDB的文件需要上读锁拷贝)

如果备份期间数据库写入负载特别大,而写入ibbackup_logfile速度较慢,redo log size也不大,很可能会出现ibbackup_logfile的写入速度跟不上redo log记录生成速度,redo log 空间不够时需要覆写日志文件,那么来不及写入ibbackup_logfile的记录会丢失,导致备份失败。

MEB 4.1对此做了优化,将redo log处理线程拆分成多线派世程分工合作,提高处理redo log的效率,降低了redo log覆写造成备份失败的概率,但redo log新增速度和ibbackup_logfile写入速度悬殊太大,问题依然会发生。

MySQL 8.0.17支持了redo log archiving 彻底解决了此问题,备份前设置innodb_redo_log_archive_dirs,指定redo log归档目录。MEB备份时自动开启日志归档,当checkpoint时会将旧记录归档到此目录,后续从归档文件中读取redo日志记录,避免了覆写可能导致的redo记录丢失。

请点击输入图片描述

注意:innodb_redo_log_archive_dirs 不能在数据目录下,目录权限要求是700

特性3:Page Tracking

Page Tracking 是为优化增量备份效率,减少不必要的数据页扫描。

增量备份当前有3种扫描模式:

page-track:利用LSN精确跟踪上次备份之后被修改页面,仅复制这些页面,效率最快。

optimistic:扫描上次备份之后被修改的InnoDB 数据文件中,找出并拷贝修改的页面。依赖系统时间,使用存在限制。

full-scan:扫描所有InnoDB数据文件,找出并拷贝自上次备份之后修改的页面,效率最慢

1、利用page-track增量备份,需先安装备份组件

mysql> INSTALL COMPONENT “

2、在全备前开启page-track

SELECT mysqlbackup_page_track_set(true);

3、全备之后,做增量备份时指定若满足page tracking条件,默认会使用page-track模式,否则会使用full-scan模式,也可以指定–incremental=page-track。

mysqlbackup –incremental-backup-dir=backup_incr –trace=3 –incremental=page-track –incremental-base=history:last_full_backup backup

incremental-base有3种选择

last_backup:基于前一次备份做增备,前一次备份可能是增备,也可能是全备。这种方式全备之间可能会有多个增备,每次增量可能比较小,但恢复时需要逐个合并。

last_full_backup:基于前一次全备做增备。这种方式增备会越往后体积可能越大,但恢复时只需要合并最后一次增量备份。

dir:基于前一次的备份目录,前一次备份可能是增备,也可能是全备。

测试对比full-scan 和page-track ,在变更页小于总体50%的情况下 ,备份效率至少能有1倍的速度提升。

page-track 模式 磁盘读写均衡,说明读写的都是修改页面。

请点击输入图片描述

full-scan模式 磁盘读写差别很大,说明读了很多未修改的页面。

请点击输入图片描述

如何备份10G以上的mysql数据库

如果能打开binlog,可以:

部署主从同步,直接用从库当备份好了

完整备份+增量备份,比如每周一个完整备份,每天一个小的增量dump,这样在完整度和效率方面可以平衡下。工具可以用Percona的XtraBackup:

mysql数据库增量备份的介绍就聊到这里吧,感谢你花时间阅读本站内容,更多关于mysql数据库增量备份,如何使用MySQL增量备份保护数据?,请问mysql怎么自动备份数据库?,如何备份10G以上的mysql数据库的信息别忘了在本站进行查找喔。


数据运维技术 » 如何使用MySQL增量备份保护数据? (mysql数据库增量备份)