Mysql数据库表定期备份的实现详解
Mysql数据库表定期备份的实现
0.背景
实际开发环境中,前端程序需要在给定时间段内,将数据更新/插入到MySQL指定的库表中。随着数据量的增多,基础库表基数的增长,每更新一次都会有5s左右的卡顿。
改进方案一:批量更新,累计数10条或者100条进行一次更新入库操作;
改进方案二:将当前日期前1个月之前的数据进行备份操作,并删除当前库表中1个月前的数据。经测定,该方法一定程度提高了访问效率。根因:基础表基数少,查询效率相对提高。
1.库表的定时备份总结
步骤1:备份Mysql指定数据库中的制定库表。
使用mysqldump,设定周期30天。
步骤2:对于日期60天前的已备份的文件及压缩包做删除处理。
步骤3:删除库表中在当前日期前30天的数据。(步骤1已经做了备份)。
步骤4:设定定时。
crontab设定。
[root@mysql_bak]#catmysql_bak.sh #!/bin/sh #DATABASEINFO DB_NAME="ppdb" DB_USER="root" DB_PASS="password" DISPOSE_TABLE="dispose_ticles" RST_TABLE="match_rst" DB_IP=100.55.1.129 BIN_DIR="/usr/bin" BAK_DIR="/home/mysql_bak/data" DATE=`date+%Y%m%d_%H%M%S` #mkdir-p$BAK_DIR #备份包形成压缩包 $BIN_DIR/mysqldump$DB_NAME$DISPOSE_TABLE>$BAK_DIR/$DISPOSE_TABLE.dump_$DATE.sql $BIN_DIR/mysqldump$DB_NAME$DISPOSE_TABLE|gzip>$BAK_DIR/$DISPOSE_TABLE.dump_$DATE.sql.gz $BIN_DIR/mysqldump$DB_NAME$RST_TABLE>$BAK_DIR/$RST_TABLE.dump_$DATE.sql $BIN_DIR/mysqldump$DB_NAME$RST_TABLE|gzip>$BAK_DIR/$RST_TABLE.dump_$DATE.sql.gz #定期删除60天的备份包 find$BAK_DIR-name"name_*.sql.gz"-typef-mtime+60-execrm{}\;>/dev/null2>&1 #30天前的指定库表数据删除操作(当前时间减去30天) delete_date=`date--date='30dayago'+%Y-%m-%d` echo"delete_date=$delete_date" #删除rst表信息 rst_sql="deletefrom$RST_TABLEwhereupdate_time<=$delete_dateorderbyupdate_time;"; echo"rst_sql=$rst_sql" #ret=$(mysql-u$DB_USER-h${DB_IP}-p${DB_PASS}$DB_NAME-e"$sql"); ret=$(mysql-h${DB_IP}$DB_NAME-e"$rst_sql"); echo$ret #删除dispose表信息 dispose_sql="deletefrom$DISPOSE_TABLEwherejudge_time<=$delete_dateorderbyjudge_time;"; echo"dispose_sql=$dispose_sql" ret=$(mysql-h${DB_IP}$DB_NAME-e"$dispose_sql"); echo$ret
2.定时设置:每隔30天的1点进行备份。
[root@mysql_bak]#cat/etc/crontab SHELL=/bin/bash PATH=/sbin:/bin:/usr/sbin:/usr/bin MAILTO=root HOME=/ #Fordetailsseeman4crontabs #Exampleofjobdefinition: #.----------------minute(0-59) #|.-------------hour(0-23) #||.----------dayofmonth(1-31) #|||.-------month(1-12)ORjan,feb,mar,apr... #||||.----dayofweek(0-6)(Sunday=0or7)ORsun,mon,tue,wed,thu,fri,sat #||||| #*****user-namecommandtobeexecuted 01*/30**/home/mysql_bak/mysql_bak.sh>/dev/null2>&1 [root@mysql_bak]#crontab-e 01*/30**/home/mysql_bak/mysql_bak.sh>/dev/null2>&1
重启crontab服务
servicecrondrestart
感谢阅读,希望能帮助到大家,谢谢大家对本站的支持!