最近我有一个客户删除InnoDB主表空间 - ibdata1 - 和重做日志 - ib_logfile *的情况。

MySQL使InnoDB文件始终保持打开状态。以下恢复技术基于此事实,它允许抢救数据库。

实际上,文件很久以前被删除 - 大约6个月左右。只要文件在物理上打开,它仍然会在文件系统中退出,并且可以访问已打开它的进程。

因此,从用户的角度来看,删除后没有任何变化。顺便说一句,这是监视这些文件存在的一个很好的理由!
但重启后InnoDB将检测到既没有系统表空间也没有日志文件,因此它将创建空的。InnoDB字典将为空,InnoDB将无法使用一堆现有的ibd文件。这种情况将是ibdconnect的工作,但只要MySQL没有重新启动,就可以快速恢复数据库。让我来说明一下。

让我们模拟一下事故。为此,我将删除/ var / lib / mysql / ib *文件,而sysbench生成读/写活动:

位于Screen0:

 
 
 
 
 
 

Shell

 
1
2
3
4
5
6
7
8
9
10
11
12
13
root@localhost:~# sysbench --num-threads=16 --max-requests=0 --test=oltp --oltp-table-size=1000000 --max-time=3600 --mysql-user=root run
sysbench 0.4.12:  multi-threaded system evaluation benchmark
 
No DB drivers specified, using mysql
Running the test with following options:
Number of threads: 16
 
Doing OLTP test.
Running mixed OLTP test
Using Special distribution (12 iterations,  1 pct of values are returned in 75 pct cases)
Using "BEGIN" for starting transactions
Using auto_inc on the id column
Threads started!

屏蔽1:

 
 
 
 
 

Shell

 
1
2
root@localhost:/var/lib/mysql# rm ib*
root@localhost:/var/lib/mysql#

现在文件已经消失,但MySQL仍在运行。它们不存在于/ var / lib / mysql中,但可以在/ proc文件系统中访问:

 
 
 
 
 

Shell

 
1
2
3
4
root@localhost:/var/lib/mysql# ls -la  /proc/14101/fd/ | grep -e ibdata -e ib_
lrwx------ 1 root  root  64 Aug  7 23:29 3 -> /var/lib/mysql/ibdata1 (deleted)
lrwx------ 1 root  root  64 Aug  7 23:29 8 -> /var/lib/mysql/ib_logfile0 (deleted)
lrwx------ 1 root  root  64 Aug  7 23:29 9 -> /var/lib/mysql/ib_logfile1 (deleted)

其中14101是mysqld进程的PID。

但是,我们无法将它们复制回来,因为在任何给定的时间点,缓冲池中都有修改过的页面。这些页面不会写入磁盘,如果未永久写入更改,则会丢失这些页面。这可能导致损坏和数据丢失。

出于同样的原因,我们不能通过复制文件来进行MySQL备份。

因此,我们必须确保所有修改都写入磁盘。

为此,我们必须停止任何进一步的写入并等待InnoDB刷新所有页面。

要停止写入活动,我们可以停止应用程序或锁定表:

 
 
 
 
 

Shell

 
1
2
mysql> flush tables with read lock;
Query OK, 0 rows affected (0.37 sec)

现在让我们等到所有脏页都刷新到磁盘上。为此,我们将监测检查站的年龄。检查点年龄是当前日志序列号与“SHOW ENGINE INNODB STATUS”输出中的最后一个检查点之间的差异。如果检查点年龄为零,则刷新所有页面:

 
 
 
 
 

Shell

 
1
2
3
4
5
6
7
---
LOG
---
Log sequence number 363096003
Log flushed up to   363096003
Last checkpoint at  363096003
Max checkpoint age    7782360

为了加快刷新速度,我们可以将脏页百分比设置为零:

 
 
 
 
 

Shell

 
1
2
mysql> ;
Query OK, 0 rows affected (0.01 sec)

确保所有其他后台流程完成其工作也很重要。
其中之一是插入缓冲线程。它的大小不应超过1(它永远不会小于1):

 
 
 
 
 

Shell

 
1
2
3
4
-------------------------------------
INSERT BUFFER AND ADAPTIVE HASH INDEX
-------------------------------------
, free list len 398, seg size 400,

后台写进程purge thread,清除所有事务。
它应该清除所有交易,直到最后

 
 
 
 
 

Shell

 
1
2
3
4
5
------------
TRANSACTIONS
------------
Trx id counter 0 16644
Purge done for trx's n:o < 0 16644 undo n:o < 0 0

但是如果最后一个事务不需要清除操作(例如SELECT),则Trx id计数器将更大。
在这种情况下,至少确保InnoDB没有进行任何写入:

 
 
 
 
 

Shell

 
1
2
3
4
5
6
7
8
9
10
11
FILE I/O
--------
I/O thread 0 state: waiting for i/o request (insert buffer thread)
I/O thread 1 state: waiting for i/o request (log thread)
I/O thread 2 state: waiting for i/o request (read thread)
I/O thread 3 state: waiting for i/o request (write thread)
Pending normal aio reads: 0, aio writes: 0,
ibuf aio reads: 0, log i/o's: 0, sync i/o's: 0
Pending flushes (fsync) log: 0; buffer pool: 0
332 OS file reads, 47 OS file writes, 32 OS fsyncs
0.00 reads/s, 0 avg bytes/read, 0.00 writes/s, 0.00 fsyncs/s

当刷新所有修改过的页面时,现在可以安全地复制InnoDB文件:

 
 
 
 
 

Shell

 
1
2
3
root@localhost:/var/lib/mysql# cp /proc/14101/fd/3 /var/lib/mysql/ibdata1
root@localhost:/var/lib/mysql# cp /proc/14101/fd/8 /var/lib/mysql/ib_logfile0
root@localhost:/var/lib/mysql# cp /proc/14101/fd/9 /var/lib/mysql/ib_logfile1

让我们修复所有者:

 
 
 
 
 

Shell

 
1
2
root@localhost:/var/lib/mysql# chown -R mysql ib*
root@localhost:/var/lib/mysql#

并重启MySQL:

 
 
 
 
 

Shell

 
1
root@localhost:/var/lib/mysql# /etc/init.d/mysql restart

重启后,所有InnoDB表都可以访问:

 
 
 
 
 

Shell

 
1
2
3
4
5
6
7
mysql> select count(*) from sbtest;
+----------+
| count(*) |
+----------+
|  1000000 |
+----------+
1 row in set (0.19 sec)

结论

    • 添加到您的监控系统检查InnoDB文件ibdata和ib_logfile *是否存在
    • 在明确进一步恢复策略之前,请勿重新启动MySQL
  • 结论:
    1.监控InnoDB文件 ibdata 和 ib_logfile* 是否存在
    2.清楚恢复策略,否则不要重启MySQLd

最新文章

  1. MVC中的一些坑
  2. javascript总结
  3. telnet命令——连接服务器
  4. JNative library not loaded, sorry ! win7 64位系统
  5. IOS开发UI基础UIImagePickerController的属性
  6. CentOS学习笔记--基本命令--目录的相关操作
  7. CSS中表示cellpadding和cellspacing的方法
  8. NSURLSession使用, 后台下载
  9. Mysql 通过frm&amp;ibd 恢复数据
  10. ffmpeg 图像转视频 视频转图像
  11. IBatisNet动态update以及DateTime类型字段处理
  12. xslt格式化日期的方法
  13. MVC与单元测试实践之健身网站(三)-角色与权限
  14. python打包工具pyinstaller的使用
  15. 使用 CLI 创建 Azure VM 的自定义映像
  16. JS数据模板分离(告别字符串拼接)-template
  17. 接口自动化测试框架HttpRunner
  18. js实现excel的解析
  19. 在线求助man page
  20. hdu 2722 Here We Go(relians) Again (最短路径)

热门文章

  1. 关于git的常用命令
  2. 《ASP.NET Core跨平台开发从入门到实战》Web API自定义格式化protobuf
  3. 【Promise】Promise实现请求超时处理(基本版)
  4. 为什么byte的取值范围是-128到127
  5. cmd命令窗口连接mysql的命令大全
  6. node-webkit无边框窗口用纯JS实现拖动改变大小
  7. 将H5页面的应用打包成APP(苹果和安卓版本)
  8. Apache RocketMQ在linux上的常用命令
  9. [转]Angular——提示框
  10. sqlserver 级联删除、级联更新