mysql写入原理
我们知道在mysql数据库最核心的大脑就是执行引擎;
其中的默认引擎Innodb在可靠执行和性能中做出来平衡;
innodb支持在事务控制、读写效率,多用户并发,索引搜索方面都表现不俗;
innodb如何进行数据写入?
1、我们的sql语句在被优化后会传给存储引擎;
2、内部的执行器会执行sql语句命令;
3、由于内存的写入速度远大于磁盘,所以我们一切的读写在内存中进行
这个内存缓冲区被称为buffer Pool;
为了支持数据的回滚机制,我们在进行修改更新数据前,先在undo log日志中记录旧值,然后写入buffer pool后操作数据,在一些特定的时机,开启一些小的线程,读取buffer pool的数据写入到硬盘中
那么innodb是如何在这个过程中将buffer pool数据写入到硬盘中的呢?
innodb调用了操作系统的open和write函数,同时innodb也提供了自己的一套缓存机制,即O_DIRECT,并没有使用操作系统提供的Page cache;
那么如果发生断电,buffer pool中的数据还没来得及写入到磁盘上的ibd文件,
buffer pool内存中的数据也随着断电丢失,如何解决?
数据在buffer pool更新同时,也会加载更新信息到内存中的redo log buffer缓存中;
redo log buffer的数据写入到磁盘中的redo log 文件;
我们即使断电更新信息也会保存在redo log 文件中,下一次更新信息会刷入ibd文件恢复数据;
redo log 提供不同的刷盘策略
策略1
设置如图参数为1;
每次提交事务提交前都会将redo log buffer写入到操作系统内存中;
并立刻完成刷盘操作,写入ibd文件中;
策略0
设置参数为1;
将redo log buffer 写入到内存中,每隔一秒将数据写入到操作系统缓存,并完成刷盘操作;
binlog日志
binlog提供了主从复制,备份恢复,变更历史查询等;
在redo日志写入时会进行binlog的刷盘操作,在redo日志完成后,binlog会告知binlog已提交的信息,并打上commit标记;
这样一次数据的写入完成;