[转帖]Mysql之LSN和checkpoint和double write

mysql,lsn,checkpoint,double,write · 浏览次数 : 0

小编点评

**LSN**: LSN,或 Log Sequence Number,是一个数字,用于记录记录日志中每个日志记录的顺序。当我们更新或插入数据时,LSN 会被写入日志中。 **checkpoint**: checkpoint 是一个数字,用于记录日志中每个日志记录的写入位置。当我们更新或插入数据时,checkpoint 会记录日志记录的写入位置。 **redo日志**: redo日志记录了数据更新或插入操作的历史,包括 LSN 和 checkpoint。当发生数据丢失或损坏时,我们可以从 redo日志中恢复数据。

正文

https://www.jianshu.com/p/57a1dcf39b88

 

一直弄不清楚LSN和checkpoint的意思

个人理解:当要把buffer_pool里的脏页刷入磁盘的时候,会用checkpoint记录刷入内容,刷入到哪里了。防止下次忘记刷入内容,刷入到哪里了。checkpoint就是一个数字,每当刷入内容,就会写入日志,然后用一个数字来记录日志和内容写入到哪里了,这个数字是一直增加的。

redo日志里有LSN,页里面也有LSN。checkpoint记录在redo日志里。

当update执行的时候,会写入很多日志信息到redo日志。先写入到redo日志buffer,就是内存缓存中。更新的内容先会更新buffer里面的页。因为redo日志有写盘更新机制,基本都是一有写入buffe,就会写入磁盘。所以redo磁盘日志会时时记录LSN这一串数字。

只有当条件达到了,才会执行checkpoint,把脏页写入磁盘。当所有脏页写入磁盘后,会把checkpoint写入到redo日志。而写入磁盘的每一个页,都记录一个LSN的。

当mysql突然挂了,如何做数据一致性呢?

mysql启动之后,会检测redo日志里面的checkpoint,就知道最后写入磁盘的页的LSN都是小于等于这个checkpoint的。就是记录着大于checkpoint的LSN的页,都没及时写入到磁盘,都丢失了。此时内容需要从redo日志获取,利用redo日志进行数据一致性。

 


通过 show engine innodb status\G;  查看LSN和checkpoint

 


redo日志无法对已经损坏的页进行修复,所以如果在写入数据的时候,比如一次IO写入16K,文件系统block是4k,磁盘IO是512k。那么mysql进行了一次写入,16k,但是当写入了4k,突然mysql挂了,那么还有12k是没有写入。导致mysql这个页的数据有问题,页损坏了。此时redo无法修复。

 

 

doublewrite的过程是,把脏页写入磁盘的过程,先写入内存的doublewrite buffer,然后内存的doublewrite buffer先写一份到共享表空间的double write里。然后再写一份到相对应的表空间里。如果此时突然mysql挂了,mysql重启的时候,这个页的数据从共享表空间那边copy一份过来恢复就行了。

与[转帖]Mysql之LSN和checkpoint和double write相似的内容:

[转帖]Mysql之LSN和checkpoint和double write

https://www.jianshu.com/p/57a1dcf39b88 一直弄不清楚LSN和checkpoint的意思 个人理解:当要把buffer_pool里的脏页刷入磁盘的时候,会用checkpoint记录刷入内容,刷入到哪里了。防止下次忘记刷入内容,刷入到哪里了。checkpoint就是

【转帖】mysql一个索引块有多少指针_深刻理解MySQL系列之索引

索引 查找一条数据的过程 先看下InnoDB的逻辑存储结构:node 表空间:能够看作是InnoDB存储引擎逻辑结构的最高层,全部的数据都存放在表空间中。默认有个共享表空间ibdata1。若是启用innodb_file_per_table参数,须要注意每张表的表空间内存放的只是数据、索引和插入缓冲B

[转帖]MySQL索引优化分析之性能分析(Explain执行计划)

一、MySQL常见瓶颈 二、性能分析工具Explain(执行计划 ) 使用EXPLAIN关键字可以模拟优化器执行SQL查询语句,从而知道MySQL是如何处理你的SQL语句的。分析你的查询语句或是表结构的性能瓶颈。查看官网说明: 使用: Explain + SQL语句 作用: 三、各字段解释 3.1、

[转帖]图文结合带你搞懂 MySQL 日志之 Slow Query Log(慢查询日志)

https://my.oschina.net/GreatSQL/blog/5719211 GreatSQL 社区原创内容未经授权不得随意使用,转载请联系小编并注明来源。 GreatSQL 是 MySQL 的国产分支版本,使用上与 MySQL 一致。 作者:KAiTO 文章来源:GreatSQL 社区

[转帖]jmeter之发送jdbc请求--06篇

1.setup线程组中新建一个JDBC Connection Configuration配置元件 2.设置配置信息 Database URL:jdbc:mysql://127.0.0.1:3306/vue_interface?useUnicode=true&characterEncoding=utf

[转帖]生产环境shell脚本安全之shc编译(转C)

https://www.jianshu.com/p/17399dcd1471 应用场景很多,如,中小项目大多使用mysql,那么在你的mysqladmin备份脚本里可能存在明文的密码,此时由于公司服务器可能多个同事使用,那么转码加密脚本至关重要! 1,首先 SHC安装(建议使用交新版本,如 4.0.

[转帖]MySQL pid 和 socket 文件说明

2021-10-13 11:595110转载MySQL 1 pid-file文件 MySQL 中的 pid 文件记录的是当前 mysqld 进程的 pid ,pid 亦即 Process ID 。可以通过 pid-file 参数来配置 pid 文件路径及文件名,如果未指定此变量,则 pid 文件默认

[转帖]MySQL 慢查询日志深入理解

https://www.jb51.net/article/210312.htm + 目录 什么是慢查询日志 MySQL的慢查询日志是 MySQL提供的一种日志记录,它用来记录在 MySQL 中响应时间超过阀值的语句,具体指运行时间超过long_query_time 值的 SQL,则会被记录到慢查询日

[转帖]MySQL with Docker - Performance characteristics

https://dev.mysql.com/blog-archive/mysql-with-docker-performance-characteristics/ Docker presents new levels of portability and ease of use when it co

[转帖]MySQL Performance : Impact of InnoDB Transaction Isolation Modes in MySQL 5.7

http://dimitrik.free.fr/blog/archives/2015/02/mysql-performance-impact-of-innodb-transaction-isolation-modes-in-mysql-57.html There were so many valua