mysql笔记之日志篇

mysql中日志主要分为以下几种:错误日志、慢查询日志、二进制日志和事务日志。

1. 错误日志

记录mysql启动时发生的错误信息,没什么好说的,因为工作中不常用。

2. 慢查询日志

这是mysql维护的一个日志文件,它用来自动记录执行时间超过某个阈值的SQL语句,通过查看这个日志,我们一般可以发现运行的慢SQL,

这个阈值通过long_query_time 变量可以控制,默认是10,我们可以使用如下命令查看和修改

show variables like 'long_query_time' ;
set global long_query_time = 1;

一般来说,并发量高的业务的SQL都需要走索引,正常走索引的查询SQL会控制在几十ms以内,如果表数据量很小的话,几ms就够了,所以long_query_time设置的小一点比较好,例如200ms。

当然,mysql记录这个日志肯定是需要耗费一定的性能的,所以它设置了一个变量slow_query_log来控制是否记录慢查询日志(默认是关闭的),个人感觉不会造成多大的压力,如果你的工程没有在业务层做sql监控的话,这个还是很有必要的。

3. binlog日志(归档日志)

这个大家应该听的比较多,数据备份恢复、主从同步等之类的都是依赖这个实现的,有些还要监听binlog做一些数据同步,例如同步到es中等等。

那么binlog到底是什么东西呢?

binlog又叫二进制日志文件,它会将mysql中所有修改数据库数据的请求以二进制的形式记录到日志文件中,所以像一些select就不会存储在这里。binlog是Server层的日志,也就是所有存储引擎(innodb、myisam等)都会有binlog日志。

一般来说,binlog日志是不会开启的,开启之后性能会有 1% 的下降。想要开启这个日志的话,我们可以在my.ini中添加如下配置

log-bin = [ on | filename ] ; 【filename表示生成的日志文件名字】
例如:log-bin = mysql-bin

binlog 是以二进制形式存储的逻辑日志,每次有需要记录的日志,就会追加在文件的末尾,一般,binlog有两种模式:

  • statement 格式:记录的是执行的sql
  • row 格式:记录的是sql影响的行的内容,记录两条,更新前和更新后的。

4.事务日志

事务日志是innodb独有的日志文件:包括redo log 和 undo log。它是用来做崩溃恢复和事务回滚的。

  • redo Log : 是物理日志,记录的是某个数据页的物理修改,而不是某一行或某几行修改成怎样怎样,它用来恢复提交后的物理数据页(恢复数据页,且只能恢复到最后一次提交的位置)。
  • undo Log : 是逻辑日志,根据每行记录进行记录,用来回滚到某个版本,它和redo log正相反,记录某数据被修改前的值,可以用来在事务失败时进行rollback。

重点可以说一下redo log,它的空间是固定大小的,在逻辑上是一个闭环,从头开始写,写到末尾之后又从头开始写,所以,redo log 维护了两个指针位置:

    1. write point :当前可写的位置,不断写不断往后移动
    1. check point当前要擦除的位置,擦了之后往后移动。

从这里我们就可以看出redo log 有两个特性:顺序写和批量提交。

说了这么多,我们可以来用一个简单的例子来大致看一下这些日志记录的 顺序与区别:(假设binlog 是statement模式的)。

例如我们要执行:

update tableA set a = 1 where id = 1000000

  1. 语句经过优化器生成执行计划,然后发现Id是主键索引,可以选择Id索引。
    执行器拿到这个sql后,调用存储引擎接口,去索引树上找id = 1 的数据,如果正好在内存中有,则直接返回数据;如果没有,则去磁盘中把对应的数据页读到内存中返回(可能不止一次IO操作);
  2. 执行器拿到数据之后,将 a 赋值为1,然后再调用引擎接口写入这个修改后数据。
  3. 引擎收到更新请求,生成一个全局唯一的事务ID(XID),然后将这个记录更新到缓存,然后记录redo log (包含XID)和 undo log, 此时redo log 状态变为 prepare 状态,并返回成功给执行器。
  4. 执行器收到成功之后,记录这个操作的binlog 日志(其中包含XID)
  5. 执行器调用引擎的commit接口,将redo log 改成commit状态,结束。

待续......

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 159,015评论 4 362
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 67,262评论 1 292
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 108,727评论 0 243
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 43,986评论 0 205
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 52,363评论 3 287
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 40,610评论 1 219
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 31,871评论 2 312
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 30,582评论 0 198
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,297评论 1 242
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,551评论 2 246
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,053评论 1 260
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,385评论 2 253
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,035评论 3 236
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,079评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,841评论 0 195
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 35,648评论 2 274
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 35,550评论 2 270