【技术类汇报】04 | 逻辑顺序-时间与重要性:如何复盘运营事故?

金字塔原理中的逻辑顺序

结论先行,至上而下,可以帮助我们确定论点,目标,继而确定大标题,小标题 ,在标题之下的演示文稿的内容的就是分论点或者论据。那么问题来了,多个分论点或者论据,要如何组织和呈现呢。在金字塔原理中,介绍了三种常见的逻辑顺序,包括时间顺序、重要性顺序、内在结构顺序。这次先来重点说说时间和重要性,在日常工作中,最能体现这两个顺序的就是事故复盘。在计算机领域,没有出个运维/运营事故的团队最有可能是没有承担责任的团队,出了事故,没关系,能复盘并不犯相同类似的错误就是好团队的象征。

运营事故复盘中的时间逻辑顺序

复盘的第一步,就是还原事情的真实情况,不用加工和归纳。这时,时间逻辑顺序就非常重要了。事故从问题产生,扩散,到用户投诉或者监控问题开始增加开始,然后紧急排查定位到最终分析解决,一步步列出来。最终形成了时间线,根据时间线我们可以构造出因果线,帮助寻找事故背后的原因。举个例子,大家可以阅读文稿中的我们曾经复盘的一个案例,

时间 事情
2016.7.29 15:00 开发修复内存泄漏问题,把界面依赖的全局变量置空
2016.7.30 10:00 NewMonkey发现某界面出现空指针错误53061
2016.7.30 15:20 X产品修复某界面指针缺陷53061
2016.8.1 10:00 X产品再次修复缺陷并产出1.11版本
2016.8.2 14:30 X产品的1.11版本依旧发现相同界面不同堆栈的空指针错误
2016.8.2 20:00 X产品发布后发现增加5%的Crash率的Crash
2016.8.3 15:24 排查问题并发布紧急补丁修复错误
2016.8.4 7:00 Crash修复至0.22%

跟团队复盘的时候,必须有像上面这样的一份还原事实的时间线,其实并不简单,要追溯缺陷系统,svn提交记录,发布系统,问题的关联分析,还有许多“为什么”需要跟相关干系人了解, 例如补丁准备时间为什么这么长,为什么7月30日10:00会改出空指针问题,为什么出新的安装包时间要相差好几个小时。在这个追溯的过程,其实就是在找问题出现的源头。

这里有个工具介绍给大家,帮助还原清晰的因果线,就是“5个为什么”。这个方法源自丰田汽车公司的创始人丰田喜一郎的父亲丰田佐吉,并且纳入丰田内部培训的课程里面。简单点说就是规范化刨根问底。其实在上面表格的那个真实案例,也是这么问出来的。

当时,我们有个同事布兰特很沮丧地找到我说,我们的随机测试NewMonkey工具有问题,漏出了一个被测产品的TOP Crash。现在想起来,这样的责任心很宝贵的,出问题,测试工具来抗。但是当时我就实验下一下“5个为什么”来还原事实,下面是当时的对话。

当时我不禁发问,“是核心功能吗?”

布兰特答,“嗯,是的。打开聊天窗口”

我又问,“那为什么会Crash呢?”

布兰特翻查了一下svn修复的记录和线上的堆栈,”因为全局变量的空指针问题“

我又问,“嗯,全局变量。那为什么之前没有Crash,现在Crash了,是修改了哪里?”

布兰特又查了一下几天前的修改记录,“天呀,在同一个界面居然还修改了两次空指针错误。7月29日的时候,开发把这个全局变量设置为空之后,我们的工具就发现了两次Crash,开发做空保护,修复了两次。“

我继续好奇地问,“淡定,现在问题找到了。但是为什么开发要把那个变量置空。”

布兰特看了下置空的SVN提交记录中关联的缺陷单说到,“是我们QAPM自动发现的内存泄漏问题,然后开发在反注册之后,把关联的全局变量置空了。“

之后我们据此,出了复盘的邮件,除了帮助提升开发意识的案例培训之外,也给静态扫描等工具提出了针对性的要求。

运营事故复盘中的重要性逻辑顺序

1.png

在复盘中,通常我们需要写改进措施。但是问题来了,对于平日忙到吐血的我们,要确保措施落地,就要思考一件事情,优先级/重要性。所以在改进措施的演示文稿或者表格中,就可以按照重要性/优先级的逻辑顺序来呈现。接着上面的例子,当时我们的重要性排序是,静态检查规则扫描并修复>核心代码更改告警>开发案例培训。

重要性与时间还出现在什么汇报中

除了事故复盘这种悲伤的事情,跟上级汇报中计划与进度、产品Roadmap,通常是按照时间线来展开。当然这个时间线本身就蕴含了对重要性的综合考虑。例如文稿中的演示文稿。

2.png

NewMonkey的进度与规划

另外一个就是,重要性逻辑排序。为了体现你在解决问题上,对关键矛盾/问题的识别是否到位,通常也就在解决方案的陈述中使用。例如文稿中,我曾经汇报的这页演示文稿,陈述的是面对Web性能监控方案的需求压力,我们怎样解决快速补全功能的问题。

3.png

解决方案,解决整合

在紧接着的演示文稿,会先详细说明Web性能监控如何整合。然后再说其他监控能力如何自研和整合配合。这个重要性顺序的安排的思考在于,1. 啄木鸟和伦琴都是现成在公司内成熟的方案;2. 监控与分析的闭环如果没有达成,用户使用的时候就会有发现问题无法修复的困境,体验也没有闭环;

通过这个例子,听众们应该知道时间与重要性逻辑顺序的基本用法和使用的场景。说真的,两个顺序难度不算最大的,只要多想,细心点,就可以写出来。但是下一节,我们介绍另外一个重要的逻辑顺序,内在结构的难度就高多了,敬请期待。

©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 162,825评论 4 377
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 68,887评论 2 308
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 112,425评论 0 255
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 44,801评论 0 224
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 53,252评论 3 299
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 41,089评论 1 226
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 32,216评论 2 322
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 31,005评论 0 215
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 34,747评论 1 250
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 30,883评论 2 255
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 32,354评论 1 265
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 28,694评论 3 265
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 33,406评论 3 246
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 26,222评论 0 9
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 26,996评论 0 201
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 36,242评论 2 287
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 36,017评论 2 281

推荐阅读更多精彩内容

  • 作为一个南方人,本人真的很少看过雪,一只手都可以数过来。偏偏我有三个人北方的舍友,每天跟我细说北方的雪啊。北方的有...
    小十巷阅读 101评论 0 1
  • 自由写作30天.转型与蜕变第二期第14篇 这几日温度飙升到了二十八九度,躺在一棵盛开的花树下,偶有风过,不冷也不热...
    真言臻宇阅读 382评论 3 3
  • 如果一个类没有实现自己的init方法,Cocoa会调用它父类的init方法来给它初始化。没啥必须的理由,就是个约定...
    Stroman阅读 144评论 0 0
  • 其实,据专家统计,儿童说谎话67%是由于畏惧和怕嘲笑引起的,10%与儿童的想象、夸张有关,只有20%的孩子是...
    李尔盖茨阅读 434评论 1 2
  • 阳光校园,我们在成长 校园生活,五彩斑斓,似一幅画册,记录着我们成长的故事,如一台摄影机,拍下了我们的每一段欢乐。...
    一支爱写字的铅笔阅读 231评论 0 0