奇葩bug带来的测试经验

1、死锁——使用脚本聚合数据库数据并将聚合结果写入另外一张表中。因数据库数据插入id非从小到大的形式,导致脚本跑过之后,不会再跑小于已执行id的数据。测试需要注意的:数据库源数据的存入顺序与脚本逻辑的健壮性。

2、移动端串号——客户端无法获取用户设备id(应用没有获得手机的deviceid授权),采用代码规定的默认设备id登录时出现的问题。测试需要注意的:需要用到移动端授权时,需对是否获得授权进行测试。

3、服务器多token存储——多台服务器都存储了token,在一些页面操作时需要刷新token,但只有其中一台服务器的被刷新,请求的时候请求了未被刷新的服务器,导致登录态失效。测试需要注意的:从目标测试页,返回到其他页,登录状态是否正常。

4、客户端多token存储——客户端存储了有效token和失效token,在向服务端发起请求的时候,无法保证携带token的唯一性和有效性导致的问题。测试需要注意的:请求头中token携带的完整性和正确性。

5、数据格式错误:服务端返回的数据在客户端无法解析并使用,提示数据格式错误。测试需要注意的:关注接口数据格式移动端是否可正常使用。

6、第三方数据存储——与第三方合作项目,信息展示相反。测试需要注意的:与第三方合作不能放过任何一个数据一致性的确认。

7、时间戳的局限性:后台配置用户的某些功能的时间格式使用整型存储的时间戳且超过最大值,代码逻辑判断异常。测试需注意的:如需要使用超过整型最大值的时间值,可提议开发不要使用时间戳类型。

8、vip页面新增钻石兑换按钮,点击后在当前页打开h5商城页,在饰品购买框中点击充值无法外跳浏览器打开充值h5页面认为app中以h5形式嵌入的页面,存在新老webview事件定义方式不一致的情况,需要关注app内不同webview下的兼容性。

9、闪退问题汇总:a.接口数据格式与移动端不符;b.重新请求页面的时候,点击未摧毁的老数据;c.动画效果或透明效果在某些版本不兼容;d.资源过大导致的内存泄漏;e.客户端做过多页面元素的处理导致的内存泄漏;

10.app内嵌webview的缓存问题:当app使用内嵌webview时,如果多个场景都要用到登录态(如steam登录态),而多个场景登录态有效性所依赖的数据又不太一样时,可能会由于浏览器缓存导致场景a的登录态只能部分覆盖场景b的登录态,导致场景b的登录态信息无法重新获取但又不生效。

11.订单计费问题:在考虑订单扣费问题时,需要所有订单生成因素考虑进去(包括选取一个机器人进行的多件饰品取回、选取多个机器人的多件相同饰品取回、选取多个机器人的多件不同饰品取回、选取一个机器人的1件饰品取回),否则容易出现订单扣费错误。

12.问题的产生可能并不在上一步,而是在上很多步。任何变化因素都有可能导致bug的产生,因此用例设计需要考虑的可能远远超过你所能想到的。

13.redis缓存同样需要测试,否则容易导致即时数据正确,但缓存错误导致的错误的发生。

14.视频直播流地址存在时间戳参数时,具有时效性,需要不断更新解析,否则会出现无法播放的情况。

15.对于数据库的增删改查的测试不应只停留在操作本身,有时候需要将原始数据的生成考虑进去,比如基于某一个原始数据的改操作,如果原始数据本来是没有的,是否还能修改成功?

16.如果一个产品的业务逻辑在设计上有漏洞,被用户利用,是一件很恐怖的事情。比如一些猜测类的业务,如果猜测动作可以发生在猜测结果展示之后,就会成为一个漏洞。

17.存在app内嵌入的h5页面有实时刷新的动态信息时,要注意切换到app后台或锁屏后再次唤起后,页面实时信息是否还能继续正常刷新展示。

18.中断app使用流程的不止有应用页面上的各种按钮,还有杀死app。

19.对于组合数据,需要确认各个被组合元素是否存在为空的情况,如果存在为空的情况需要确认为空的数据是否会给前端带来意想不到的错误。

20.随机数可大可小,需要注意随机数范围和应用场景。一些用户身份校验机制中经常需要带随机数来加密和解密,如果加密的随机数超过解密的范围,就会出现信息落库不正确异常。也有随机数用来表示一些数量时,就需要加一些控制逻辑,而不是完全意义的随机(一会大一会小)就可能闹出笑话。

21.用例也需要测试和修复bug如最近整理和归纳出的:用例设计容易缺失的 交互部分、手机按钮操作、操作结果提示、非第一次(包括前端或后端常驻进程)、接口测试用例、并发请求、网络、某一种权限被限制后不影响其他权限使用、不同的操作对象(数据)、不同权限的操作者、不同登录状态、界面元素的不同边界、多用户在同一场景的互动、状态切换后的操作(场景)、确认前后端逻辑触发时机。

22.非自己测试的vip周返利项目中,仅通过mock领取按钮是否可点的参数为是,点击按钮对未实际产生预测流水的用户,是否可以领取成功,发现领取接口未做任务状态的再次校验,导致只要通过mock可以每人每周至少可以领取90+210+400+650四挡任务总计1350钻石的漏洞。

最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 141,232评论 1 296
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 60,610评论 1 254
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 93,049评论 0 210
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 40,691评论 0 171
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 48,375评论 1 250
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 38,571评论 1 169
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 30,262评论 2 266
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 29,036评论 0 163
  • 想象着我的养父在大火中拼命挣扎,窒息,最后皮肤化为焦炭。我心中就已经是抑制不住地欢快,这就叫做以其人之道,还治其人...
    爱写小说的胖达阅读 28,781评论 6 225
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 32,394评论 0 211
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 29,154评论 2 212
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 30,470评论 1 222
  • 白月光回国,霸总把我这个替身辞退。还一脸阴沉的警告我。[不要出现在思思面前, 不然我有一百种方法让你生不如死。]我...
    爱写小说的胖达阅读 24,151评论 0 31
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 27,023评论 2 210
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 31,376评论 3 201
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 25,579评论 0 8
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 25,926评论 0 163
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 33,342评论 2 227
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 33,466评论 2 229