BT

如何利用碎片时间提升技术认知与能力? 点击获取答案

一次敏捷测试的实战

| 作者 Mark Levison 关注 0 他的粉丝 ,译者 金毅 关注 0 他的粉丝 发布于 2010年5月30日. 估计阅读时间: 5 分钟 | GMTC大前端的下一站,PWA、Web框架、Node等最新最热的大前端话题邀你一起共同探讨。

据Matt Heusser说,Gerald Ford国际机场的停车场计费器像个老爷车。于是他给全世界的测试人员提出了一个挑战:找出这个停车场计费器的缺陷。通过twitter和博客,许多人去测试这一应用程序。在往下看之前,建议你先花几分钟来看看自己能找到多少缺陷。

敏捷测试教练Selena Delesie从日期和时间这几个字段的边界值入手。

只玩了几分钟,我一天内短时间停车的账单就达到了6,750,000.00美元的。……

下面看到的是,通过在“离开时间”这一字段进一步尝试简单的超限设置,我的费用竟攀升至2,500,000,000,000,041.00美元。值得注意的是,这只是我一天内的停车?不可思议。

Sample Error from Selena Delesie

一名在Philippines工作的软件测试人员KC注意到,如果你尝试用页面的默认值做计算,在错误被覆盖之前,会有一个含php错误信息的页面跳出来。其它测试参与者们则发现,这个错误在每次页面加载时都会出现,而页面仅仅忽略了此异常。

形形色色的人都来玩这个程序,他们都想看看最高能获得多少停车费。比较好玩的是,Matt最初提出的挑战后面有一系列跟帖,这是大家共同努力的结果。随着新帖对前人记录的不断刷新,对根本问题的洞察也进一步浮现出来。 

Alain Bohon发现了一些有趣的事情,停车计费器认为这些例子是有效的:

    • 我如果在同一天的上午6点到达,并在上午3点离开,就不用付钱!
    • 我改主意了,决定在4/4/10晚上27点到达,并可以在4/13/10早上-6点离开,哇!
    • 事实上,我能在12.5555点到达,在13.00004点离开么……我猜我能。

Peter Haworth-Langford发现,最初的异常来源于mktime()这个方法。了解了此方法所调用的参数,他着手创建一些新的测试来看看是否能找到另外的缺陷。 

Dr. Meeta Prakash观察到,这个应用程序能接受任何输入,包括许多边界外的输入都可以接受。 

Matt发现,在经济停车场第7天的停车好像是免费的,程序计算出来的结果是停7天更加便宜:停车6天又3小时是60美元,而停7天只要54美元!多停了一天还省了6美元。

有几个人还发现日期选择框有时显示不了,Matt说:

日 期选择框的代码会触发它弹出,但如果它已经“弹出”了,就什么都不做。呃,但有个用户交互的问题。如果我点弹出(让它显示),随后点回程序窗体,那么日期 选择框就到了浏览器后面。接下来我再点显示弹出框,业务逻辑会认为“嘿,弹出框已经弹出了”,于是没反应——然而用户可不明白这些。甚至刷新或者重新提交 页面之后,仍旧没反应。

很多人提出了这一点,但大多数只是注意到了症状,缺乏重现步骤或操作范例。……如果最佳缺陷报告有奖金的话,我打赌有了重现步骤一定会好很多。 

最后,Selena概括了测试过程中发现的缺陷:

  • 在日期和时间框可以输入任意数据,无限制。
  • 可以申请任意时间的短时停车,无限制。
  • 在有些情况下,如果离开日期比开始停车日期晚很多的话,计费会减少(当所有其他因素保持不变时)。
  • 如果输入很大的数字(大约10位或更多),时间框里的数据对计费的影响会超过日期框里的数据。
  • 在日期和时间框里允许输入负数,并且能够计费。
  • 在日期和时间框里允许输入字母,并且能够计费。
  • 在日期和时间框里允许输入符号,并且能够计费。
  • 我猜你可以在输入框里写一段php脚本来做点儿有趣的事(可能的安全性问题?),可惜我现在已经不写php了。
  • 在日期和时间框的每个数据输入处都发现了边界问题。对每个在(X:X,X/X/X)里的X点,多加一位数字就会导致计费出错,而且再多加一位会导致计费结果比前一次低。
  • 假设开始日期=离开日期,且开始时间>离开时间,在开始<=11:59,离开>= 0:59(都是am,或都是pm)的情况下,超过一天就能免费停车。这会导致停车天数为负值。

我的最高计费?5,014,609,699,998,504.00美元(对2.08942070833E+14天,14小时,47.4666666667分钟)。

启示:

  •  三个臭皮匠,顶一个诸葛亮。
  •  对于测试人员而言,跳出日常工作在其它地方练练手、磨磨刀是很好的锻炼。
  • 开发人员则可以通过阅读遇到的问题,考虑在自己的代码中是否也存在类似的问题。

参见英文原文: Agile Testing Challenge

评价本文

专业度
风格

您好,朋友!

您需要 注册一个InfoQ账号 或者 才能进行评论。在您完成注册后还需要进行一些设置。

获得来自InfoQ的更多体验。

告诉我们您的想法

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我
社区评论

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我

允许的HTML标签: a,b,br,blockquote,i,li,pre,u,ul,p

当有人回复此评论时请E-mail通知我

讨论

登陆InfoQ,与你最关心的话题互动。


找回密码....

Follow

关注你最喜爱的话题和作者

快速浏览网站内你所感兴趣话题的精选内容。

Like

内容自由定制

选择想要阅读的主题和喜爱的作者定制自己的新闻源。

Notifications

获取更新

设置通知机制以获取内容更新对您而言是否重要

BT