从测试人员的角度上来讲,由工程师直接附上测试指导书虽然省事,但是并不理想,最好是由测试人员根据产品情况,列举出值得检测的地方,主动向工程师请教,双方进行讨论后再决定测试内容——如果时间允许的话。
知其然也要知其所以然,才有利于更准确,更合理地进行测试,也有利于积累经验和技术,对于职业的长期发展是至关重要的。
请注意,测试人员不要养成一个非常不好的习惯,就是拿到待测试的样品后什么都不考虑,直奔开发人员那里索要测试指导书,拿到测试指导书后就照本宣科地进行测试,这是非常不负责任的行为,对于测试人员以后的发展也是非常不好的。
拿到产品之后先想一想,在没有任何资料的前提下先自己摸索一下这款产品的设计思路,预期功能,可能会存在的缺陷等,然后再对照项目组或工程师提供的资料进一步确认,在心中有个底之后再请教开发工程师,把测试内容给理解透彻——注意,记得要以请教的心态而不要以索要的心态。
2.产品的可用与否并不仅仅是由测试人员判定的 如上所述,测试是一个求证过程,检验过程,是在已有的条件下做出各种尝试,以验证产品的功能点,并挖掘产品的缺陷点。
测试人员所发现的缺陷点,反馈到开发人员处后,有的或许能得到改善,有的则未必需要改善,还有的则未必能够改善——基于需求,技术,成本,市场等诸多因素的考虑,这是无可厚非的,因为开发并不是理想化的,不能因为缺陷点未改善而否决一款产品。
‘这个东西不行,这样的东西简直就是垃圾!’——作为测试人员,千万不要说出类似这样的,带有自以为是意味的话。测试人员并不能决定产品的可用与否,事实上开发人员同样不能决定,做出这个判决的应该是客户,准确点来说应该是客户的需求。
有一款迷你小音箱的产品,由于产品的定位是可以挂在钥匙扣上的,方便携带用的,所以结构上限制了产品的喇叭尺寸,也就限制了这款小音箱的音量和音质。
当时有两位客户对这款小音箱感兴趣,其中一个客户在看过产品之后,指出音箱音量太小,要改善。
于是工程师做出了改进,牺牲了部分音质,把音量给加大了一些,在改善之后我们又重新给两位客户寄出了样品。
提出音量太小的客户收到样品很满意,而另一位客户却很惊异地问我们,为什么这一次送样的音箱的音质变差了?之前的那一款挺好的啊。
说到这里大家应该都知道后续我们是怎么做的了——这款小音箱保留了两个方案,一款音量稍小,音质稍好;一款音量稍大,音质稍次些,然后不同的方案交付给不同需求的客户。
想想,如果在开发中将音箱交给测试人员来检测,测试人员该怎么判定?
这个方案的音量太小,ng;这个方案的音质太差,ng。
这样的判定合理吗?
本来嘛,这就是事实啊,凭什么不能这么判定呢?
偷偷的告诉你,开发任何产品,咱们说了不算,客户说了才算,除非这产品是为你自己开发的——如果是这样,你不就是这款产品的客户么?还是客户说了算。
发现缺陷点是客观认知,而否决产品通常是个人的主观意识决定的,个人的判断往往是片面的,也许你认为不能接受的缺陷在客户的接受范围内,反之亦然。
当然,如果缺陷点严重到已经影响产品的正常使用,已经违背了客户的需求,那么,这款产品理应做出改善,作为测试人员提交一份报告,表示产品并未达到项目计划的要
求即可。说出否决产品的话实际上也否决了开发人员所付出的辛勤工作,不管是有心还是无意。
可能很多人认为,测试就是质检,是产品流向市场之前的最后一道关口,不过,就我个人的理解,测试着眼于改善产品,是开发流程中一个不可或缺的过程,与质检不同的是,质检是根据指标判定产品是良品还是不良品,而测试是根据指标判定产品缺陷,反馈回项目组进行改善。
测试是开发流程中的环节,产品还未成型,改善产品是最重要的。
质检是生产过程中的环节,产品已经定型,控制出货良品率是最重要的。
对产品的缺陷进行追踪是测试人员的本职工作,至于缺陷是否需要改善,产品是否可以交付给客户或流向市场,测试人员可以提出自己的看法和建议,仅此而已。
3.测试要准确而详细地记录测试过程
测试是个很繁琐的事情,测试过程是非常考验人的细心和耐心程度的。
问题往往就发生在未知的地方——这句话并不意味着在已知的地方就不会出现问题。
有的测试人员可能会自持经验丰富,凭经验办事,这是测试工作的大忌!同样的用例,用在不同的产品上,判定的标准可能截然相反,不要想当然地凭感觉和经验办事。你可以参考之前的案例,但是每一次测试都应该当做新的测试来做,这样才能保证测试工作的准确性。
以下是我亲身经历的两次案例。
1.索尼的ps3主机有一次升级版本时,对未经过官方认证的蓝牙设备做出了一些限制,之前版本可以顺利使用的三款产品在主机升级版本后出现了一些问题。
问题现在已经解决了——这不重要,我这里想要说的是,这三款产品依照未升级的游戏主机来测试是完全没有问题的,如果我没有及时更新我的测试环境,还是以未升级的游戏主机进行测试,那就不会发现这些问题,等产品上线生产,或者是顺利出货到客户手上再发现问题,那么补救所需要付出的代价是非常大的。
2.有一款产品是用在ps3主机上的ps3手柄充电器,这款产品需要连接ps3主机上的两个usb接口进行供电。
为什么?因为如果先连接充电器,再连接ps3主机的话,充电电流很小,小到几乎可以判定为不能充电。
就因为先接这头还是先接那头,就能产生截然不同的两个结果,在接触这个案例之前我都没有意识到,也是在这之后,对于自己测试过程中的每一个操作步骤,每一个细节都留上了心。
细心一点,耐心一点,很多缺陷其实是可以被发现的。
准确地记录测试过程这点也许大部分人都能理解,但是详细地记录则未必都能做到。其实在有的时候,相同的输入,仅仅是因为操作的细微差别,就会导致产品输出不同的结果(其实这就是测试所要找出的问题点),当你记录的时候敷衍了事,发现问题再想回放问题的时候,往往会无处下手,不得不重新进行测试,这才是费时又费力。
小小地吐槽一下:测试工作真的很磨蹭人,如果不是对品质精益求精到有些偏执,如果不是极具耐心,非常注重细节的话,很难把测试工作做得非常到位。