《天天超市管理系统》测试计划
超市管理系统测试目标: 技术: 完成标准: 需考虑的特殊事项: 核实以下内容: 通过超市管理系统测试进行的浏览可正确反映业务的功能和需求,这种浏览包括窗口与窗口之间、字段与字段之间的浏览,以及各种访问方法(Tab键、鼠标移动、和快捷键)的使用窗口的对象和特征(例如,菜单、大小、位置、状态和中心)都符合标准。 为每个窗口创建或修改超市管理系统测试,以核实各个应用程序窗口和对象都可正确地进行浏览,并处于正常的对象状态。 成功地核实出各个窗口都与基准版本保持一致,或符合可接受标准。 并不是所有定制或第三方对象的特征都可访问。 表2-6 用户界面测试说明表
(6)性能评测
性能评测是一种性能超市管理系统测试,它对响应时间、事务处理速率和其他与时间相关的需求进行评测和评估。性能评测的目标是核实性能需求是否都已满足。实施和执行性能评测的目的是将超市管理系统的性能行为当作条件(例如工作量或硬件配置)的一种函数来进行评测和微调。性能评测说明表如表2-7所示。
注:以下所说的事务是指“逻辑业务事务”。这种事务被定义为将由系统的某个Actor通过使用超市管理系统来执行的特定用例,添加或修改给定的合同。
超市管理系统 核实所指定的事务或业务功能在以下情况下的性能行为: 测试目标: 技术: 正常的预期工作量。 预期的最繁重工作量。 使用为功能或业务周期超市管理系统测试制定的超市管理系统测试过程。 通过修改数据文件来增加事务数量,或通过修改脚本来增加每项事务的迭代数量。 脚本应该在一台计算机上运行(最好是以单个用户、单个事务为基准),并在多个客户机(虚拟的或实际的客户机,请参见下面的“需要考虑的特殊事项”)上重复。 需考虑的特殊事项: 综合的性能超市管理系统测试还包括在服务器上添加后台工作量。 可采用多种方法来执行此操作,其中包括: 直接将“事务强行分配到”服务器上,这通常以“结构化语言”(SQL)调用的形式来实现。 通过创建“虚拟的”用户负载来模拟许多个(通常为数百个)客户机。此负载可通过“远程终端仿真(Remote Terminal Emulation)工具来实现。此技术还可用于在网络中加载“流量”。 使用多台实际客户机(每台客户机都运行超市管理系统测试脚本)在系统上添加负载。 性能超市管理系统测试应该在专用的计算机上或在专用的机时内执行,以便实现完全的控制和精确的评测。 性能超市管理系统测试所用的数据库应该是实际大小或相同缩放比例的数据库。 表2-7 性能评测说明表
5
《天天超市管理系统》测试计划
(7)负载测试
负载超市管理系统测试是一种性能超市管理系统测试。在这种超市管理系统测试中,将使超市管理系统承担不同的工作量,以评测和评估超市管理系统在不同工作量条件下的性能行为,以及持续正常运行的能力。负载超市管理系统测试的目标是确定并确保系统在超出最大预期工作量的情况下仍能正常运行。此外,负载超市管理系统测试还要评估性能特征,例如,响应时间、事务处理速率和其他与时间相关的方面。负载测试如表2-8。
注:以下所说的事务是指“逻辑业务事务”。这各事务被定义为将由系统的某个最终用户通过使用应用程序来执行的特定功能,例如,添加或修改给定的合同。
超市管理系统测试目标: 核实所指定的事务或商业理由在不同的工作量条件下的性能行为时间。 技术: 使用为功能或业务周期超市管理系统测试制定的超市管理系统测试。 通过修改数据文件来增加事务数量,或通过修改脚本来增加每项事务发生的次数。 完成标准: 需考虑的特殊事项: 多个事务或多个用户:在可接受的时间范围内成功地完成超市管理系统测试,没有发生任何故障。 负载超市管理系统测试应该在专用的计算机上或在专用的机时内执行,以便实现完全的控制和精确的评测。 负载超市管理系统测试所用的数据库应该是实际大小或相同缩放比例的数据库。 表2-8 负载测试说明表
(8)强度测试
强度超市管理系统测试是一种性能超市管理系统测试,实施和执行此类超市管理系统测试的目的是找出因资源不足或资源争用而导致的错误。如果内存或磁盘空间不足,超市管理系统就可能会表现出一些在正常条件下并不明显的缺陷。而其他缺陷则可能由于争用共享资源(如数据库锁或网络带宽)而造成的。强度超市管理系统测试还可用于确定超市管理系统能够处理的最大工作量。强度测试如表2-9。
超市管理系统测试目标: 核实超市管理系统能够在以下强度条件下正常运行,不会出现任何错误: 服务器上几乎没有或根本没有可用的内存(RAM和DASD) 连接或模拟了最大实际(实际允许)数量的客户机 多个用户对相同的数据或帐户执行相同的事务 最繁重的事务量或最差的事务组合(请参见上面的“性能超市管理系统测试”)。 注:强度超市管理系统测试的目标可表述为确定和记录那些使系统无法继续正常运行的情况或条件。 客户机的强度超市管理系统测试在“配置超市管理系统测试”的中进行了说明。
6
《天天超市管理系统》测试计划
技术: 使用为性能评测或负载超市管理系统测试制定的超市管理系统测试。 要对有限的资源进行超市管理系统测试,就应该在一台计算机上运行超市管理系统测试,而且应该减少或限制服务器上的RAM和DASD。 对于其他强度超市管理系统测试,应该使用多台客户机来运行相同的超市管理系统测试或互补的超市管理系统测试,以产生最繁重的事务量或最差的事务组合。 完成标准: 所计划的超市管理系统测试已全部执行,并且在达到或超出指定的系统限制时没有出现任何软件故障,或者导致系统出现故障条件的并不在指定的条件范围之内。 表2-9 强度测试说明表 (9) 容量测试
容量超市管理系统测试使超市管理系统处理大量的数据,以确定是否达到了将使软件发生故障的极限。容量超市管理系统测试还将确定超市管理系统在给定时间内能够持续处理的最大负载或工作量。例如,如果超市管理系统正在为生成一份报表而处理一组数据库记录,那么容量超市管理系统测试就会使用一个大型的超市管理系统测试数据库。检验该软件是否正常运行并生成了正确的报表。容量测试如表2-10。
核实超市管理系统在以下高容量条件下能否正常运行: 连接或模拟了最大(实际或实际允许)数量的客户机,所有客户超市管理系统测试目标: 机在长时间内执行相同的、且情况(性能)最坏的业务功能。 已达到最大的数据库大小(实际的或按比例缩放的),而且同时执行多个查询或报表事务。 技术: 使用为性能评测或负载超市管理系统测试制定的超市管理系统测试。 应该使用多台客户机来运行相同的超市管理系统测试或互补的超市管理系统测试,以便在长时间内产生最繁重的事务量或最差的事务组合(请参见上面的“强度超市管理系统测试”) 创建最大的数据库大小(实际的、按比例缩放的、或填充了代表性数据的数据库),并使用多台客户机在长时间内同时运行查询和报表事务。 所计划的超市管理系统测试已全部执行,而且达到或超出指定的系统限制时没有出现任何软件故障。 表2-10 容量测试说明表 完成标准: (10)安全性和访问控制测试
安全性和访问控制超市管理系统测试侧重于安全性的两个关键方面(如表2-11所示):
(1)应用程序级别的安全性,包括对数据或业务功能的访问。 (2)系统级别的安全性,包括对系统的登录或远程访问。
应用程序级别的安全性可确保:在预期的安全性情况下,Actor只能访问特定的功能或用例,或者只能访问有限的数据。例如,可能会允许所有人输入数据,创建新帐户,但只有管理员才能删除这些数据或帐户。如果具有数据级别的安全
7
《天天超市管理系统》测试计划
性,超市管理系统测试就可确保“用户类型一”能够看到所有客户消息(包括财务数据),而“用户二”看见同一客户的统计数据。
系统级别的安全性可确保只有具备系统访问权限的用户才能访问应用程序,而且只能通过相应的网关来访问。
应用程序级别的安全性:核实Actor只能访问其所属用户类型已超市管理系统测试目标: 被授权访问的那些功能或数据。 系统级别的安全性:核实只有具备系统和应用程序访问权限的Actor才能访问系统和应用程序。 技术: 应用程序级别的安全性:确定并列出各用户类型及其被授权访问的功能或数据。 为各用户类型创建超市管理系统测试,并通过创建各用户类型所特有的事务来核实其权限。 修改用户类型并为相同的用户重新运行超市管理系统测试。对于每种用户类型,确保正确地提供或拒绝了这些附加的功能或数据。 系统级别的访问:请参见以下的“需考虑的特殊事项”。 完成标准: 各种已知的Actor类型都可访问相应的功能或数据,而且所有事务都按照预期的方式运行,并在先前的应用程序功能超市管理系统测试中运行了所有的事务。 表2-11 安全性和访问控制测试说明表
(11)故障转移和恢复测试
故障转移和恢复超市管理系统测试可可确保超市管理系统能成功完成转移,并能从导致意外数据损失或数据完整性破坏的各种硬件、软件可网络故障中恢复。
故障转移超市管理系统测试可确保:对于必须持续运行的系统,一旦发生故障,备用系统就将不失时机地“顶替”发生故障的系统,以避免丢失任何数据或事务。
恢复超市管理系统测试是一种对抗性的超市管理系统测试过程。在这种超市管理系统测试中,将把应用程序或系统置于极端的条件下(或者是模拟的极端条件下),以产生故障(例如设备输入/输出(I/O)故障或无效的数据库指针和关键字)。然后调用恢复进程并监测和检查应用程序和系统,核实应用程序或系统和数据已得到了正确的恢复。如表2-12所示。
确保恢复进程(手工或自动)将数据库、应用程序和系统正确地恢复到预期的已知状态。 超市管理系统测试中将包括以下各种情况: 超市管理系客户机断电 统测试目标: 服务器断电 通过网络服务器产生的通信中断 DASD和/或DASD控制器被中断、断电或与DASD和/或DASD控制器的通信中断 周期未完成(数据过滤进程被中断,数据同步进程被中断)。 数据库指针或关键字无效 数据库中的数据元素无效或遭到破坏
8
《天天超市管理系统》测试计划
技术: 应该使用为功能和业务周期超市管理系统测试创建的超市管理系统测试来创建一系列的事务。一旦达到预期的超市管理系统测试起点,就应该分别执行或模拟以下操作: 客户机断电:关闭PC机的电源。 服务器断电:模拟或启动服务器的断电过程。 通过网络服务器产生的中断:模拟或启动网络的通信中断(实际断开通信线路的连接或关闭网络服务器或路由器的电源)。 DASD和DASD控制器被中断、断电或与DASD和DASD控制器的通信中断:模拟与一个或多个DASD控制器或设备的通信,或实际取消这种通信。 一旦实现了上述情况(或模拟情况),就应该执行其他事务。而且一旦达到第二个超市管理系统测试点状态,就应调用恢复过程。 在超市管理系统测试不完整的周期时,所使用的技术与上述技术相同,只不过应异常终止或提前终止数据库进程本身。 对以下情况的超市管理系统测试需要达到一个已知的数据库状态。当破坏若干个数据库字段、指针和关键字时,应该以手工方式在数据库中(通过数据库工具)直接进行。其他事务应该通过使用“应用程序功能超市管理系统测试”和“业务周期超市管理系统测试”中的超市管理系统测试来执行,并且应执行完整的周期。 在所有上述情况中,应用程序、数据库和系统应该在恢复过程完成时立即返完成标准: 回到一个已知的预期状态。此状态包括仅限于已知损坏的字段、指针或关键字范围内的数据损坏,以及表明进程或事务因中断面未被完成的报表。 需考虑的特殊事项: 恢复超市管理系统测试会给其他操作带来许多的麻烦。断开缆线连接的方法(模拟断电或通信中断)可能并不可取或不可行。所以,可能会需要采用其他方法,例如诊断性软件工具。 需要系统(或计算机操作)、数据库和网络组中的资源。 这些超市管理系统测试应该在工作时间之外或在一台独立的计算机上运行。 表2-12 故障转移和恢复测试说明表
(12) 配置测试
配置超市管理系统测试核实超市管理系统在不同的软件和硬件配置中的运行情况。在大多数生产环境中,客户机工作站、网络连接和数据库服务器的具体硬件规格会有所不同。客户机工作站可能会安装不同的软件 例如,应用程序、驱动程序等 而且在任何时候,都可能运行许多不同的软件组合,从而占用不同的资源。配置测试如表2-13所示。
超市管理系统测试目标: 技术: 使用功能超市管理系统测试脚本。 在超市管理系统测试过程中或在超市管理系统测试开始之前,打开各种与非超市管理系统相关的软件(例如Microsoft应用程序:Excel和Word),然后将其关闭。 执行所选的事务,以模拟Actor与超市管理系统软件和非超市管理系统软件之间的交互。 重复上述步骤,尽量减少客户机工作站上的常规可用内存。 核实超市管理系统测试可在所需的硬件和软件配置中正常运行。 9