什么是应用程序测试?

⚡ 智能摘要

应用测试验证的是整个软件产品,而非单个单元,它涵盖界面、功能、数据库和负载行为。本页将介绍应用产品的四阶段生命周期、三种测试方法、测试计划、工具、指标以及移动端专属的测试实践。

  • 🎯 定义: 应用程序测试会在发布前检查整个应用程序,以发现错误。
  • 🪜 四个阶段: 根据需求进行规划,构建用例和脚本,运行功能测试,然后运行负载测试。
  • 🧩 三个部分: Web、桌面和移动应用程序分别需要不同的测试类型组合。
  • ⬛ 方法论: 黑盒测试、白盒测试和灰盒测试分别针对行为、代码和结构。
  • 🚪 进入和退出标准: 双方商定的条件决定了测试何时开始和何时结束。
  • 📈 指标: 缺陷密度、测试覆盖率和缺陷泄漏率可以显示测试是否有效。
  • 📱 移动端聚焦: 移动测试主要受碎片化、安装路径和物理设备有限等问题的影响。

什么是应用测试

什么是应用程序测试?

应用程序测试是一种通过脚本进行的软件测试类型,目的是查找软件中的错误。它涉及整个应用程序的测试。

它有助于提高应用程序的质量,同时降低成本、最大化投资回报率并节省开发时间。

在软件工程中,应用程序测试可以在各种类别中进行,例如 GUI、功能、数据库(后端)、负载测试等。

对于应用程序测试,测试生命周期涉及各个阶段,包括需求分析、测试计划、测试分析、测试设计、测试执行和错误报告等。

这些阶段最终会形成一个简短、可重复的生命周期,每个应用程序都遵循这个生命周期。

如何测试应用程序?

软件应用程序和产品在支持的功能以及实施的流程方面存在许多差异。因此,应用程序测试可确保特定程序或应用程序正常运行。

测试应用程序

应用程序测试的生命周期涉及四个阶段。

  • 阶段1) 根据应用需求设计测试计划
  • 阶段2) 开发手动测试用例和自动化测试脚本
  • 阶段3) 执行功能测试以验证应用程序要求
  • 阶段4) 执行负载测试并调整应用程序性能

执行的测试类型取决于被测试应用程序的类型。应用程序测试分为 3 个部分。

  • Web 应用程序测试
  • 桌面应用程序测试
  • 移动应用测试
应用测试 执行的测试类型
  • 网络应用测试
  • 功能和 性能测试
  • 跨浏览器测试
  • 负载和压力测试
  • 回归与合规性测试
  • 用户验收测试
  • Beta测试
  • 探索性测试和冒烟测试
  • 多语言支持和兼容性测试
  • 桌面应用程序测试
  • 界面测试
  • 可用性测试
  • 性能测试
  • 兼容性测试(软件/硬件)
  • 功能测试
  • 安全测试
  • 移动应用测试
  • 界面测试
  • 基于规则的测试
  • 迭代测试
  • 功能测试
  • 安全测试

Web、桌面和移动应用程序测试对比

这三个环节共享生命周期,但实际出现故障的环节却截然不同。了解风险集中在哪里,就能决定测试预算的分配方向。

不同点 网上 桌面 电话
继续 通过网络访问浏览器 一台已安装的机器 手机或平板电脑
主要变量 浏览器和版本 Opera系统和硬件 设备、操作系统版本和屏幕尺寸
网络依赖性 始终连接 经常离线 间歇性的,且必须在损失后幸存下来
最大风险 跨浏览器渲染和加载 安装和兼容性 设备间的碎片化
中断处理 很少相关 很少相关 来电、通知和低电量
更新路径 服务器端,即时可用 用户安装补丁 应用商店审核,分阶段推出

移动端包含最多不可控变量,因此本页稍后将单独讨论移动端。

应用程序测试方法

测试方法论是确保软件应用程序得到全面测试的结构化方式。缺乏条理且不完善的测试方法论会导致产品不稳定。

测试有三种方法进行。

  • 黑色 Box 测试与验证
  • 白色 Box 测试与验证
  • 灰色 Box 测试与验证

黑色 Box 测试与验证

黑色 Box 测试与验证 技术通常用于测试 功能测试、非功能测试、 以及回归测试。在黑盒测试中,使用的策略有:

  • 等价类测试
  • 边界值测试
  • 决策表测试
  • 状态转换表

白色 Box 测试与验证

白盒测试 白盒测试通常用于测试软件代码,以检查内部安全漏洞、损坏或结构不良的路径、条件循环的功能等。白盒测试中使用的策略包括:

  • Code 覆盖率分析
  • 路径覆盖

灰色 Box 测试与验证

这种测试技术是黑色和 Box 测试以及白盒测试。进行这些测试是为了发现问题。 缺陷 基于不适当的结构或应用程序使用。

应用程序测试的测试计划

此 测试计划 文档源自产品 Description,软件需求规范SRS,或用例文档。测试的重点是测试什么、如何测试、何时测试以及由谁来测试。测试计划文档用作测试团队和测试经理之间的沟通媒介。

应用程序测试的标准测试计划应定义以下特征;

  • 定义测试范围
  • 定义测试目标
  • 测试活动的方法
  • 测试时间表
  • 问题 trac国王和报道

应用程序测试的准入和退出标准

测试计划中列出了正式的准入和退出标准,这是最佳实践,但这些标准值得明确阐述。如果没有这些标准,测试阶段要么会从一个不稳定的版本开始,要么会漫无目的地进行,没有明确的结束点。

入学标准 必须在执行开始前满足这些条件。

  • 需求和SRS经过审查和基准化。
  • 测试计划和测试用例已编写并获得批准。
  • 该版本已部署到稳定的测试环境中,并通过了冒烟测试。
  • 测试数据和所需的帐户或设备均已准备就绪。
  • 缺陷 tracKing 工具已配置完成,团队拥有访问权限。

退出标准 表明该阶段已达到其目的。

  • 所有计划的测试用例均已执行,结果已记录。
  • 所有严重或高危缺陷均已解决。
  • 已达到约定的要求覆盖范围。
  • 剩余的低严重性缺陷均已记录在案并被业务部门接受。
  • 测试总结报告已签字确认。

应用程序测试工具

有多种测试工具可用于应用程序测试。工具的选择取决于您要执行的测试类型。对于不同的平台,建议使用不同的工具。应用程序测试工具可确保应用程序在各种设备上的性能、可用​​性和功能。

以下仅列举其中几个。

💡注意: IBM Rational Robot(曾与 RFT 并列销售)已停止销售。Rational Functional Tester 是目前的替代产品。 IBM 因此,新项目不应围绕 Robot 进行规划。

应用程序测试的关键指标

执行测试只能证明测试活动正在进行,而不能证明测试效果。少量指标即可显示测试是否真正发现了缺陷,以及应用程序是否正在接近发布质量标准。

  • 测试覆盖率: 至少有一个已映射测试用例的需求占比。低覆盖率意味着未测试的功能,无论通过率如何显示。
  • 缺陷密度: 缺陷按规模划分,通常以每千行代码或每个模块为单位。它指出了需要返工的组件,而不是需要更多测试的组件。
  • 缺陷泄漏: 生产过程中发现的缺陷数除以发现的缺陷总数。缺陷泄漏率上升是预发布测试存在疏漏的最明显信号。
  • 缺陷去除效率: 发布前发现的缺陷占所有缺陷的比例。通常的目标是高于 90%。
  • 测试执行率: 案件与计划中的案件进行对抗, trac每个循环中都会出现滑移,因此滑移会在早期而不是在出口处显现出来。

Trac应该关注趋势,而不是单一的读数。孤立的一个周期说明不了什么问题。

应用程序测试的测试最佳实践

选择正确的应用程序测试策略是检测应用程序缺陷的可靠方法。因此,QA 团队遵循一套标准流程以在更短的时间内检测出更多错误变得极为重要。

对于应用程序测试,一些最佳实践包括

  • 定义功能规范
  • Rev审查和检查
  • 正式进入和退出标准
  • 功能测试变体
  • 多平台测试
  • 自动测试执行

应用程序测试挑战

在测试应用程序的过程中,测试人员可能会遇到许多挑战。

  • 仅当用户致电时才发现问题
  • 无法预测变化的影响
  • 无法查看应用程序和操作错误
  • 耗时的

移动应用测试

就像 Web 应用程序测试一样, 电话 应用程序测试也基于相同的测试策略和方法。区别可能在于所使用的测试工具,一些常用的移动应用程序测试工具包括: Appium, TestComplete, Robotium和 Espresso.

移动应用类型分为三类

  • Web 应用程序- 用户可以通过互联网或内联网等网络访问它
  • 本机应用程序-为特定平台开发并安装在计算设备上
  • 混合型应用程序——它结合了 Web 和原生应用的元素,例如 Facebook。

对于大多数移动平台,您可以使用简单的CSS,HTML,JS等。

移动应用程序测试的示例测试用例

完整的移动测试应用策略包括设备和网络基础设施、目标设备的选择以及手动和自动测试工具的有效组合,以覆盖 非功能性和功能性测试.

对于移动应用程序,需要测试的内容包括

  • 安装
  • OTA
  • Wi-Fi
  • 数据线
  • 蓝牙
  • 卸载
  • 应用标志
  • 溅
  • 记忆不足
  • 视觉反馈
  • 退出申请
  • 启动/重启应用程序

移动测试挑战

随着移动用户和设备数量的增加,移动应用测试变得越来越复杂。移动应用测试与桌面端 Web 应用测试有着显著的不同。移动应用测试中常见的挑战包括:

  • 全面的测试覆盖
  • 管理碎片(不同的操作系统版本、处理器、内存)
  • 缺乏测试计划
  • 时间压力
  • 缺乏物理设备
  • 平台和操作系统的多样性

常见问题

系统测试验证集成构建是否符合规范。应用测试则更为广泛,它涵盖对已完成应用的接口、功能、数据库和负载等方面的全面测试,通常会持续到验收阶段。

只关注分析数据中显示真实用户使用的设备,而不是最新款的手机。一种常见的做法是,选取物理设备上流量排名前十的设备,并在云端设备集群中覆盖更广泛的操作系统和屏幕组合。

两者兼备。自动化稳定的回归测试、跨浏览器测试和负载测试,这些测试会在每个周期重复进行。探索性测试、可用性测试和一次性测试则保持手动执行,因为编写这些脚本的成本高于它们能够发现的缺陷本身。

是的。提供需求规格说明书(SRS)或用户故事后,AI助手会生成正面案例、负面案例和边界案例,并附上预期结果。测试负责人会在这些案例被纳入测试计划之前,根据需求列表进行审核。

部分如此。自愈定位器会在界面发生变化时重新识别元素,而人工智能可以将故障聚类,从而将真正的缺陷与时间噪声区分开来。但诸如缺少等待时间之类的根本原因仍然需要开发人员来修复。

总结一下这篇文章: