• 7
  • 7
分享

一、什么是测试自动化框架

自动化测试框架就是用于测试自动化的框架。具体来说,它提供了自动化测试用例编写、自动化测试用例执行、自动化测试报告生成等基础功能。我们只需要基于这个框架,完成和业务高度相关的测试用例设计和实现即可。另外,框架会为我们处理好复杂度与扩展性的问题,我们无需为此操心。

测试自动化框架是在创建和设计测试用例时使用的一组最佳实践或准则。

测试准则集可以包括编码标准,对象存储库,测试数据处理方法,有关外部存储访问的信息等。

这些准则并非强制,但是在自动化脚本过程中,它们提高了测试的效率并产生了有益的结果。

二、使用测试自动化框架的好处

1、更全的测试范围

2、降低脚本维护成本

3、节省人力成本

4、提高测试速度和效率

5、可重用的测试代

6、易于报告

根据需求使用适配的自动化测试框架有助于加快测试过程,并消除人为错误。它还使测试维护更加容易,加快测试进度,节省成本、时间和精力。此外,框架QA团队能够充分开发、执行和报告测试过程,同时还使代码可在多种情况下重用。

三、五种最流行的自动化测试框架类型

团队根据团队规模、经验水平、用户需求等因素来选择测试框架。以下是五种最流行的框架及其优缺点:

1、线性框架

这是最基本的框架类型。它通常被称为“记录和回放(record and playback)”框架。

在这个过程中,测试代码的创建和执行是按线性或顺序编写的——测试人员手动记录每一个步骤,并自动回放记录的脚本。这些步骤包括导航、用户输入和检查点。它最适合小型应用程序或团队。

在此过程中,测试代码的创建和执行以线性或顺序方式编写-测试人员手动记录每个步骤并自动播放记录的脚本。这些步骤包括导航,用户输入和检查点。最适合小型应用程序或小团队。

优点:

线性框架最大的好处是生成测试用例的速度快,直接录制;无须代码基础,无须手动编写测试代码,因此门槛较低、易于上手。

缺点:

然而线性框架的不足之处也很明显:录制的脚本是固定的(hardcode),不可重用。这意味着,当应用发生微小变化时,上一次录制的脚本可能就无法使用了,需要重新录制(rework),从而产生大量的后期维护成本。

2、基于模块化的框架

顾名思义,此框架允许将被测应用程序划分为单独的模块,单元或部分。每个模块都会为它们创建独立的测试脚本。因此,每个模块及其测试脚本的组合可以构建代表各种测试案例的更大的测试。

优点:

该框架在创建模块时使用抽象。因此,应用程序更改将只影响与它们相关联的测试脚本所涉及的模块,而不影响其他部分。

高度的模块化,这使得维护更加容易且具有成本效益

创建测试用例所需的精力最少,因为可以重复使用不同模块的测试脚本。

缺点:

如果没有语言开发基础,则建立框架可能会很困难。

由于将数据硬编码到测试脚本中,因此无法重复使用数据集——因为测试是单独执行的。

3、库结构框架

该库体系结构框架建立在模块化框架的基础上,但具有其他好处。这样做的好处是,它不仅可以将被测应用程序划分为测试脚本,还可以将测试脚本中的相似任务划分为通用功能。

然后创建一个库,该库构成了AUT的常用功能,可以在需要时由测试脚本调用。

优点:

高度的模块化,这使得测试维护简单且预算友好。

它具有高度的可重用性,因为它的公共函数库可以被几个测试脚本使用。

缺点:

框架中引入的库使其更加复杂。

测试数据也被硬编码到测试脚本中。因此,数据中的更改必须适用于测试脚本。

测试脚本的开发需要更多的时间和技术。

4、数据驱动框架

在数据驱动框架中,测试数据和测试脚本是分离的。在许多测试场景中,需要使用不同的测试数据多次测试同一功能或特性。如果测试数据是hardcode进测试脚本的,那么每更换一次测试数据都需要修改测试脚本。这是很大的工作量。此时,可以使用数据驱动框架。具体来说,测试脚本是固定的,而测试数据可以从外部的数据文件,以Excel、CSV、SQL等形式作为参数传入测试脚本。这样,我们只需要维护一份脚本和一份数据文件即可。

优点:

总体来说,这种框架最大的好处就是易于维护

测试脚本中的任何更改都不会影响测试数据。因此,可以避免对数据进行硬编码。

可以使用多组数据进行测试。

可以通过更改外部数据库中的测试数据来测试各种测试方案,从而减少所需的测试脚本数量。

缺点:

准备和计划框架的通用测试脚本,识别与格式化测试数据需要花费时间。

框架设计的使用需要经验丰富的测试人员,因为它的复杂性,需要具备多种编程语言知识。

5、关键字驱动框架

该框架是数据驱动框架的扩展。测试数据和测试脚本也被分离,不同的是,该框架要更进一步地将测试脚本中的通用功能剥离出来,形成关键词(keyword)。测试脚本本质上就是对一系列通用的或者自定义的关键词的调用。这样做的好处是关键词可以在多个测试中复用,并且测试脚本更加易于维护。不过,实现这样一个框架并非易事。

优点:

与数据驱动不同,运行此框架不需要脚本知识。

可以独立于被测应用程序构建测试脚本。

一个关键字可以在多个测试脚本中使用。因此该代码是可重用的。

缺点:

设计框架和维护关键字对自动化的专业知识要求比较高。

实现该框架的成本相对较高,而且设置起来也比较耗时和复杂。

综上所述,实现用于自动化测试的框架需要选择一种灵活的工具。该工具应支持广泛的应用程序,并满足测试要求。另外,应该有正确的策略来定义应该自动化哪些部分。

四、面对一个新的自动化测试框架,如何着手工作:

1、如何生成测试用例

不同的框架,生成测试用例的方法不一样。

对于线性框架来说,无须编写脚本,只需要点击预设的按钮就能够生成测试用例;比如Katalon,直接录制生成测试用例。

对于多数框架来说,生成测试用例需要编程。当然,不同框架使用的编程语言、编程风格有差异。

对于Selenium框架来说,使用的是通用编程语言Java和Python,可能更多的是对Selenium进行二次封装,以便更好更快的生成用例;

对于Robot Framework来说,使用的是其专用的Robot Framework编程语言。

一般来说,使用框架编程的过程很多时候就是调用库接口的过程。因此作为前提,在编写用例之前,我们需要熟悉框架提供的库的种类和功能,以及这些库所提供的API的使用方法。

2、如何执行测试用例?

当测试用例完成之后,我们需要运行测试用例。

自动化测试是通过GUI图形界面来触发,还是通过CLI命令触发,这因框架而异。

当然,仅仅知道如何触发测试是不够的。我们通常有更多的需求。

例如,如何选择性地执行满足特定条件的测试用例子集?

如何设置全局的执行参数(超时时间、日志路径、报告形式等)?

如何动态地给测试用例集传入参数?

一般来说,一个完整的框架需要提供足够多的控制选项,从而让我们根据需求定制执行测试的方式。

以Robot Framework为例,其执行用例的命令具有30多个不同的选项。

这提供了足够的自由度和一些非常棒的功能。例如其dryrun选项,可以让我们在不实际执行用例的情况下,快速检查出测试用例中参数不匹配、语法不正确、关键词找不到、库导入失败等错误,非常实用。

3、如何检查测试结果?

测试执行结束之后,我们需要关注测试结果。不同的框架会以不同形式提供测试结果。例如,测试结果既能以控制台日志的形式体现、也能够以图表和报告的形式体现,并以邮件发送或者展示在网站上。

根据测试结果,我们可以很容易地了解测试的执行情况,包括测试的成功/失败情况、测试的整体/局部用时等。

当测试失败时,我们尤其需要关注测试失败的具体情况。

通常,我们关心失败是由于我们使用框架的方法不当造成的,还是由于被测软件的质量问题。这一点,只能通过检查和分析测试结果得到。

4、如何扩展测试框架?

一般来说,框架只是提供了最基本的功能。很多时候,框架并不能直接满足自动化测试的需求。这时我们可以寻求第三方的、与框架本身兼容的库或者插件。如果第三方工具不能满足我们的需求,我们就需要开发自己的库和工具。

例如,对于HTTP、SSH等公有协议,我们很容易在网络上找到某个框架的第三方库;

而对于只用于公司产品的私有协议,我们通常无法找到第三方库,只能自己开发。

自己开发时,需要注意的是要遵从框架的规范,使得开发出的库能够与框架无缝兼容。

 

作者:无敌小蜗牛

原文链接:https://blog.csdn.net/m0_60437822/article/details/120674851

  • 【留下美好印记】
    赞赏支持
登录 后发表评论
+ 关注

热门文章

    最新讲堂

      • 推荐阅读
      • 换一换
          •   市面上的项目管理工具很多,这里仅列出这些工具的信息,以帮助大家在选择工具时 作一个对比。并无推荐JIRA 或者不推荐什么工具的区分。  本人使用JIRA来管理项目,也是基于公司管理层决定的。虽然整个文章都是基于JIRA的应用,但是不管是哪种工具,万变不离其宗,都可以用类似的方式来实现各种项目管理需求。但为了避免踩雷,大家还是要选择热门一些的工具。  1 JIRA:  简介:JIRA是Atlassian公司出品的项目与事务跟踪工具,被广泛应用于缺陷跟踪、客户服务、需求收集、流程审批、任务跟踪、项目跟踪和敏捷管理等工作领域。JIRA中配置灵活、功能全面、部署简单、扩展丰富。  JIR...
            0 0 988
            分享
          • 读者提问:今天刚刚接到一个项目,项目经理让我们评估测试时间,但我需求还没搞明白,实在不知道怎么评估测试时间呢,阿常能给我支支招吗 ?阿常回答:告诉你一个大多数团队都通用的测试时间评估法则:开发时间的 1/3 ~ 1/2。1、不怎么复杂的项目,测试时间一般按照开发时间的 1/3 来评估。2、稍微复杂一点的项目,测试时间一般按照开发时间的 1/2 来评估。阿常碎碎念:对于以上测试时间的评估,可依据实际项目中可能发生的测试风险,酌情再增加 20%。比如,实际测试下来发现 BUG 很多,开发修复时间长,测试需要等待开发提测新版本;比如实际测试过程中测试人员有变动,原来熟悉这个项目的测试人员休...
            0 0 4129
            分享
          • 在项目测试中,第一轮基本功能测试完成,第二轮交互功能测试完成,到了第三轮,就需要进行一些压力测试,性能测试等请求量比较大的场景测试,但是大家都很容易忽略一种测试方向,即异常测试。异常测试顾名思义,是手动制造一些异常条件,以此来模拟用户使用过程中碰到的一些突发情况。这些问题在短期使用可能不会遇到,但是随着软件使用时间越来越长,会有可能暴露,所以需要提前测试。设计异常测试用例时,需要关注哪些方向呢?我这边简单整理了一下:异常场景测试重点:1、关注异常情况下,终端界面提示信息合理性;2、关注异常场景下,是否出现脏数据;3、关注异常场景下,界面有合理错误提示,不会出现程序崩溃及异常;4、关注异常恢复后...
            1 1 14413
            分享
          •   周鸿祎最近回到家乡武汉,参加“第六届全国青年企业家大会”,分享了自己对AI的思考。  周鸿祎认为,新质生产力的核心是科技创新。在数字化领域,人工智能和大模型无疑是当前最热门的话题。  有人担忧大模型会摧毁每一个行业,但我却认为它会重塑每个行业。这也是为什么今年的政府报告中提到了“人工智能+”的概念,旨在将人工智能和大模型与中国的各个传统产业,特别是制造业、新兴工业等传统业务进行深度融合。  值得注意的是,大模型并非只有越做越大的一条路。从国际趋势来看,很多大模型是由多个专家小模型构成的,术业有专攻。  以360AI浏览器为例,针对读书、读论文、看视频、会议、听课、开会内容自动总结、论文翻译...
            0 0 539
            分享
          •   前言  在学习计算机操作的系统的时候,分页存储管理与分段存储管理十分容易令人混淆,对其含义进行详细解读,能够加强我们对存储管理的整体理解。  存储管理  存储管理的对象是主存储器(主存、内存)。存储器能够存放各种信息,是计算机系统中的关键资源。其主要功能包括分配和回收主存空间、提高主存利用率、扩充主存、对主存信息实现有效保护。  存储管理的主要目的是解决多个用户使用主存的问题。分页存储管理、分段存储管理是两种重要的管理方案。  分页存储管理  将一个进程的地址空间划分成若干个大小相等的区域,称为页。  相应地,将主存空间划分成与页相同大小的若干个物理块,称为块或页框。为进程分配主存时,可将...
            0 0 869
            分享
      • 51testing软件测试圈微信