Parasoft Selenic适合测试什么场景 Parasoft Selenic结果分析时重点看哪些指标

Web页面改版之后，原来能顺利跑通的自动化脚本，就常常会在按钮、输入框和等待条件上出错了。那Parasoft Selenic适合测试什么样的场景，它的结果分析又要重点看哪些指标，这需要先把这个工具的定位搞清楚。Selenic主要是用来增强现有的Java Selenium测试的，它能在原来自动化流程的基础上，加上录制、脚本生成、自我修复、执行建议和结果分析这些能力，而且它不要求把已有的Selenium脚本都重写一遍。

一、Parasoft Selenic适合测试什么场景

Selenic重点要解决的，是Web界面自动化脚本不好维护、反复跑的时候结果不稳这两个老问题。所以它对那些已经在用Selenium，或者准备把一遍遍重复的页面操作慢慢转成自动化测试的团队更合适。

1、适合反复执行的页面回归操作

像登录、填表单、查订单、筛列表、页面跳转、权限查验这些流程，每次版本发布前都得重复去跑，这时候可以用Selenic的录制器把基础步骤录下来，再生成方便维护的Selenium测试;Selenic还支持在录制过程中加上断言，最终会产出Java测试代码。

2、适合页面元素经常变动的系统

Web应用一改版，用来找到页面元素的方式就容易失效，例如按钮ID变了、页面层级不同了、加载时间出现起伏。Selenic能够在运行中对出错的定位器和等待条件进行自我修复，并在执行停止后给出修改的建议，这样脚本因为界面的小调整而频繁断掉的情况就少了。

3、适合接入持续集成流程的回归测试

Selenic可以嵌入到现有的持续集成和交付流水线里，在原来跑Selenium的方式之外增加监控和分析;每次提交代码或者构建一个新版本之后，都能自动地去运行页面的这些测试，这样就很容易发现功能是不是退回去了，或者脚本本身是不是已经不管用了。

4、不适合单独扛下所有测试

Selenic主要面向的是Web UI测试，不应该拿它去替代接口测试、压力测试和安全测试。项目里如果还要验证API、做负载测试或者查安全问题，就需要结合SOAtest这类工具来处理。Parasoft的产品说明中，也把API测试、性能测试、可访问性测试以及API安全测试放进了组合方案里。

二、Parasoft Selenic结果分析时重点看哪些指标

结果分析的时候，不能只看最终通过率。页面自动化测试里最让人头疼的，就是得分清楚这一次失败，到底是业务功能真的出了问题，还是因为页面元素变化、加载不稳定才让脚本卡在了那里。

1、先看通过和失败的整体状态

每次跑完以后，先看过与不过的数量，再看失败的用例是不是集中在某些测试上。Selenic的报告能展示执行状态、错误日志和截图。当失败的数量突然变多时，要对着当前版本的改动看一看，判断是不是同一个页面的改版引起了批量的失败。

2、重点看自修复的情况和建议

脚本因为找不到元素或者等待条件不够而失败时，要看看Selenic有没有给出自我修复的结果和后续的改进建议。靠着自动修复才跑下去的脚本，虽然当时还能用，但不能就这么搁着不管;最好把验证有效的修改及时更新到代码库里，免得每次跑都依赖那种临时的修复。

3、留意执行时间的变化

有的用例以前十几秒就能跑完，后来慢慢地变慢了，原因可能跟页面接口的响应、资源的加载、设的等待条件，或者环境不太稳定有关。Selenic提供了一些性能方面的指标和基准分析，可以用来观察页面性能的变化。

4、结合截图和日志来给问题定位

页面测试失败了，把截图和错误日志拿起来一起看，通常比只看那一堆报错文字要有用得多;要弄清楚脚本到底是在登录页卡住了，还是被弹窗拦住了，是停在了空白页，还是按钮没加载出来就断了。把出问题的位置看准了以后，再去决定是该调整元素的定位方式、补上等待的时间，还是把这个当作一个业务上的缺陷反馈出去。

三、Parasoft Selenic结果怎么形成闭环

Selenic跑出结果以后，不能就那么放着，还得把问题分类去处理;要不然，失败的用例一直堆在列表里，流水线的参考价值很快就会滑下来。

1、把失败的原因拆开记录

建议把失败的情况分成几类，比如业务缺陷、元素定位失效、等待条件不够、测试数据不对劲、环境暂时不可用等等。不同类别的问题，交给对应的人去处理，不要把所有失败全都推到负责维护测试脚本的人身上。

2、复查那些经常靠自修复才过的用例

如果一条脚本有好多回都得依赖自动修复才能通过，那就说明它本身已经不稳当了;这时就应该根据建议去调整定位器或者等待条件，调整完再重新执行，看看能不能稳下来。

3、借助DTP来观察长期变化

Selenic可以把结果传到Parasoft DTP里头，在那里可以看结果的汇总、需求的追溯，还能看到趋势变化和分析面板。对于那种持续在发布的项目，某一次通过率的高低，比不上长期趋势来得更有说服力。

总结

总的来看，Parasoft Selenic适合反复执行的Web页面回归测试、界面频繁变动的Selenium脚本维护，还有持续集成里头的自动化验证这些场景。分析它的结果时，建议先看过和失败的总体情况，再去看自我修复的建议、执行时间的变化、截图还有错误日志。只有把真实业务上的缺陷和脚本本身稳定性的问题分开去处理，Selenic才能在自动化测试维护上真正地帮上忙，把负担减下来。