Playwright VS Selenium VS Puppeteer VS Cypress
2021-01-04 17:00 虫师 阅读(20260) 评论(6) 编辑 收藏 举报参考：https://www.testim.io/blog/puppeteer-selenium-playwright-cypress-how-to-choose/
这四款自动化测试框架在我们的公众号都有介绍。上周介绍了新出 Playwright，那这款工具有什么优点，是否值得我们投入精力学习。
关键对比
接下来，我会通过一些维度来进行对比。
支持语言
- Playwright: ✅✅✅✅ 支持主流语言：JavaScript & TypeScript\python\C#\Go\Java
- Selenium: ✅✅✅✅✅ 支持主流语言：java\python\ruby\C#\C++\JavaScript
- Cypress: ✅ 只支持 JavaScript & TypeScript
- Puppeteer: ✅✅ 只支持 JavaScript & TypeScript \ python
覆盖浏览器
- Playwright: ✅✅✅ 支持Chromium/WebKit/Firefox
- Selenium: ✅✅✅✅✅ 运行在目前所有主流浏览器上（不包括国内套皮的浏览器）。
- Cypress: ✅✅ 只支持 Chrome/Firefox
- Puppeteer: ✅✅ 只支持 Chrome/Firefox
支持多标签 + 表单
- Selenium: ✅✅✅ 通过
switch_to切换，但不好用。 - Cypress: ❌ 没有真正支持
- Puppeteer: ✅✅✅✅✅ 更符合直觉的 API
- Playwright: ✅✅✅✅✅ 更符合直觉的 API
为证明playwright 更简单，我们来做个代码对比。
测试创建速度
- Selenium: ✅ Yes Selenium IDE可以录制脚本。
- Cypress: ❌ 不支持脚本录制。
- Puppeteer: ✅✅ Yes 基于Puppeteer Recorder录制脚本。
- Playwright: ✅✅ Yes 基于
playwright codegen命令录制脚本。
并行网格和基础服务
- Selenium: ✅ Yes 托管或构建自己解决方案。
- Cypress: 🤷 只能在自己的闭源付费云构建。
- Puppeteer: ❌ 通常构建自己的
- Playwright: ❌ 通常构建自己的。
稳定性
这个主要评估用例编写之后的失败率，不包含真的发现bug之后的失败。
Selenium: ❌✅ 复杂的自动等待机制。
Cypress: ❌✅ 复杂的机制，并且不能与框架一起工作。
Puppeteer:❌✅ 等待某些元素，但必须手工等待其他元素。
Playwright: ❌✅✅ 最好等待某些元素，但必须手工等待其他元素。
智能定位：
Selenium: ❌ 不支持以多种方式选择元素
Cypress: ❌ 不支持以多种方式选择元素
Puppeteer❌ 不支持以多种方式选择元素
Playwright: ❌✅✅ 非常前景，开始支持自定义选择器引擎。
Debugging
- Selenium: ❌✅ 远程教程网格依赖于网格提供的程序。
- Cypress: ❌✅ 你甚至不是在写常规的JavaScript。
- Puppeteer: ✅ 在IDE中编写和调试Javascript。
- Playwright: ✅ 在IDE中编写和调试Javascript或其他语言。
Documentation and Resources
- Selenium: ✅✅ 官方文档写得确实不好，但是第三方资料太丰富，相关的书籍也很多。
- Cypress: ✅✅ 虽然社区很小，但是很热闹，官方文档也写的非常赞。
- Puppeteer: ✅ 社区比较小，但目前有大量的教程。
- Playwright: ✅❌ 工具比较新，API也在变化，文档和教程可能跟不上。
注：要分范围 1 ~ 5，代表分值，分值越高说明越优。
| categories | Playwright | Selenium | Cypress | Puppeteer |
|---|---|---|---|---|
| 支持语言 | 4 | 5 | 1 | 2 |
| 覆盖浏览器 | 3 | 5 | 2 | 2 |
| 多标签&表单 | 5 | 3 | 0 | 5 |
| 测试编写速度 | 4 | 4 | 4 | 3 |
| 并行，网格 | 0 | 4 | 2 | 0 |
| 稳定性 | 4 | 3 | 3 | 3 |
| 智能定位 | 3 | 2 | 2 | 2 |
| Debugging | 3 | 2 | 3 | 2 |
| 文档和资源 | 3 | 4 | 4 | 3 |
如何选择？
首先，这些测试工具都是基础。他们只是提供了一套API来定位和操作元素。并不能成为你自动化项目成功或失败的决定因素。
自动化的是否成功我认为主要取决于以下几个方面：
- 调研你的项目是否真的适合自动化。
- 是否真的找到自动化的应用场景。（比如，我们用自动化测试埋点，用自动化配合检查App性能都是很好应用场景）
- 是否有足够人力投入到自动化中。
- 测试人员的水平，不要怀疑这一点，不少同学还在定位元素面前磕磕绊绊。
- 是否有团队支持和配合。有些同学还在纠结验证的问题，让开发配合一些很轻松可绕过，可你就是做不到。
好了，这些工具都无法决定自动化项目是否成功，那怎么选？
如果，你不懂并且也不打算学习JavaScript， 那么就不用选 Cypress 和 Puppeteer 了。
如果，你只是一个新手，那么还是稳妥点，先学会Selenium，这是测试的必备技能。
我非常鼓励那些有一些自动化经验的同学尝试学习JavaScript，他会让你对前端（web）技术有更深的理解，因为你要测试的就是前端(web)应用。就像我可灵活的控制元素的隐藏，修改属性，更快速的定位到疑难杂症的元素，这完全是因为我做过前端开发。Cypress 或 Puppeteer 就是很好的选择。
当然，对于我来说，新出的自动化工具，我都会关注和学习一下。从而找到它的亮点和优势分享给你们。
