测试工具合集 on 重定向学院

收藏清单:Java测试相关资源汇总

Fri, 27 Oct 2017 08:19:06 +0800

Virtual environments 虚拟化环境

Vagrant - 配置简单可信赖的虚拟化环境管理工具
Docker - docker就不用多说了

Performance & stress & load 性能测试

Apache JMeter - 支持性能及功能测试
The Grinder - 使用多台测试机运行分布式性能测试的框架
Lightning - 融合JMeter，不支持功能测试，支持CI/CD
Tsung - 基于Erlang的性能测试工具，支持多协议
Gatling - Gatling是基于Scala, Akka 和 Netty的开源性能测试框架. 非常适合做压力测试。它的设计初衷是易用，好维护和高性能。 DSL易于理解，测试场景可以自解释，脚本维护简单，可以直接在代码库中进行管理。

Build Tools 构建工具

Apache Ant - 不用多解释了，构建java项目的自动化工具
Apache Maven - Apache Maven 是软件项目管理的综合工具. 基于 project object model (POM), Maven可以从中心信息管理项目构建,报告及文档
Gradle - Gradle 是开源的自动化构建系统。 Gradle可以自动化的构建，测试，发布及部署。

Continuous Integration 持续集成

jenkins - 可扩展的开源持续集成server
TeamCity - 功能强大，用户友好的持续集成及部署工具，开箱即用

Reporting 报告

ReportPortal - 强大的服务端报告工具。降低了处理结果的工作量。提供了测试执行的历史数据，日志截图以及任意二进制文件的记录和存储。
Allure - 开源框架，目的是为团队中的每个人创建清晰的测试报告。
Gradle Allure Plugin - 第三方的 Gradle Allure插件可以将Allure集成到spock, testing 和junit用例中。
ExtentReports - HTML报告库支持.NET和Java，使使用简单，可以创建美观的测试报告。
ReportNG - ReportNG 是一个简单的 TestNG HTML报告插件。

Editors, IDE, consoles 编辑器 IDE

IntelliJ IDEA - 免费开源的IDE 支持 Java, Groovy, Scala 和 Android 开发
- IntelliJ IDEA Selenium plugin - IntelliJ Idea 插件，使selenium用例编写更简单。
Eclipse - 最有名的JavaIDE同时也支持 C/C++和PHP
- Genie plugin - 测试AS 3.0 SWF和Flash游戏的功能测试工具
NetBeans - NetBeans IDE 是Java 8的官方IDE

ORM frameworks and libraries ORM框架和库

Hibernate - SSH里的H
Morphia - Morphia一款是轻量的类型安全的MongoDB对象mapping库
MyBatis - MyBatis 是一款优秀的持久层框架，它支持定制化 SQL、存储过程以及高级映射。MyBatis 避免了几乎所有的 JDBC 代码和手动设置参数以及获取结果集。MyBatis 可以使用简单的 XML 或注解来配置和映射原生信息，将接口和 Java 的 POJOs(Plain Old Java Objects,普通的 Java对象)映射成数据库中的记录。

Useful libs 有用的库

StreamEx - Java 8 Streams加强库。
Vavr - Vavr 是Java 8的object-functional 语言扩展, 目的是减少代码行数和增强代码质量。
Lombok - Lombok是一个可以通过简单的注解形式来帮助我们简化消除一些必须有但显得很臃肿的Java代码的工具，通过使用对应的注解，可以在编译源码的时候生成对应的方法。
AspectJ - Java的面向切面编程工具.
aShot - WebDriver 截图工具.
rest-assured - 用Java来测试REST服务比动态语言比如Ruby Groovy要难。 REST Assured 可以给Java带来类似动态语言测试REST服务的体验
WireMock 灵活的 web 服务mock库，跟一般的mock目的不同的是，WireMock使用了真实的web服务
MockServer 可以用来mock任何基于HTTP和HTTPS的系统 (比如services, web sites,等).
XMLUnit - 测试和比较 XML，支持 Java 和 .NET
Awaitility - Awaitility是测试异步代码的库
Beanmother - 初始化Java Bean作为test data的库

Resources 资源

Websites 网站

automated-testing.info - 自动化测试社区
atinfo.github.io/at.info-knowledge-base - 各种工具和技术实现的自动化测试的例子
测试教程网: 最权威的中文测试教程汇总网站
selenium-simplified - 让selenium webdriver测试更简单

原始封面

收藏清单:Java自动化测试工具汇总

Thu, 26 Oct 2017 08:19:06 +0800

xUnit frameworks 单元测试框架

JUnit - 常用的测试框架
TestNG - 测试框架
- Test Data Supplier - TestNG DataProvider封装，让数据的生成更加灵活

TDD \ ATDD \ BDD

工具
- JBehave - Behaviour-Driven Development (BDD)测试框架. BDD是从 test-driven development (TDD) 和 acceptance-test演进而来, 让用例的编写对新手更加友好和直觉化
- Cucumber-JVM - 纯 java的Cucumber实现,支持大部分流行的jvm语言
- JGiven - 开发者友好且实用的BDD工具. 开发者使用纯java及流利API编写测试场景, JGiven负责生成领域专家可读的报告
- easyb - Java平台的BDD框架. 通过使用Domain Specific Language(DSL), easyb致力于让文档可读可执行
- robotframework - 最有名的acceptance test-driven development (ATDD)测试框架
  - awesome-robotframework - 各种rf的扩展库
- Spectrum - BDD-style test runner，支持Java 8. 灵感来自于Jasmine, RSpec和Cucumber.
- cucumber-report-db - 把Cucumber的结果存到数据库里，并且提供测试报告

Model-Based Testing

GraphWalker - Model-Based测试框架. 这个工具可以从 graphml, dot 或 json文件中读取model，然后自动创建测试用例

Code analysis and coverage 代码扫描和代码覆盖率

SonarQube - 管理代码质量的开源工具
Gradle Quality Plugin - 静态代码分析工具，支持Java和Groovy，使用 Checkstyle, PMD, FindBugs 和CodeNarc. 插件使用了统一的控制台输出并简化了开发者的工作流: 查看不规范的错误时只需要留意控制台就好，并且控制台输出的体验跟java编译错误的输入体验一致
Qulice - Qulice是Java项目的代码扫描和质量控制工具. 包含了最好的静态代码扫描工具和预配置选项。你不需要单独再对这些工具进行配置了。
JaCoCo - JaCoCo是免费的代码覆盖率统计工具，应该也是应用最广泛的覆盖率工具了。

Web UI test automation web ui自动化工具

libraries
- Selenium - 浏览器自动化工具
- SikuliX - 基于OpenCV的 GUI 测试框架, 使用图片识别技术，支持windows/linux/mac系统
frameworks and wrappers 框架及封装
- Selenide - 简洁的Selenium封装,让 UI用例的编写更容易
- Selenified - 开源的测试框架，目的是让selenium测试更加简单,提供了简单的接口去添加测试报告，错误处理以及线程安全的运行模式。可以运行在本机或云端(Grid or SauceLabs).
- Serenity BDD (Thucydides) - 创新的开源库，让你可以更高效的编写用户验收用例, 并可以根据用例去生成项目文档及测试报告
- htmlelements - 让web测试时元素交互更加简单的java库
- atlassian-selenium - 让开发者可以更高效的编写Selenium/WebDriver功能测试的开源库
- stevia - Persado出品的开源自动化测试框架
- darcy - 开源的测试框架，支持java 8，提供了具有表意性以及使用简单的API
- Satisfy - 基于Thucydides和Jbehave的开源测试框架。支持WebUI, SOAP, REST, emails, files，并支持创建随机数据，开箱即用
- JDI UI Test Automation Framework - UI自动化测试框架。扩展了Page Object设计模式，并加入了一些常用的元素
- Geb Framework - 基于groovy自动化测试框架。专为Webdriver Page Object设计模式以及Spock Framework(BDD)的集成而设计。
- FluentLenium - FluentLenium可以帮助你写出可读性好, 可重用, 可靠且灵活的Web UI功能测试用例. FluentLenium 提供了为Selenium实现的流利api,并为selenium用户的一些常见问题提供了解决方案。
- Selion - 基于TestNG和Selenium提供了一系列的功能，让你可以在短时间内搞定webdriver. 支持web和移动端测试
extensions 扩展
- BrowserMob Proxy -从浏览器获取性能数据的简单工具, 一般跟自动化工具，比如Selenium和Watir配合使用
- Selenium-Grid-Extras - 让Selenium Grid 节点的管理更加简单，并通过清理测试环境的方式让节点更加稳定
- Selenium Grid Extensions - 扩展了Selenium grid，以及可以在执行selenium用例的同时执行Sikuli用例
- Selenium Grid Router 轻量级的server，作用是把Selenium Wedriver的请求分发到多个Selenium hub。
- Docker Selenium Grid - 提供了native的视频录制功能，支持Selenium Grid，最初被设计为跟docker-selenium一同使用。
- Video Recorder Java - 使用自动化测试用例来录制视频的java库
- Zalenium - 提供一次性的灵活的Docker-based Selenium Grid视频录制功能, 支持实时预览和online/offline控制面板。
- SikuliFactory - 为SikuliX提供了PageFactory实现。
- Mailosaur - 邮件自动化测试工具，基于Mailosaur。

Mobile test automation 移动自动化测试

Appium - 开源的自动化测试框架，可以测试native/hybrid/mobile web应用。核心是基于webdriver协议进行了扩展
Calabash - 跨平台的自动化测试框架，支持Android和iOS的原生应用以及hybrid应用。 Calabash的语法非常容易理解，甚至可以让非技术人员编写和执行基于上述平台的自动化测试用例。
Robotium - 安卓自动化测试框架，支持原生及hybrid应用. Robotium让我们可以非常方便的编写强大和稳定的黑盒UI测试用例。有了Robotium的支持, 测试开发工程师可以编写安卓应用的功能用例系统用例以及用户验收用例。
UIautomator - 提供了高效的测试UI的方式。可以创建支持真机及模拟器运行的自动化测试用例，并包含了可以查看和分析安卓UI的viewer。
Espresso - 比较新的开源自动化测试框架, 让开发者和测试人员都可以编写UI用例。 Espresso的api简单且易学，你可以非常快的使用这个框架上手安卓自动化测试

API test automation 接口自动化测试

Karate-DSL - Karate是BDD风格的使用javascript实现的测试框架。可以让你调用任何web-service类型的接口并对响应进行断言。

Windows UI test automation windows ui自动化测试工具

SikuliX - 基于OpenCV的 GUI 测试框架, 使用图片识别技术，支持多操作系统
Winium.Desktop - 测试Windows应用(主要是基于WinForms和WPF平台)的自动化测试工具. 实现了Selenium Remote WebDriver协议

Unix \ Linux UI test automation Unix \ Linux ui自动化工具

SikuliX - 基于OpenCV的 GUI 测试框架, 使用图片识别技术，支持多操作系统

MacOS UI test automation mac ui自动化工具

SikuliX - 基于OpenCV的 GUI 测试框架, 使用图片识别技术，支持多操作系统

Server side test automation 服务端自动化测试工具

Citrus - Javas实现的测试框架，支持企业级SOA应用的e2e服务测试，支持 HTTP, JMS, TCP/IP, FTP, SOAP协议，以及XML和JSON.

原始封面

收藏清单: python持续集成测试报告及其他最全资源汇总

Wed, 25 Oct 2017 08:19:06 +0800

Continuous Integration 持续集成

buildbot - 自动化编译发布系统。大部分的软件项目可用
jenkins - 可扩展的开源持续集成server
travis-ci - 免费的持续集成平台

Reporting 报告

allure pytest - PyTest的allure适配器
HTMLTestRunner - Python 标准库unittest的扩展. 生成简单好用的html报告
unittest-xml-reporting - 一个unittest test runner可以将测试结果保存到 XML文件。可高度定制

Documentation generation 文档生成

Sphinx - Python文档生成器
MkDocs - Markdown语法友好的文档生成器
Pycco - The original quick-and-dirty, hundred-line-long, literate-programming-style documentation generator.

Editors, IDE, consoles 编辑器, IDE以及命令行工具

pycharm - 智能的专业的python IDE
pydev - eclipse 上全功能的python插件
sublime - 简洁好用的文本编辑器
ipython - 支持多语言的交互式shell, 最初是为python开发

Useful libs 有用的库

一些可以让你构建更好的自动化测试的库

收藏清单: python安全测试API测试及性能测试最全资源汇总

Mon, 23 Oct 2017 08:19:06 +0800

REST API Testing REST API测试

Rester - 测试RESTful API的框架
pyresttest - REST以及API microbenchmarking工具
siesta - Python REST 客户端

Virtual environments 虚拟环境

virtualenv - 创建隔离的python开发环境的工具
virtualenvwrapper - virtualenv的一些扩展
tox - 虚拟环境管理，可以在不同的python版本上进行测试和截图
pew - 一些管理虚拟环境的工具
Vex - 在命名的虚拟环境运行命令
PyRun - 单文件无需按照的python版本
pyenv - 简单的python版本管理
Tapper - all-embracing test infrastructure.

Performance & stress & load 性能测试

Multi-Mechanize - 开源的性能测试框架
locust - 可扩展的python性能测试工具
Yandex.Tank - 性能及benchmark工具
pytest-benchmark - py.test的benchmark工具
Airspeed Velocity - 简单的Python benchmarking工具自带基于web的报告
The Grinder - 支持分布式的负载测试框架. 包含一些常规用例，比如 HTTP web servers, SOAP and REST web services, 和 application servers (CORBA, RMI, JMS, EJBs),以及定制化的协议. 测试脚本使用Jython和Clojure实现
Tsung - 开源，支持多协议的分布式性能测试工具. 可以测试 HTTP, WebDAV, SOAP, PostgreSQL, MySQL, LDAP 和 Jabber/XMPP 服务
taurus - 自动化友好的持续测试工具

Security checking 安全扫描

sparta - 支持gui的网络扫描工具
OWASP ZAP - 用python实现的OWASP ZAP-features API
pythem - pythem是多用途的安全测试工具

原始封面

收藏清单: python自动化测试工具最全资源汇总

Sun, 22 Oct 2017 08:19:06 +0800

Web UI test automation Web UI 自动化

libraries 各种库
- selenium webdriver - 浏览器自动化工具
- splinter - 简单的web自动化工具，让元素定位，表单提交等更加容易
- mechanize - 有状态可编程的浏览器
frameworks and wrappers 框架和封装
- py.saunter - 有主见的自动化测试框架，使用了selenium RC和webdriver api
- moz-web-qa - py.test的插件，为Mozilla的WebQA项目提供了额外功能
- testutils sst - A web test framework that uses Python to generate functional browser-based tests.
- wtframework - 让web测试可以配置的框架
- holmium.core - Page Object及其他工具库支持
- robotframework-selenium2library - Robot Framework的selenium扩展
- gocept.selenium - selenium RC的API, 适合编写基于WSGI, Plone, Zope 2, ZTK, or Grok 应用的测试用例
- webium - 基于python的一个Page Object实现
- robotframework-anywherelibrary - Robot Framework的扩展库，使用selenium2测试web应用，使用appium测试移动应用
- robotframework-pageobjects - 一个不错的Page Object实现，可以脱离robot framework单独使用。具体看这里
- elementium - 用jQuery风格的语法糖来实现浏览器的自动化测试用例
- slickqa - slick-webdriver-python 项目是python selenium binding的一个封装
- selene - Concise UI 测试用例，使用python实现支持Ajax,PageObjects和Widgets
- hitch - 编写基于service的应用的测试用例
- Needle - Needle是基于图片比对的测试工作，它可以对web应用的一部分进行截图，然后跟预期结果的图片进行比对
- PyPOM - PyPOM是另一个Page Object库，适用于Selenium和Splinter测试
- POM - POM是Page-Object-Model 微框架，目的是让Web UI测试更加简单，快速和有乐趣
- websmith - Web测试的一套DSL
- pages - 轻量的page object库和组建
- widgetastic - RedHat UI widget 组建框架
- navmazing - PageObjects based navigation from RedHat
- nightwatch - 基于python和selenium的UI 自动化测试框架. 灵感来源于nightwatch.js
extensions 扩展
- webdriver_manager - 主要目的是让不同版本的浏览器driver管理起来更加方便
- pytest_splinter - pytest spinter 和 selenium的集成
- lettuce_webdriver - Selenium webdriver 的 lettuce封装
- Browsermob Proxy - python的Browsermob Proxy封装
- FireRobot - 一个Firefox的扩展,让你可以更高效的编写基于robot framework的selenium用例
- pytractor - Python的selenium扩展，以便更好的测试angular.js应用
- Selenium-Requests - 扩展 Selenium WebDriver类，包含了Requests库的一些功能，可以更方便的处理cookie和请求头
- selenium-respectful - selenium的封装，可以并行访问站点

Mobile test automation 移动端自动化测试工具

appium - 开源的自动化测试框架，可以测试native/hybrid/mobile web应用。核心是基于webdriver协议进行了扩展
Winium.StoreApps - 开源的自动化测试用具，用来测试Windows Store应用，实现了Selenium Remote WebDriver
robotframework-androidlibrary - Robot Framework用来测试android应用的扩展库
robotframework-appiumlibrary - appium的RobotFramework扩展
robotframework-ioslibrary -Robot的ios测试扩展库
uiautomator - Android uiautomator的python封装, 支持 Android 4.1+
ATX - 智能机自动化测试工具. 支持 iOS, Android, WebApp 和游戏

Windows UI test automation Windows的UI测试工具

Winium.Desktop - 测试Windows应用(主要是基于WinForms和WPF平台)的自动化测试工具. 实现了Selenium Remote WebDriver协议
PyAutoGUI - 跨平台的GUI测试工具，支持通过python脚本控制键盘和鼠标
robotframework-autoitlibrary - Robot Framework的windows GUI测试扩展
autopy - 简单跨平台的GUI测试工具集
UISoup - 支持windows和MacOS平台的UI自动化(仅工作在x86平台)
pywinauto - 非常有python面向对象风格的GUI测试库，现已支持64位机器以及py2和py3
SikuliX - 基于OpenCV的 GUI 测试框架, 使用图片识别技术，支持python2.7

Unix \ Linux UI test automation

ldtp - 跨平台的linux GUI测试项目
fMBT - 支持多平台的python GUI测试库
SikuliX - 基于OpenCV的 GUI 测试框架, 使用图片识别技术，支持python2.7

MacOS UI test automation MacOS UI自动化测试工具

ATOMac - 通过Apple Accessibility API来测试Mac应用的python库
PyAutoGUI - 跨平台的GUI测试工具，支持通过python脚本控制键盘和鼠标
SikuliX - 基于OpenCV的 GUI 测试框架, 使用图片识别技术，支持python2.7

原始封面

收藏清单: python测试数据生成及代码扫描最全资源列表

Fri, 20 Oct 2017 08:22:28 +0800

Test Data manipulation 测试数据的操作和处理

faker - 生成假数据的python库
fake2db - 创建假数据库
ForgeryPy - 使用起来很简单的假数据生成库.
radar - 随机生成时间
robotframework-faker - faker的Robot Framework封装
hypothesis - Library for property based testing in Python, based on the Haskell library Quickcheck.
factory_boy - factory_girl的python版本
fauxfactory - 随机数据生成器

Code analysis 代码扫描及分析

pysonar2 - 类型推断
coverage - 覆盖率
pycallgraph - 流程可视化
Flake8 - The modular source code checker: pep8, pyflakes and co.
pylama - Python and JavaScript的代码审查工具
Pylint - 源代码分析器
hacking - OpenStack Hacking Style Checks (flake8 plugins).
prospector - 代码分析工具，可以输出错误信息，潜在问题，不规范的代码以及代码复杂度

原始封面

收藏清单: python测试框架最全资源汇总

Fri, 20 Oct 2017 08:19:06 +0800

xUnit frameworks(单元测试框架)

frameworks 框架
- unittest - python自带的单元测试库，开箱即用
- unittest2 - 加强版的单元测试框架，适用于Python 2.7以及后续版本
- pytest - 成熟且功能强大的单元测试框架
- plugincompat - pytest的执行及兼容性插件
- nosetests - 让python测试更容易一点
- slash - python实现的单元测试框架
extensions 扩展
- proboscis - 仿TestNG扩展了unittest模块以及Nose的功能
- grail - 可以让你一步一步编写测试用例的库
- testify - 单元测试框架，提供了加强型fixture，用例切割并行运行，testrunner高亮及详尽的log和report功能
- trial - unittest模块的扩展，提供了命令行的testrunner工具以及代码覆盖率的整合，跟nose差不多
- subunit - 提供了unittest在另一个进程执行用例并汇总测试数据的能力
- testresources - 提供了多用例间管理测试数据的机制，兼容unittest
- testtools - 为Twisted和Bazaar提供的unittest扩展
- Sancho - 运行用例，并为失败的用例提供报告，但仅限于此
- zope.testing - testrunner，提供了不错的debuge能力，并且集成了代码覆盖率。可以跟zope项目使用，也可以用在非zope项目上
- pythoscope - 自动或半自动为遗留的python系统创建测试用例的工具
- testlib - 更强大的unittest，更多的断言，支持module级的setup/teardown，skip test等…
- dutest - An object oriented interface to retrieve unittest test cases out of doctests. Hides initialization from doctests by allowing setUp and tearDown for each interactive example. Allows control over all the options provided by doctest. Specialized classes allow selective test discovery across a package hierarchy.
- green - Green是一个简洁多彩的testrunner，跟nose很像
- ddt - 让unittest 支持 Data-Driven
- pytractor Selenium python bindings的扩展. 目的是让angular项目的测试更简单

TDD \ ATDD \ BDD

BDD
- behave - BDD 框架
- lettuce - 又一个BDD框架
  - lettuce-tools - 一整套lettuce扩展，让BDD更加简单
- contexts - Python的描述性测试工具
- mamba - python的definitive testing 工具
- pyvows - 异步的行为驱动开发测试工具
- pytest-bdd - py.test runner的BDD库
- robotframework - 最有名的acceptance test-driven development (ATDD)测试框架
  - awesome-robotframework - 各种rf的扩展库
- radish-bdd - BDD框架，支持gherkin语言
Assertions 断言
- pyshould - 基于pyhamcrest的Should style断言
- pyhamcrest - python版的Hamcrest matchers
- sure -python实现的测试库,提供了强大灵活的断言
- assertpy - 巨简单的python单元测试断言库，提供了优雅流利的API. 支持Python 2 和 3.
Mocking
- mock - python实现的Mocking和Patching库
- Ludibrio - 用python实现的优雅的test doubles框架(mocks, stubs, spy, and dummies).
- responses - mock请求的 Python测试工具库
- doublex - 强大的 test doubles 框架
- freezegun - 通过mocking datetime模块实现时光穿梭
- httpretty - HTTP请求的mock工具
- httmock - requests的mock工具，支持Python 2.6+ and 3.2+.
- pretenders - 测试用的fake server
- mock-server - 简单的mock sever，支持REST and XML-RPC API，还有基于tornado的管理界面
- VCR.py - 自动 mock HTTP 交互让测试更简单快速

原始封面