TestNG与JUnit

TestNG框架源码走读三:测试用例执行

2018-03-06  本文已影响40人  测试你个头

TestNG框架源码走读一:入口
TestNG框架源码走读二:测试套执行

上一篇测试套执行主要介绍了SuiteRunner类的实例化,以及SuiteRunner#run()->SuiteRunner#runSequentially()实现测试套执行,但是SuiteRunner.testRunners是如何赋值的?

一、TestRunner实例化

1.想了解SuiteRunner.testRunners的初始化过程,可以通过IDE看下SuiteRunner.testRunners的调用情况,然后跳转过去看看:


2.SuiteRunner#init()中调用了testRunners.add(tr),查看SuiteRunner#init()的调用情况,是SuiteRunner的构造器方法调用了SuiteRunner#init()进行SuiteRunner的初始化:


3.SuiteRunner在初始化的时候,调用了SuiteRunner#init实现了测试套下TestRunner的实例化,这是在上一篇:SuiteRunner实例化中略过的地方:

查看SuiteRunner#init源码中关于TestRunner初始化的部分:

    for (XmlTest test : xmlTests) {
      // 1.通过工厂方法实例化TestRunner
      TestRunner tr = iTestRunnerFactory.newTestRunner(this, test, invokedMethodListeners.values(),
              Lists.newArrayList(this.classListeners.values()), this.dataProviderListeners);
      
      // 2.方法拦截器安装
      for (IMethodInterceptor methodInterceptor : localMethodInterceptors) {
        tr.addMethodInterceptor(methodInterceptor);
      }
       
      // 3.textReporter用于收集聚合用例执行情况(和newTestRunner里面的TestHTMLReporter/JUnitXMLReporter区别是?可以看下代码)
      tr.addListener(textReporter);
      testRunners.add(tr);

      // 4.添加找到的测试方法(@Test注解标注的方法)
      allTestMethods.addAll(Arrays.asList(tr.getAllTestMethods()));
    }

iTestRunnerFactory.newTestRunner()有2个实现,分别是DefaultTestRunnerFactory#newTestRunner()和ProxyTestRunnerFactory#newTestRunner(),我们举例看下DefaultTestRunnerFactory#newTestRunner()的代码:

    @Override
    public TestRunner newTestRunner(ISuite suite, XmlTest test,
        Collection<IInvokedMethodListener> listeners, List<IClassListener> classListeners,
        Map<Class<? extends IDataProviderListener>, IDataProviderListener>  dataProviderListeners) {

      TestRunner testRunner = new TestRunner(configuration, suite, test,
              suite.getOutputDirectory(), suite.getAnnotationFinder(), skip,
              listeners, classListeners, comparator, dataProviderListeners);

      // 加载默认监听器(用于监听用例执行相关事件,生成测试报告),这里useDefaultListeners来自命令行参数-usedefaultlisteners,默认是true,具体可以看CommandLineArgs定义)
      if (useDefaultListeners) {
        testRunner.addListener(new TestHTMLReporter());
        testRunner.addListener(new JUnitXMLReporter());
        testRunner.addListener(new TextReporter(testRunner.getName(), TestRunner.getVerbose()));
      }

      // 可以通过查看定义看下failureGenerators是如何赋值的
      for (ITestListener itl : failureGenerators) {
        testRunner.addTestListener(itl);
      }

      // 配置类方法的监听器
      for (IConfigurationListener cl : configuration.getConfigurationListeners()) {
        testRunner.addConfigurationListener(cl);
      }

      return testRunner;
    }
  }

这里的监听器都是在SuiteRunner代码中对DefaultTestRunnerFactory初始化的时候透传进来的:
1.useDefaultListeners的值来自TestNG#configure()方法中的命令行参数解析,解析后的内容通过SuiteRunner实例化传入。
2.failureGenerators是在TestNG#addListener中赋值,在SuiteRunner实例化时传入
3.configuration来自TestNG#initializeConfiguration()方法初始化,在SuiteRunner实例化时传入。

DefaultTestRunnerFactory#newTestRunner()中调用了TestRunner的实例化方法

TestRunner testRunner = new TestRunner(configuration, suite, test,
              suite.getOutputDirectory(), suite.getAnnotationFinder(), skip,
              listeners, classListeners, comparator, dataProviderListeners);

和SuiteRunner实例化代码走读一样,我们暂时先略过TestRunner构造器方法中的内部实现,只要知道TestRunner在哪里进行实例化的即可

接下来回到第二节中的SuiteRunner#runSequentially()看下SuiteRunner如何实现测试用例的执行

二、SuiteRunner#runSequentially()执行测试用例

1.SuiteRunner#runSequentially()源码如下:
遍历SuiteRunner.testRunners,调用runTest执行每个用例

  private void runSequentially() {
    for (TestRunner tr : testRunners) {
      runTest(tr);
    }
  }

2.SuiteRunner#runTest()源码如下:

  private void runTest(TestRunner tr) {
    // 调用TestRunner#run()方法实现用例的执行
    tr.run();

    // 拼装测试用例执行结果返回
    ISuiteResult sr = new SuiteResult(xmlSuite, tr);
    suiteResults.put(tr.getName(), sr);
  }

3.TestRunner#run()源码如下:

  /**
   * The main entry method for TestRunner.
   *
   * This is where all the hard work is done:
   * - Invoke configuration methods
   * - Invoke test methods
   * - Catch exceptions
   * - Collect results
   * - Invoke listeners
   * - etc...
   */
  public void run() {
    // 用例执行前置处理
    beforeRun();

    try {
      XmlTest test= getTest();
      if(test.isJUnit()) {
        // TestNG兼容Junit用例执行
        privateRunJUnit();
      }
      else {
        // TestNG用例执行
        privateRun(test);
      }
    }
    finally {
      // 用例执行后置处理
      afterRun();
    }
  }

TestRunner#beforeRun()主要做了2件事:
1.触发用例执行监听器ITestListener的onStart事件。 2.调用@BeforeTest方法。
TestRunner#afterRun()也做了2件事:
1.调用@AfterTest方法。 2.触发用例执行监听器ITestListener的onFinish事件。
TestRunner#privateRun()的源码如下:

  /**
   * Main method that create a graph of methods and then pass it to the
   * graph executor to run them.
   */
  private void privateRun(XmlTest xmlTest) {
    boolean parallel = xmlTest.getParallel().isParallel();

    {
      int threadCount = parallel ? xmlTest.getThreadCount() : 1;
      // 1.创建测试方法集合
      DynamicGraph<ITestNGMethod> graph = DynamicGraphHelper.createDynamicGraph(intercept(m_allTestMethods),
              getCurrentXmlTest());
      if (parallel) {
        // 并发执行用例
        if (graph.getNodeCount() > 0) {
          GraphThreadPoolExecutor<ITestNGMethod> executor =
                  new GraphThreadPoolExecutor<>("test=" + xmlTest.getName(), graph, this,
                          threadCount, threadCount, 0, TimeUnit.MILLISECONDS,
                          new LinkedBlockingQueue<Runnable>());
          executor.run();
          try {
            long timeOut = m_xmlTest.getTimeOut(XmlTest.DEFAULT_TIMEOUT_MS);
            executor.awaitTermination(timeOut, TimeUnit.MILLISECONDS);
            executor.shutdownNow();
          } catch (InterruptedException handled) {
            handled.printStackTrace();
            Thread.currentThread().interrupt();
          }
        }
      } else {
        // 串行执行用例
        List<ITestNGMethod> freeNodes = graph.getFreeNodes();

        if (graph.getNodeCount() > 0 && freeNodes.isEmpty()) {
          throw new TestNGException("No free nodes found in:" + graph);
        }

        while (! freeNodes.isEmpty()) {
          List<IWorker<ITestNGMethod>> runnables = createWorkers(freeNodes);
          for (IWorker<ITestNGMethod> r : runnables) {
            // 执行单个用例方法
            r.run();
          }
          graph.setStatus(freeNodes, Status.FINISHED);
          freeNodes = graph.getFreeNodes();
        }
      }
    }
  }

DynamicGraph<ITestNGMethod> graph = DynamicGraphHelper.createDynamicGraph(intercept(m_allTestMethods), getCurrentXmlTest());
DynamicGraphHelper.createDynamicGraph是主要是用于用例执行调度,可以暂时不关注。

TestRunner#privateRun()的核心代码是:

List<IWorker<ITestNGMethod>> runnables = createWorkers(freeNodes);
for (IWorker<ITestNGMethod> r : runnables) {
   r.run();
}
graph.setStatus(freeNodes, Status.FINISHED);

找一个TestNG用例单步调试看下:



步进后知道,调用的是TestMethodWorker#run(),源码如下:

  /**
   * Run all the ITestNGMethods passed in through the constructor.
   *
   * @see java.lang.Runnable#run()
   */
  @Override
  public void run() {
    for (IMethodInstance testMthdInst : m_methodInstances) {
      ITestNGMethod testMethod = testMthdInst.getMethod();
      ITestClass testClass = testMethod.getTestClass();

      invokeBeforeClassMethods(testClass, testMthdInst);

      // Invoke test method
      try {
        invokeTestMethods(testMethod, testMthdInst.getInstance(), m_testContext);
      } finally {
        invokeAfterClassMethods(testClass, testMthdInst);
      }
    }
  }

TestMethodWorker#run()主要干了3件事:
1. TestMethodWorker#invokeBeforeClassMethods()执行用例的@BeforeClass方法
2. TestMethodWorker#invokeTestMethods()执行用例方法本身
3. TestMethodWorker#invokeAfterClassMethods()执行用例的@AfterClass方法

TestMethodWorker#invokeTestMethods()源码如下:

  protected void invokeTestMethods(ITestNGMethod tm, Object instance,
      ITestContext testContext)
  {
    // 执行测试用例方法
    List<ITestResult> testResults =
        m_invoker.invokeTestMethods(tm,
            m_suite,
            m_parameters,
            m_groupMethods,
            instance,
            testContext);

    // 记录测试用例执行结果
    if (testResults != null) {
      m_testResults.addAll(testResults);
    }
  }

可以看到,通过调用m_invoker.invokeTestMethods()方法实现了测试用例方法的执行,并返回测试用例的执行结果。

TestNG关于测试用例的执行基本到此结束,但是还有疑问?
1.m_invoker.invokeTestMethods()如何实现用例方法的执行?
2.测试用例执行结果存储到m_testResults后下一步如何处理?

后续的代码走读中继续研究。

上一篇下一篇

猜你喜欢

热点阅读