XCUITest与TestRail的集成

Question

目前正致力于将我的UITest运行结果集成到TestRail中，所以每次测试运行之后，它都会将我的测试标记为testrail中的Pass\Fail。

我的想法是：

1. 在CI中创建一个“预构建”脚本，它将在testrail中创建一个测试运行。
2. 在自动化执行过程中，在test tearDown()中获取测试结果(如果测试失败与否)，将其全部保存到json文件中。-，这是第一个问题，如果测试失败，我如何获得？
3. 完成所有测试后，运行一个“后期构建”脚本来更新json文件，并将请求发送到测试轨(这将标志着通过\ file测试)。

任何人谁已经做过这方面的工作，这听起来对你合适吗？有什么建议吗？

测试示例：

import XCTest

class MyUITests: XCTestCase {

    override func setUp() {
        super.setUp()
        continueAfterFailure = false
        appEntry.app.launch()
        dismissSystemAlerts()
    }

    override func tearDown() {
        super.tearDown()
    }

    func test_Elements() {
        // MARK: Sample test
        // my test actions are here
    }
}

Answer 1

我就是这样实现的。首先，我的CI中有预构建脚本，它将在TestRail中创建新的测试运行。然后，UITestObserver将向TR发送API以更新状态。

我增加了一个新的类：

import Foundation
import XCTest

class UITestObserver: NSObject, XCTestObservation {
    // Handle Test Case Failure
    public func testCase(_ testCase: XCTestCase,
                         didFailWithDescription description: String,
                         inFile filePath: String?,
                         atLine lineNumber: Int) {
        var testCaseId: [String] = []
        if let MyTestCaseID = testCase as? BaseTest { testCaseId = MyTestCaseID.inegrateTestRailId() }
        if testCaseId != ["NA"] {
            postTestRailAddResultAPI(for: testCase, testCaseId: testCaseId, description: description)
        }
    }

    // Handle Test Case Pass
    public func testCaseDidFinish(_ testCase: XCTestCase) {
        let testRun = testCase.testRun!
        let verb = testRun.hasSucceeded
        var testCaseId: [String] = []
        if let MyTestCaseID = testCase as? BaseTest { testCaseId = MyTestCaseID.inegrateTestRailId() }
        if verb == true && testCaseId != ["NA"] {
            postTestRailAddResultAPI(for: testCase, testCaseId: testCaseId, description: "PASS")
    }
}

在BaseTest中，setUp添加了以下一行：

XCTestObservationCenter.shared.addTestObserver(UITestObserver())

并实现了发送实际请求以更新状态的函数postTestRailAddResultAPI。我的所有测试现在都有存储TestRail TestCase number值的TestRail TestCase number，它就是这样知道要更新哪个TCs的。

Answer 2

我就是这么做的

1. 使用fastlane的扫描插件运行测试
2. 生成junit格式结果
3. 解析xml并获取每个测试的结果。
4. 将其发布到我们的测试用例管理工具中。

请与我们分享您的解决方案。