java - 使用 PIT 查找无用的单元测试

Question

假设我们有一段代码要测试:

class C {
    int doSmth() {
        return 1;
    }
}

现在假设我们在一个类中放置了 2 个单元测试。 第一个“测试一切”，而第二个“什么都不做”:

@RunWith(JUnit4.class)
public final class CTest {

    @Test
    @SuppressWarnings("static-method")
    public void testDoSmth() {
        assertEquals(1, new C().doSmth());
    }

    @Test
    @SuppressWarnings("static-method")
    public void testDoSmth2() throws Exception {
        Thread.sleep(1000);
    }
}

这是一个 IRL 示例:我已经看到许多测试通过用一些无用的代码替换测试内容来“修复”， 随着被测试代码的契约随时间而变化。

现在，PIT“入口”单元是一个包含测试方法的类(不是单独的测试方法本身)， 所以在上面的例子中，PIT 不仅会显示 100% 的行覆盖率，还会显示 100% 的突变覆盖率。

好吧，知道我有 100% 的突变覆盖率，我感到很欣慰， 但是我如何识别一个无用的测试——testDoSmth2() 在上面的例子中(假设我的突变覆盖率很高)？

Answer 1

pitest 目前没有内置任何内容，但是您需要检测无用(就检测故障而言)测试的数据已经存在。

XML 报告输出每个突变的杀死测试(通常在测试方法级别)。任何不能杀死突变的测试都可以在不影响突变分数的情况下被删除。

当然，由于其他原因，例如，不杀死突变的测试可能仍然有值(value)。描述一个单元的作用。

然而，静态分析可以更有效地检测您示例中显示的极端情况 - 测试显然不会执行任何代码，因此不可能检测到其中的错误