为什么ctests通过此“失败”。即使在失败_regular_expression时测试不匹配？

Question

我在.cmake文件中使用以下几行添加了一个简单的测试：

add_test( NAME ktxsc-test-many-in-one-out
    COMMAND ktxsc -o foo a.ktx2 b.ktx2 c.ktx2
)
set_tests_properties(
    ktxsc-test-many-in-one-out
PROPERTIES
    WILL_FAIL TRUE
    FAIL_REGULAR_EXPRESSION "^Can't use -o when there are multiple infiles."
)

测试传递，testlog显示

----------------------------------------------------------
Test Pass Reason:
Error regular expression found in output. Regex=[^Can't use -o when there are multiple infiles.]
"ktxsc-test-many-in-one-out" end time: Jun 30 16:34 JST
"ktxsc-test-many-in-one-out" time elapsed: 00:00:00
----------------------------------------------------------

我是否将fail_regular_expression转换为

FAIL_REGULAR_EXPRESSION "some rubbish"

测试，即使即使应用与以前打印相同的消息。这次，测试日志显示了

----------------------------------------------------------
Test Passed.
"ktxsc-test-many-in-one-out" end time: Jun 30 16:53 JST
"ktxsc-test-many-in-one-out" time elapsed: 00:00:00
----------------------------------------------------------

我通常在没有*_常规_expression时通常看到的。

为什么会发生这种情况？当fail_regular_expression与不匹配时，如何使CTEST失败测试？

Answer 1

感谢@tsyvarev的答案。

CTEST正在做

match FAIL_REGULAR_EXPRESSION || exit code != 0

确定测试是否失败。如果比赛成功，则未检查退出代码。如果比赛失败，则将检查退出代码，并忽略了失败的匹配。

该文档尚不清楚。我已经阅读了很多次，直到@tsyvarev朝正确的方向转向正确的方向。我也发现这是一个糟糕的行为选择。我所有的工具在存在错误条件时都输出非零错误代码和消息。我需要两者都测试。我之前曾问过这个问题。它需要重复测试。