跳出单元测试迷思:重构测试词汇
A Better Vocabulary for Testing

现有的软件测试术语如单元测试、集成测试和E2E测试往往定义模糊,分类基于直觉而非严谨标准。作者提出一套更实用的测试词汇体系,从测试范围(Scope)、测试目的与假设(Purpose and Hypotheses)以及测试预言机(Oracles)三个维度重新解构。文章深入探讨了如何通过Design by Contract(DbC)约束输入空间,区分状态与无状态测试,并对比了人工“ tinkering”、基于示例的测试及快照测试(Snapshot Testing)等不同预言机策略。这套新词汇旨在帮助开发者根据资源情况灵活升级或降级测试策略,让测试工作更加可操作且高效。
传统的软件测试本质上是对人工调试测试的编码化。
HN 评论区
21- jph
在我看来,用语义化的命名词汇配合语义化的错误提示词汇来写测试,是唾手可得的优化点。
举个例子:assert_approx_eq_with_relative_error!(a, b, err)。这是一个语义化的名称,能更清楚地解释它的功能;同时这个宏提供的测试失败信息也能引导开发者(或 AI)去修复问题或查阅文档。
我写了一个 Rust 库 Assertables 来辅助实现这一点。参见 https://crates.io/crates/assertables。
我学到的经验是,编写语义化测试能助力更多高价值的测试类型。正如文章中提到的具体例子,我用枚举测试来证明 Rust 中英国国民医疗服务号码(NHS Number)验证器的准确性,也就是说,测试会字面意义上地检查每一个号码;之后我就可以写出像 assert_valid_nhs_number("111 111 1111") 这样的测试。
- ozim
我希望把“非功能测试”改称为“跨功能测试”。
- FabCH
我发现所有这些分类最大的问题在于,归根结底,开发者只会写当下对他们管用的东西,而不在乎是否符合你设定的理论框架。
我写过一篇论文来研究开发者实际写的测试是什么样的:https://ieeexplore.ieee.org/document/11081450