「ユニットテスト」の定義は曖昧すぎる——テスト用語を再設計する
A Better Vocabulary for Testing

ソフトウェアテストの用語は「ユニット」「統合」「E2E」といった分類が曖昧で、現場では「雰囲気」で使われている。著者はテストをスコープ(関数・モジュール・システム、状態の有無)、目的と仮説(機能的正しさ・性能・セキュリティ・耐障害性)、オラクル(人間の判断・具体例・インラインアサーション)の3軸で整理し直す。リソースに応じてテストを昇格・降格できる実用的な語彙を目指す。
伝統的なソフトウェアテストとは、結局のところ、人間が手を動かして試す「ティンカーテスト」をコード化したものにほかならない。
HNでの議論
21- jph
個人的には、セマンティックな命名語彙とセマンティックなエラー語彙を使ってテストすることが、すぐにでも手を付けられる改善点だと思う。
例として、マクロ `assert_approx_eq_with_relative_error!(a, b, err)` がある。これは何をするのかをより説明するセマンティックな名前で、さらにテスト失敗時のメッセージも提供し、開発者やAIを修正やドキュメント作成へと導いてくれる。
これを支援するためにRustクレートのAssertablesを書いた。https://crates.io/crates/assertables を見てほしい。
学んだのは、セマンティックなテストを書くことで、より価値の高い多くの種類のテストが可能になるということだ。記事で説明されている具体例として、UK National Health Service NumberのバリデータがRustで正確であることを証明するために列挙テストを使っている。つまり、テストは文字通りすべての番号をチェックし、その上で `assert_valid_nhs_number("111 111 1111")` のようなテストを書ける。
- ozim
「非機能テスト」は「横断的機能テスト」と呼ぶべきだと思う。
- FabCH
こうした分類すべての最大の問題は、結局のところ開発者はその場で自分にとってうまくいくものを書き、それがあなたの理論的な枠に収まるかどうかは気にしないということだ。
かつて、開発者が実際にどんなテストを書くのかを調べる論文を書いた:https://ieeexplore.ieee.org/document/11081450