ベンチマーク結果を鵜呑みにするな、Brendan Greggが「アクティブ・ベンチマーキング」を提唱
Active Benchmarking

Brendan Gregg氏は、ベンチマークを実行して結果をそのまま受け入れる「パッシブ・ベンチマーキング」の問題を指摘する。実行中にvmstatやperf、eBPFなどのツールでシステム全体を分析し、真のボトルネックを特定する「アクティブ・ベンチマーキング」を提唱。単一スレッド制限やネットワークの影響など、見落とされがちな落とし穴をチェックリスト形式で解説する。
casual benchmarking: you benchmark A, but actually measure B, and conclude you've measured C.