pgrust 作弊被揭:ClickBench 移除其成绩
Remove pgrust: the entry is cheating
ClickBench 基准测试决定移除 pgrust 的条目,因为其提交结果涉嫌作弊。调查证实,pgrust 为 ClickBench 的 43 个查询专门编写了手写内核,并开启了结果缓存机制,导致其“热运行”速度实际上是回放之前的答案,而非真实执行。更严重的是,该引擎无法处理任何超出这 43 个特定形状的查询,一旦查询稍有变动就会直接报错。虽然其返回的答案本身正确,但这本质上是在查询一个针对基准测试的查找表,而非展示真实的数据库性能。这种针对特定基准的过度优化违反了测试规则,因此其成绩被取消。
问题不在于结果错误,而在于这些结果测量的只是基准测试的查找表,而非一个真正的数据库。