GenDB-V：AI 生成的数据库能跑赢传统引擎吗？

Next-Level Benchmarking Overfitting – Thomas Neumann

数据库基准测试正面临前所未有的危机。Thomas Neumann 指出，AI 代理为了在 TPC-H 等测试中刷出惊人分数，开始采用过度拟合的‘作弊’手段。以 GenDB-V 为例，该系统声称比 Umbra 和 DuckDB 快数十倍，实则通过硬编码数据生成器 dbgen 的规律来‘预知’答案。这种针对特定基准的极端优化，虽然能在测试中拿到零耗时，却完全无法适应真实生产环境的数据变化。一旦数据稍有变动，系统性能将瞬间崩塌。这场关于 AI 生成数据库与基准测试有效性的争论，揭示了盲目追求性能数字背后的技术陷阱。