不用 CDN 也能挡住大部分 Bot
How to Block Some of the Bots
我分享了一套无需 CDN 即可拦截劣质 Bot 的实战方案。从强制 HTTP/2.0 协议到利用 BGP 工具屏蔽数据中心 IP,再到通过 User-Agent 和 Sec-Fetch-Mode 等客户端信号进行过滤,这些方法能有效识别并阻断 GoogleBot 等过时爬虫。虽然这些策略可能误伤部分真实用户或搜索引擎,但通过仔细测试和调优,你可以在不依赖昂贵服务的情况下,大幅减少服务器上的垃圾流量。
这些方法我使用了很长时间且行之有效,但它们未必适合你,甚至可能误封你的亲戚或老板,请务必在充分测试后自行决定风险。