LLM 爬虫逼我放弃建站
Running web sites makes me not want to

几年前,我满怀热情地开始 self-hosting,享受搭建和维护的过程。然而,LLM Scrapers 的泛滥彻底改变了这一切。我的服务器被来自 Meta、Azure、Alibaba 等云厂商的 IP 范围疯狂扫描,甚至饱和了我的上行带宽。为了对抗这些“合法”的 DDOS,我不得不部署 Anubis、iocaine 和 nft-blackhole 等工具,但这依然无法阻挡企业级的抓取。这种被动的防御让我感到窒息,甚至萌生了关闭摄影网站、只发行实体 zine 的念头。我不想让多年的心血成为训练 AI 的廉价数据,更不想在对抗算法的军备竞赛中耗尽精力。或许,回归物理世界才是唯一的出路。
这让我感到恼火的是,企业抓取网络变得如此理直气壮,只为把一种糟糕的创造力仿制品卖回给我们。