网站纷纷关门,拒绝AI agents
Websites are closing their doors to AI agents

OpenAI、Meta和Google都在大力推动AI agents,希望它们能帮用户预订晚餐、清理邮箱甚至购物。然而,现实却给了这些巨头一记闷棍:众多主流网站已开始主动封锁AI agents。Yelp要求付费授权才允许接入,Delta Air Lines禁止代订机票,JPMorgan Chase和Charles Schwab则因安全顾虑直接阻断访问。就连Amazon此前也起诉了Perplexity,阻止其AI代理在平台上购物。这场“人机大战”背后,是商业利益与数据安全的激烈博弈。当AI agents试图接管网络时,网站们正悄悄关上大门。
OpenAI、Meta和Google希望AI agents能为你完成一切,但网络上的热门服务并不打算配合。
HN 评论区
149- dawnerd
这些公司现在也陷入了一种“你不能爬我们,但我们可以爬你”的心态。
这对小企业来说真的糟透了。他们的网站被疯狂抓取,却无力或不知道该如何阻止。最终赢家是 Cloudflare,因为他们是最简单的解决方案。
- Jcampuzano2
这是意料之中的。许多关门的公司,其很大一部分收入来自广告和追加销售(upsells),而 AI 代理可以被轻易指示忽略这些内容,也不会像人类那样与之互动。
更直白地说,人们可以指示他们的代理维护自身最佳利益(虽然目前还有漏洞,但它们在这方面的能力正不断提升),而公司对此深恶痛绝。
人们会像多年来绕过广告拦截器那样绕过这些限制,这最终将演变为一场消耗战:这些公司会努力维护他们的护城河,直到找到一种从人们的 AI 代理那里保住收入流的方法。
- Kim_Bruning
这对我完全没问题。我会阅读那些论点,并购买我的代理在开放网络上能找到的东西;这已经够多了。
想论证一个光辉灿烂的新世界,却在一个封闭的网站上?看来我们只能接受这个反乌托邦了。想推销自切片面包发明以来最伟大的小部件?抱歉,我没找到。我买了你竞争对手的劣质小部件。我在实体销售点,却访问不到你的规格表?隔壁货架上的竞争对手就没有这个问题,我去买他们的了。
- variety8675
公司不希望客户能轻松地在他们和竞争对手之间比价,Amazon 的整个前提就是让这一切变得如此简单,以至于你甚至不会去查看竞争对手。AI 代理正在拉平竞争场地,帮助客户找到最优惠的交易,所以他们当然会被封杀。
- MzHN
希望这些公司没有错过其中的讽刺意味。Meta 是反对任何形式的自动化的最激进的公司之一,可能仅次于 LinkedIn。
我正在尝试构建一个个人社交媒体客户端,以防止平台强行把信息流塞给我,只消费我关心的内容,所以这对我来说感同身受。
(我刚刚因为让一个代理关闭了所有 77 个电子邮件通知开关而被 LinkedIn 封禁,事后想想这很明显,但我不会手动去做,因为每个开关都有自己的独立页面,点击次数太多了。)
- WarmWash
一个简单的解决方案是出售一种“网络搜索”订阅附加组件,将其分发到你的代理所使用的网站上。脚本一夜之间就会翻转,ASO(代理搜索优化)就此诞生。这可能是一种互联网十多年来迫切需要的微支付系统形式。
- ondatadome
网站也在向用户关闭大门。我无法注册 GitHub 账户,因为他们使用的第三方机器人防护服务 DataDome,仅凭我的 IP 地址和可能扩展程序组合,就认为我是机器人,无论是在 Firefox 还是 Chromium 浏览器中。DataDome 还阻止我访问 Leroy Merlin、Idealista 以及葡萄牙和西班牙其他几个主要网站的某些区域站点,这些网站的 IT 管理部门突然决定 DataDome 对他们有益。
一年前,我直接联系了 DataDome,他们向我保证“减少误报是他们的首要任务”,他们的过滤器修复了一段时间,直到最近。几天前,我再次联系他们,现在的立场却变了:“我们的支持渠道仅面向客户,此工单将被关闭。”然而,他们的客户根本不知道 DataDome 在干扰他们的终端用户,而且要想联系到一位真正了解其网站使用 DataDome 的技术支持人员,简直难如登天。
DataDome 让我想起了早期的 Cloudflare,当时他们用 Google reCAPTCHA 破坏了许多用户的体验。
- xnx
如果没有便利性护城河,商业将变得更加对抗性:会员定价、监控定价、忠诚度优惠、推出差异化产品以避免比价(就像床垫和 Costco 那样)。
幸运的是,如果 AI 真的具备超人类的能力,它可能仍能在争夺客户的战斗中获胜,并维持价格的竞争力:激进的比价、替代方案发现、谈判、团购等。