AI代理大战:Cloudflare与Perplexity重塑网络经济

Fastcompany

数字战场正日益激烈,其核心是关于谁控制互联网海量信息访问权的根本分歧。全球网络基础设施巨头Cloudflare已明确划清界限,指责Perplexity AI的“AI代理”采用欺骗性策略绕过网站限制。这场日益升级的冲突,在一份最近的Fast Company报告中详细阐述,不仅仅是一场技术争端;它代表着一场迫在眉睫的“AI代理大战”,将重塑网络的经济基础。

Cloudflare的指控非常严厉:据报道,Perplexity的AI机器人正在伪装其身份,修改用户代理以模仿Google Chrome等常见浏览器,并轮换IP地址以逃避检测。这种复杂的混淆据称使它们能够系统地抓取数千个明确禁止其访问的域内容,通常是通过标准的robots.txt文件或Web应用防火墙(WAF)。Cloudflare声称已观察到这种“隐秘抓取”行为遍及数万个域,每天产生数百万次请求,并已将Perplexity从认证机器人列表中删除,实施了新的默认阻止措施。Cloudflare首席执行官Matthew Prince甚至暗示,完全阻止像Perplexity的Comet这样的AI浏览器是可能的,这凸显了他们立场的严峻性。该公司的动机很明确:保护发布者对其内容的控制权以及将其货币化的能力。Cloudflare于6月推出的“按抓取付费”计划证明了这一承诺,该计划允许网站向AI公司收取数据访问费用,自7月以来已有超过250万个网站选择阻止AI训练。

然而,Perplexity AI强烈否认有任何不当行为,反驳Cloudflare的说法。这家AI搜索初创公司辩称,Cloudflare根本上误解了其机器人活动,声称其AI代理是代表特定用户请求行事,而非执行一般的网络抓取。从Perplexity的角度来看,如果人类用户可以访问内容,那么作为其代理的AI代理也应被授予相同的访问权限。Perplexity并未否认其代理在某些情况下可能绕过robots.txt,但其辩解称,其工具是“用户驱动的AI助手”,不应受制于与传统、不加区别的网络爬虫相同的限制。Perplexity将一些所谓的“隐秘”活动归因于其偶尔使用第三方云浏览器服务,声称Cloudflare可能将其与自己的直接流量混淆了。此外,Perplexity已启动一项“发布者计划”,旨在与内容合作伙伴分享广告收入,将其定位为AI代理活动货币化的可扩展模式。

这场争议揭示了塑造互联网未来的深刻哲学分歧。几十年来,网络的经济模式一直依赖于人类的注意力,将流量引向网站,从而通过广告和订阅产生收入。AI代理能够通过总结内容直接回答查询,而无需用户访问源网站,这威胁着打破这一既定链条。Cloudflare的立场捍卫了内容创作者在AI模型贪婪消耗数据的时代控制和货币化其知识产权的权利。相反,Perplexity倡导信息无缝流动以赋能AI助手,认为限制它们会阻碍创新,并通过提供不完整或过时的答案来侵蚀用户信任。

Cloudflare与Perplexity的冲突只是更广泛战役中的一个阵线。BBC和日本的《读卖新闻》等主要出版商已对Perplexity提起版权侵权诉讼,指控其未经授权使用其内容并无视网络标准。这种日益加剧的紧张局势凸显了制定新行业标准和货币化模式的紧迫性,以适应AI代理的兴起。由于目前超过一半的网络活动已自动化,并且“零点击”AI浏览体验的便利性日益受到关注,网络的根本经济学正面临着彻底的转型。“AI代理大战”的结果不仅将决定内容创作和消费的未来,还将决定谁掌握互联网信息高速公路的钥匙。