Junglecola (@Notch) 在 CF数据指出 Anthropic 网页抓取与导流比例约 2800:1 中发帖
Cloudflare 数据显示,7 月 1 日至 7 日,Anthropic 的机器人每抓取约 2800 个网页,才向内容网站带回一次访问,抓取与导流比例在主要 AI 公司中最高。该比例较 4 月初约 8800 比 1 有所下降,但在 5 月首周一度达到 24700 比 1。
这一指标用于比较 AI 机器人抓取网页的频率与其产品向原网站导流的次数。Anthropic 此前质疑 Cloudflare 的统计方法,称无法验证相关计算,并表示新搜索功能正在增加网站访问量。
[image]
来源: Anthropic Treats the Web Like an All-You-Can-Eat Buffet - Business Insider