The Verge · AI· Emma Roth·· 1 天前精选AI 评分79
OpenAI、Google、Microsoft 和 Anthropic 支持新的 AI 抓取退出标准
The biggest names in AI are backing a new way to opt out of scraping
AI 导读
OpenAI、Google、Microsoft 和 Anthropic 表示将采用一种共享标准，让网站发布者通过 robots.txt 中的“policy token”统一选择退出 AI 抓取。Anthropic 已采用该信号，Google 和 Microsoft 计划明年支持，OpenAI 将在未来几个月实施；Microsoft 和 Google 表示，网站仍会出现在搜索结果中。
推荐理由
多家 AI 公司将围绕 robots.txt 采用共享信号，内容具体说明了发布时间表及其对 AI 训练、grounding 和搜索可见性的不同影响。
来源：The Verge · AI · theverge.com