OpenAI等巨头支持新标准允许拒绝AI抓取
原文：The biggest names in AI are backing a new way to opt out of scraping
据Search Engine Roundtable早些时候报道，OpenAI、Google、Microsoft和Anthropic表示他们将采用一项新标准，出版商可以用它来选择退出被AI抓取。借助这一控制机制，出版商可以跨多家AI公司统一应用其AI训练偏好，而不必逐家单独设置。这一共享的“策略令牌”信号由Anthropic标准技术负责人Kevin Kelley提出，属于互联网工程任务组（IETF）工作的一部分。它将存在于网站的robots.txt文件中——该文件长期以来一直用于标示哪些网络爬虫可以或不可以抓取网站，无论是用于搜索索引、存档还是……（完整报道请见The Verge）