众力资讯网

一句话,让四大AI巨头让步 10月30日,OpenAI、谷歌、微软和Anthropic同日表态,将支持同一个robots.txt训练退出信号。以前网站想不被拿去训练,得给每家爬虫各写一条规则,现在一行就能向参与的厂商表达同一个意愿。 这行规则长这样:在robots.txt里写上策略标记__usage_ai-training,再配上不允许训 ​

一句话,让四大AI巨头让步

10月30日,OpenAI、谷歌、微软和Anthropic同日表态,将支持同一个robots.txt训练退出信号。以前网站想不被拿去训练,得给每家爬虫各写一条规则,现在一行就能向参与的厂商表达同一个意愿。

这行规则长这样:在robots.txt里写上策略标记__usage_ai-training,再配上不允许训练的范围,个别栏目还可以单独放行。它只管训练这件事,不管抓取和搜索收录,也不决定内容会不会出现在AI的回答里。

四家的时间表并不统一。Anthropic表示已经开始实施,OpenAI说会在未来几个月内落地,微软定在2027年2月1日起按抓取生效,谷歌则把目标定在2027年。微软还走得更远一些,另设了一个关于内容能否用于回答佐证的接地控制。

对网站和创作者来说,这是一次省事的进步,但也要看清它的边界。它目前还只是一份个人提交的互联网草案,不是已经通过的正式标准,而且整个机制靠自愿遵守来执行,已经进入现有数据集的内容也不会因此被删掉。

喜欢的话点个赞、点个关注,我会持续更新汽车、AI、具身智能行业的最新进展,和大家一起见证物理 AI 进入真实世界!