← 返回 Claude AI IP 检测更多资讯 →

Anthropic 想用一份 robots.txt 换澳大利亚的训练许可

首页 › AI 资讯 › Claude 资讯 · 2026-10-02 · Net.Coffee

有条件批准、退出制与新闻议价:下周悉尼听证会前,澳大利亚 AI 版权之争的几条主线

要点:Anthropic 在提交给澳大利亚议会人工智能联合特别委员会的意见书里,建议对 AI 训练采取「有条件批准」:版权方不主动用 robots.txt 拒绝,模型就可以拿澳大利亚内容来训练。ABC 与 SBS 在同一轮意见征集中明确反对,要求 AI 公司付费、并纳入新闻议价机制。下周悉尼听证会上,Anthropic 与 OpenAI 的高管都会到场。

Anthropic 实际提了什么

据《卫报》等澳媒报道,Anthropic 的方案被它自己称为一种「范围较窄的有条件批准」。核心是把默认值倒过来:不是先拿授权再训练,而是先允许训练,版权方若不愿意,就在网站上通过 robots.txt 屏蔽 AI 爬虫,相当于「退出」。

这一步的分量要放在澳大利亚自己的进度里看。澳政府此前已经公开排除了「文本与数据挖掘豁免」——也就是那种不问版权方、直接为 AI 训练开绿灯的例外条款,目前仍在讨论别的版权安排。Anthropic 的提议在形式上避开了「豁免」这个已被否掉的词,但效果上离它并不远:只要版权方没动作,训练就是被允许的。

两家公共广播的反驳

ABC 和 SBS 的意见书火力集中在两点:

SBS 还点名称,ChatGPT 和 Claude 这类大模型在未经许可、未署名、未付费的情况下使用新闻内容,威胁到新闻业的可持续性和公众信任。

robots.txt 管不到的地方

抛开立场,这场争论里最实在的技术问题是:robots.txt 只在「抓取发生的那一刻」生效。它挡不住三类情况——此前已经被抓走、进了训练集的存量内容;被转载、聚合到第三方网站上的副本;以及根本不读这份文件的爬虫。对一家每天被大量转发的新闻机构来说,就算自家站点屏蔽得再干净,内容依然可能经由别处进入语料。

另一个隐含成本落在小版权方身上。大型媒体有技术团队逐个维护爬虫名单,独立作者、小出版社、个人博主未必知道该屏蔽哪些 User-Agent,更不会持续跟进新冒出来的爬虫。「退出制」在纸面上给了所有人同样的选择权,实际上只有资源足够的一方用得上。

为什么是 Anthropic 先开口

Anthropic 在版权问题上并不是旁观者。2025 年它在美国就作者集体诉讼达成约 15 亿美元的和解,争议焦点正是训练数据的来源。这段经历让它比多数同行更清楚「事后赔」有多贵——在一个尚未定规则的市场里,抢先把「退出制」写进讨论框架,比等到判例出来再应对要主动得多。

澳大利亚的分量也不只在本国市场。它是少数真正让平台为新闻付过钱的国家,新闻议价机制当年就被多国当作参照。如果 AI 训练最终也被拉进同一套框架,影响会外溢到别的司法辖区;反过来,如果退出制在这里获批,它同样会被拿去别处当先例。下周的听证会上,Anthropic 需要回答的恐怕不是「退出制是否合理」,而是「谁来保证爬虫真的会退出」。