面向创作者的内容变现平台Patreon，正从劝说转向封禁AI爬虫。该公司不再仅通过robots.txt请求机器人停止收集数据，而是开始利用Cloudflare技术主动拦截它们。据Patreon博客报道，AI爬虫无视旧有限制，每周发起数千次访问尝试——如今这一数字已降至零。
Patreon为何采取强硬措施
自2023年Patreon首次引入保护机制以来，AI爬虫技术已变得更为复杂。Patreon的支付网关长期保护内容免受爬虫侵扰，但新功能（如更新的首页信息流和Quips帖子）为AI暴露了更多数据。
Cloudflare现提供限制AI机器人的工具，包括付费爬取市场Pay Per Crawl，网站可借此对爬虫收费。Patreon采用AI爬虫控制技术主动拦截训练机器人，仅允许那些将用户引导回平台的索引机器人访问。
技术层面的变化
Patreon不再依赖被动的robots.txt，而是转向基础设施层面的主动拦截。AI训练机器人现在即使无视标准指令，也无法访问内容。Patreon明确表示：“同意不应取决于爬虫是否选择遵守规则。”
测试显示，单个AI机器人的每周访问尝试次数已从数千次降至零。
Patreon的立场与市场反应
Patreon产品总监德鲁·罗尼表示：“创作者应有权决定他们的作品如何被AI公司使用。我们的愿景是让受众增长，而非强制进行AI训练。”
这是全球趋势的一部分：越来越多的出版商和内容创作者意识到AI正在吞噬他们的内容用于模型训练。Cloudflare最近调整了政策，默认在广告页面上拦截“混合型”爬虫。
常见问题解答
Patreon会拦截所有机器人吗？
不会。允许索引页面并将用户引导回Patreon的机器人。仅拦截那些未经许可训练AI模型的机器人。
这对创作者有何影响？
创作者现在免受未经授权使用其作品进行AI训练的影响。他们可以发展受众，而无需担心内容被未经许可爬取。
Cloudflare的Pay Per Crawl是什么？
这是一个市场，网站所有者可向AI爬虫收取爬取费用。Patreon目前未采用此模式，但正积极拦截未经授权的访问。
Patreon证明，即使是大型平台也能在不妥协的情况下有效保护内容。如果您是创作者，请思考：您的作品如何被AI使用？Patreon提供了一种替代方案——对您劳动成果的控制与尊重。
