Patreon开始屏蔽AI训练机器人

TechCrunch AI·7月17日 23:21 UTC·作者 Sarah Perez

关键信息

Patreon表示，一些新的发现功能，包括重新设计的Home Feed和Quips，可能会让比以往更多的内容暴露给爬虫。平台仍会允许用于索引页面、并帮助把用户引回Patreon的机器人，但会借助Cloudflare的AI Crawl Control专门拦截用于AI训练的机器人。

资讯摘要

Patreon在周四表示，正在通过与Cloudflare合作来加强对AI抓取的防护，主动屏蔽那些收集创作者内容用于模型训练的机器人。此前，Patreon主要依赖robots.txt规则，也就是向爬虫发出“不许访问某些内容”的请求，但公司认为这种方式已经不够了。Patreon称，自从2023年首次推出反爬措施以来，AI抓取技术变得更加复杂。公司还指出，虽然其付费墙已经让大部分内容远离爬虫，但重新设计的Home Feed和Quips等新发现功能，可能会让更多内容暴露给爬虫。

按照新的方案，Patreon将继续扩展与Cloudflare的集成，使用AI Crawl Control来更新AI政策和执行工具。在测试中，公司表示，单个AI训练爬虫每周的访问尝试从数千次降到了零，这说明这些机器人此前确实在无视robots.txt要求并继续抓取。Patreon强调，它仍会允许用于索引页面、帮助整理信息并把用户引回平台的机器人。产品负责人Drew Rowny表示，这一举措是为了让创作者真正决定自己的作品如何被AI公司使用，而不是被迫把AI训练当作增长受众的代价。

资讯正文

创作者会员平台 Patreon 正在加强对其内容被用于 AI 训练的抓取行为的打击。周四，该公司表示，正在与互联网基础设施提供商 Cloudflare 合作，直接阻止那些旨在在未经许可的情况下用创作者作品训练其 AI 模型的 AI 机器人访问内容。

公司表示，这些加强措施是必要的，因为自 2023 年首次采取措施阻止 AI 爬虫以来，AI 抓取行为已经变得更加复杂。此外，Patreon 的付费墙长期以来也让爬虫无法接触到创作者的大部分内容。但更近一些时候，该公司推出了新的发现工具，例如重新设计的 Home Feed，以及类似推文的 Quips，这些功能可能会让更多内容暴露在爬虫面前。

随着越来越多的在线出版商和内容创作者开始正视 AI 出于让其 AI 模型更聪明的目的而摄取他们作品的做法，这些变化也随之而来。为此，Cloudflare 现在提供了一些工具，允许网站出版商限制 AI 机器人，包括一个让网站向 AI 机器人收取抓取费用的市场，名为 Pay Per Crawl。本月早些时候，Cloudflare 还更改了政策，规定“混合用途”爬虫——即既索引又用于训练网站内容的爬虫——在任何投放广告的页面上都会被默认阻止。

Patreon 表示，它正在延伸与 Cloudflare 的现有合作，使用该公司的 AI Crawl Control 技术来更新其 AI 政策和执行工具。不同之处在于，Patreon 不再只是通过 robots.txt 文件要求 AI 爬虫不要抓取内容——这是向机器人提供其网站使用规则的标准方式——而是开始主动拦截用于 AI 训练的机器人。

Patreon 博客文章解释说：“同意不应该取决于抓取器是否选择守规矩。”这句话是在提到更严格措施时写下的。

在测试这些功能时，单个 AI 训练爬虫每周访问 Patreon 的尝试次数从“数千次降为零”，该帖子指出。这表明，尽管 Patreon 提出了请求，这些 AI 抓取器此前仍在无视其 robots.txt 文件，继续抓取该网站。

不过，该公司表示，它会允许那些负责索引页面并整理信息、可用于把用户带回 Patreon 的机器人通过。

Patreon 产品主管 Drew Rowny 在公告中表示：“随着 AI 智能体变得越来越强大、越来越受欢迎，创作者理应对他们的作品如何被 AI 公司使用拥有切实的发言权。在互联网的大多数地方，创作者为了接触并扩大受众，不得不接受 AI 对其作品的训练。Patreon 有不同的愿景：创作者应该能够在扩大受众的同时，控制自己的作品如何被使用。”

在硬件法律战中，OpenAI 发布了一款售价 230 美元、用于 Codex 的键盘

OpenAI 的首款硬件设备据称是一款无屏扬声器，能够移动

Anthropic 的最新广告让人感到不安

Satya Nadella 向使用 AI 的公司发出了惊人警告

苹果针对 OpenAI 的商业秘密诉讼中最离谱的指控

Anthropic 开始为印度定制 Claude 的定价，印度是其除美国之外最大的市场

来源与参考

收录于 2026-07-18