Patreon，创作者的会员平台，正在打击AI抓取其内容用于训练目的。周四，该公司分享了它正在与互联网基础设施提供商Cloudflare合作，直接封锁那些旨在未经许可在创作者的作品上训练其AI模型的AI机器人。公司表示，增强这一措施是必要的，因为自2023年首次制定措施以遏制AI爬虫以来，AI抓取已经变得更加复杂。此外，Patreon的付费墙长期以来将创作者的许多内容锁定，无法被爬虫访问。但最近，该公司推出了新的发现工具，如重新设计的首页以及其类似推文的Quips，这可能会使爬虫接触到更多内容。这些变化的出现是因为越来越多的在线出版商和内容创作者正在领悟AI如何利用他们的作品来使他们的AI模型更聪明。为了应对这一问题，Cloudflare现在提供工具，允许网站发布者限制AI机器人，包括一个市场，让网站向AI机器人收取抓取费用，称为按抓取收费（Pay Per Crawl）。本月早些时候，Cloudflare改变了其政策，默认情况下，'混合使用'的爬虫，即那些同时索引和训练网站内容的爬虫，会在任何托管广告的页面上被阻止。Patreon表示，它正在扩大与Cloudflare的现有合作，利用该公司的AI抓取控制技术更新其AI政策和执行工具。这里的区别在于，Patreon现在不仅仅是要求AI爬虫通过robots.txt文件不要抓取内容，而是主动封锁AI训练机器人。Patreon的博客文章解释道：“同意不应该取决于抓取者是否选择行为得当。”在测试这些功能时，个别AI训练爬虫每周尝试访问Patreon的次数从“几千次减少到零”，文章指出。这表明AI抓取者忽略了Patreon的robots.txt文件，尽管有请求仍然抓取网站。然而，公司表示，将允许那些索引页面并组织可以用来将用户返回到Patreon的信息的机器人。“随着AI代理变得越来越强大和流行，创作者应该在他们的作品如何被AI公司使用上获得真正的发言权，”Patreon产品主管Drew Rowny在公告中提到。“在大多数互联网中，创作者为了接触和扩大受众，不得不接受AI对他们作品的训练。Patreon有一个不同的愿景：创作者应该能够扩大他们的受众并控制他们的作品如何被使用。”当您通过我们文章中的链接购买时，我们可能会赚取少量佣金。这不会影响我们的编辑独立性。Sarah自2011年8月起作为TechCrunch的记者工作。在此之前，她在ReadWriteWeb工作了三年多。在担任记者之前，Sarah在多个行业（包括银行、零售和软件）从事IT工作。您可以通过发送电子邮件sarahp@techcrunch.com或通过加密消息联系或验证Sarah的联系，使用Signal的sarahperez.01查看个人资料。