该解决方案被描述为一个“简单按钮”，旨在防止机器人访问网络内容，而此时正值创作者指责人工智能公司
Cloudflare 是一家以提供互联网安全服务而闻名的公司，最近宣布了一项新功能旨在帮助用户轻松阻止人工智能机器人和数据抓取工具访问其网站。此举正值内容创作者持续担忧的背景下，他们指责人工智能公司在未经明确许可的情况下使用其专有数据来训练人工智能模型。
根据 Cloudflare 的说法，这项新功能将向所有级别的用户开放，包括那些在免费计划上。要激活该功能，用户只需导航到 Cloudflare 仪表板上的“安全”部分，然后在选定的首选项之间切换。
“我们清楚地听到客户不希望人工智能机器人访问他们的网站，尤其是那些不诚实的网站， ”公告中写道。 “为了提供帮助，我们添加了全新的一键式阻止所有 AI 机器人的功能。”
2023 年，Cloudflare 推出了一项功能，使客户能够阻止不遵守规则的 AI 机器人，例如寻求同意在使用许可数据来训练他们的模型之前。然而，Cloudflare 在其帖子中指出，尽管进行了澄清，绝大多数用户仍然选择阻止机器人访问其网站。
Cloudflare 的数据显示，越来越多的机器人仍然试图绕过规则，而不是遵守规则护栏旨在将他们挡在外面。这些机器人通常通过依靠虚假用户代理来误导安全措施来抓取网站，但 Cloudflare 表示，经过一年的监控，我们已经获得了重要的见解。
“可悲的是，我们观察到机器人操作员试图表现得好像他们是真实的机器人一样。通过使用欺骗性的用户代理来访问浏览器，”该帖子写道。 “我们一直在监控这一活动，我们很自豪地说，我们的全球机器学习模型始终将这一活动识别为机器人，即使运营商对其用户代理撒了谎。”
该公司表示，它能够通过多种方法识别伪装成真实网络浏览器的人工智能机器人，包括使用机器人评分指标系统。此外，Cloudflare 表示，考虑到该公司每秒 5700 万个请求，大规模抓取网站的机器人尝试留下了几个易于识别的明显指纹。
主流机器人受到了所有关注
Cloudflare 透露，用户很大程度上包含来自主流 AI 的机器人活动开发商，但鲜为人知的公司却在暗处运作。分析表明，字节跳动的机器人 Bytespider 在活动方面领先于其他机器人，爬行了 40.40% 的跟踪网站。
Bytespider 的表现优于 OpenAI 的 GPTBot 以及 Meta（纳斯达克股票代码：META）、Anthropic AI 和 Google 的其他爬虫（纳斯达克股票代码：GOOGL）领先一英里，该公司承诺利用新兴技术组合打击绕过护栏的企图。
“我们担心一些意图规避规则访问内容的人工智能公司将持续适应逃避机器人程序检测，”Cloudflare 说道。 “我们将继续密切关注，并在我们的人工智能抓取工具和爬虫规则中添加更多机器人块，并发展我们的机器学习模型。”面对挑战，它需要集成一个企业区块链系统，确保数据输入质量和所有权——使其能够保证数据安全，同时保证数据的不变性。查看 CoinGeek 对这项新兴技术的报道，了解更多为什么企业区块链将成为人工智能的支柱。
观看：sCrypt 黑客马拉松学生意识到区块链还有更多内容
区块链新手？查看 CoinGeek 的区块链初学者部分，这是了解更多区块链技术的终极资源指南。
以上是互联网安全公司 Cloudflare 宣布推出一种新颖的解决方案，以遏制人工智能 (AI) 机器人和数据抓取工具在其网站上的活动，以'维护安全的互联网”。的详细内容。更多信息请关注PHP中文网其他相关文章！
