9月26日，网络服务商Cloudflare推出了一系列针对AI爬虫的工具。其中包括能查看具体活动的AI审计和一键屏蔽所有AI爬虫的Block AI Scrapers and Crawlers。这些工具利用签名比对、启发式算法、机器学习和行为分析技术来辨别爬虫，并允许用户查看不同类型的爬虫行为，包括访问频率和扫描内容。

对于不确定如何处理这些AI爬虫的网站管理员，还可以使用Block AI Scrapers and Crawlers功能，实现一键屏蔽所有AI爬虫。目前，互联网为许多大型语言模型提供了大部分训练数据，因此许多公司正在通过网络爬虫获取训练数据以提高自家产品的性能。然而，这种行为引起了人们对隐私保护的关注，并导致一些网站流量异常甚至泄露敏感信息。

因此，在当前情况下，各大网络服务商推出禁用AI爬虫的服务也是情理之中的事。

本文属于原创文章，如若转载，请注明来源：一键屏蔽恶意 AI 模型爬虫机器人，Cloudflare 推出“防扒”网络工具https://ai.zol.com.cn/903/9033659.html

https://ai.zol.com.cn/903/9033659.html

ai.zol.com.cn

true

中关村在线

https://ai.zol.com.cn/903/9033659.html

report

649

9月26日，网络服务商Cloudflare推出了一系列针对AI爬虫的工具。其中包括能查看具体活动的AI审计和一键屏蔽所有AI爬虫的Block AI Scrapers and Crawlers。这些工具利用签名比对、启发式算法、机器学习和行为分析技术来辨别爬虫，并允许用户查看不同类型的爬虫行为，包括访...