Cloudflare推出AI迷宫，打击爬虫滥用行为
Cloudflare开发了一种名为“AI迷宫”的工具，旨在通过生成大量垃圾内容来消耗AI爬虫的资源。这一举措是为了应对近1%的网络访问请求来自AI爬虫的情况，这些爬虫可能用于收集数据以训练AI模型。该解决方案允许用户使用爬虫访问网站，但网站本身会利用生成式AI创建看似真实但毫无价值的内容，使爬虫陷入无意义的链接迷宫，从而浪费其时间和资源。
Cloudflare表示，这些内容不会影响网站声誉或搜索引擎优化，但能有效增加爬虫操作的成本，起到威慑作用。此外，这一工具还能帮助识别和标记恶意爬虫。Cloudflare计划未来进一步优化这一系统，使其更难以被爬虫识别。用户可通过管理控制台启用“AI迷宫”功能。
Telegram 评论区
35 条回复，可以前往 Telegram 继续讨论。