网络服务商 Cloudflare 当地时间本月 19 日发布了一项名为 AI Labyrinth 的有趣功能：利用 AI 生成内容以非禁止的方式干扰不遵守“禁止爬取”声明的 AI 爬虫和其它恶意内容爬取机器人。
AI在线注：Labyrinth 一词的含义即“迷宫”。
根据 Cloudflare 的观察，直接硬性禁止恶意爬虫容易激起爬取和反爬两方无休止的“军备竞赛”，与其陷入一场漫长的对抗中不如让爬虫“以为”得到了真实的内容实际上却一无所获。
AI Labyrinth 的具体运作方式是在页面中设置人类使用者无法看到或点击的隐藏链接，仅有恶意爬虫才会注意到它们。而这些链接指向一系列由 AI 生成的页面，爬虫的时间和资源会浪费在这些非真实网站中。
这一功能也意味仅有恶意 AI 爬虫才会陷入到 AI Labyrinth 编织的内容迷宫中，Cloudflare 能更好了解这些爬虫的行为特征，从而为机器人识别提供数据基础。
Cloudflare 表示 AI Labyrinth 向包括免费客户在内的全部使用者提供。
