开源开发者用"阿努比斯"工具和陷阱对抗AI爬虫面对无视 robot.txt 协议的AI爬虫持续攻击，开源开发者推出反向验证工具 Anubis 和内容迷宫陷阱 Nepenthes ，其中 Anubis 上线三天即获2000颗GitHub星标，而Cloudflare同期也发布了类似工具AI Labyrinth

1. 05:01 · Mar 28, 2025 · Fri

   

   ×

   

   开源开发者用"阿努比斯"工具和陷阱对抗AI爬虫
   
   面对无视 robot.txt 协议的AI爬虫持续攻击，开源开发者推出反向验证工具 Anubis 和内容迷宫陷阱 Nepenthes ，其中 Anubis 上线三天即获2000颗GitHub星标，而Cloudflare同期也发布了类似工具AI Labyrinth。
   
   来源：TechCrunch