一个蜜罐把机器人流量砍掉八成
来源：shkspr.mobi — 2026-11-09
📋 概述
作者的小站 OpenBenches 上个月对外传输了 2.5TB 数据，几乎全是 AI 爬虫在无休止地抓数据和图片。他的做法是「蜜罐加一票否决」：建一个 /honeypot/ 目录，在 robots.txt 里显式 Disallow，然后在每个页面藏一个 aria-hidden、CSS 隐藏、文字为零宽连接符的链接；任何踩进蜜罐的访问者都会被写入 .htaccess 的封禁块，之后一律返回 402。他不看 User-Agent、不看国家、不给警告，也没有申诉渠道。
🔑 核心要点
- 蜜罐页把 IP 与 UA 写进 .htaccess，命中即 返回 402 Payment Required，从此全站禁入
- 封禁规则必须放在所有 RewriteRule 之前，否则完全不生效
- 隐藏链接靠 aria-hidden + display:none + 零宽连接符，正常人既看不见也点不到
- 明确的代价：被劫持 IP 的后来者可能误封、轮换 IP 的机器人被反复记录、规则太多会拖慢 .htaccess 解析
- 聪明爬虫会拒绝访问 /honeypot/ 这种名字，所以作者建议换个不那么显眼的路径
💡 金句
顾名思义，这就是一把粗糙的封禁锤：它不给警告，也不看 User-Agent、国家或任何其他信号。碰到蜜罐就立刻封，没有警告，也没有自动申诉。
👍 0
👎 0
← 返回 Lobsters 首页