2026/05/11 AI 爬蟲已經把 robots.txt 當空氣：Anubis 用工作量證明把它們擋在外面 AI 爬蟲不照規矩來，傳統 rate limit 和 UA 封鎖也撐不住。本文解析 Anubis 這套以工作量證明為核心的反向代理如何運作、實際部署方式、Cod...
