Nginx通过判断User-Agent禁止爬虫采集并返回炸弹
caddy 有个http.nobots nobots保护你的网站免受网络...