教程
用Nginx限制谷歌蜘蛛抓取频率
前言:站长对蜘蛛的感情,就像少女第一次约会的心情 - 怕他不来,又怕他乱来。谷歌蜘蛛频繁抓取导致服务器负载很高,可用Nginx的ngx_http_limit_req_module模块限制了谷歌蜘蛛的抓取频率,配...