将代码加入不让蜘蛛抓取的段内
if ($http_user_agent ~* (baiduspider|googlebot|soso|bing|sogou|yahoo|sohu-search|yodao|YoudaoBot|robozilla|msnbot|MJ12bot|NHN|Twiceler)){ return 403; }
放入server段内则全站生效，放在location则只有对应的段生效对其他独立的location段无影响.
Nginx 屏蔽搜索引擎蜘蛛
标签
1) 办理的条件和资料
内地居民，年满18岁，且有内地的招行一卡通金卡，或一卡通普卡且总资产达5万人民币。最好还有内地招行的网银和U盾（香港招行可共用内地招行的U盾）。
需要准备的资料是身份证、...
2016-01-17
发表评论