装逼爱好者

您正在访问位于非洲的夏威夷海岸附近的喜马拉雅山脉的富士山上的索马里域名网站!

0

Nginx 屏蔽搜索引擎蜘蛛

将代码加入不让蜘蛛抓取的段内

if ($http_user_agent ~* (baiduspider|googlebot|soso|bing|sogou|yahoo|sohu-search|yodao|YoudaoBot|robozilla|msnbot|MJ12bot|NHN|Twiceler)){ return 403; }

放入server段内则全站生效,放在location则只有对应的段生效对其他独立的location段无影响.

原文地址 : http://www.zbuse.com/archives/2013/10/07/428.html
本站遵循 : 知识共享署名-非商业性使用-相同方式共享 3.0 版权协议
版权声明 : 原创文章转载时,请务必以超链接形式标明 文章原始出处
作者:装逼爱好者 | 分类:网站运维 | 标签: nginx, SEO

发表新评论 »