(已解决) 20块钱求写一段代码

ieevip

环境：宝塔 nginx
禁止蜘蛛抓取某个目录或者动态链接

下面这段代码是完全屏蔽百度的 返回404
if ($http_user_agent ~* baiduspider){
return 404;
}

我想要的代码是 就是禁止百度抓取某个页面并返回404

例如 禁止百度抓取 /123/ 当蜘蛛访问这个目录则返回404
还有就是链接为  /?cid=后面随机数字  抓取动态链接都返回404  不影响正常用户访问 应该懂我的意思

求大佬写代码 写好后 给你20块钱红包！对于我这种小白，也只能求助大佬了。

alfonse

1. location / {
   
2.     set $flag 0;
   
3.       if ($query_string ~* ^(.*)cid=(.*)$){
   
4.         set $flag "${flag}1";
   
5.       }
   
6.       if ($http_user_agent ~* Baiduspider) {
   
7.       set $flag "${flag}1";
   
8.     }
   
9.     if ( $flag = "011"){
   
10.           return 404;
    
11.     }
    
12. }
    
13. location ~^/123/ {
    
14.         if ($http_user_agent ~* Baiduspider) {
    
15.           return 403;
    
16.         }
    
17. }

复制代码

wwww961h

012 发表于 2020-4-26 10:33
直接写到robot行不行。。

robot完全阻止不了百度蜘蛛，不信你试试

ieevip

写好后 发代码 我会私信加你QQ 然后给你发红包

师太

htaccess

ieevip

师太 发表于 2020-4-26 10:27
htaccess

不会开启htaccess   nginx里可以实现 但是不会写代码

ieevip

没人会吗

xyk

套cf有这个功能

012

直接写到robot行不行。。

ieevip

012 发表于 2020-4-26 10:33
直接写到robot行不行。。

你以为他们会遵守这个协议？

012

ieevip 发表于 2020-4-26 10:34
你以为他们会遵守这个协议？

在我眼中百度多么清纯。。
我去看看nginx
这样？
location /（你要屏蔽的path） url {
if ($http_user_agent ~* baiduspider){
return 404;
}
}
location ~ /cid?={
if ($http_user_agenr ~* baiduspider){
return 404;
}
}
加到nginx.conf里面
(肯定是可以合并的，但是咱不是做后端的不会玩nginx。。)