全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworks网络延迟测速工具IP归属甄别会员请立即修改密码
查看: 805|回复: 9

这个UA服不服

[复制链接]
发表于 2021-1-16 20:44:44 | 显示全部楼层 |阅读模式
  1. 时间        2021-01-16 18:08:41       
  2. 客户IP        183.136.225.56:29591               
  3. 类型        GET        状态        200        响应大小        21.83 KB
  4. 协议
  5. HTTP/1.1
  6. URI
  7. /
  8. 来路
  9. None
  10. User-Agent
  11. Baiduspider+(+http://www.baidu.com/search/spider.htm);googlebot|baiduspider|baidu|spider|sogou|bingbot|bot|yahoo|soso|sosospider|360spider|youdaobot|jikeSpider;)
复制代码


googlebot|baiduspider|baidu|spider|sogou|bingbot|bot|yahoo|soso|sosospider|360spider|youdaobot|jikeSpider
发表于 2021-1-16 20:47:54 | 显示全部楼层
好家伙,我直接好家伙


​​​​​​​
发表于 2021-1-16 20:49:48 | 显示全部楼层
Baiduspider+  牛
发表于 2021-1-16 20:52:41 | 显示全部楼层
直接 ban ip 和 UA
发表于 2021-1-16 21:28:41 来自手机 | 显示全部楼层
这就拿去注册账号试试看hhh
发表于 2021-1-16 21:30:41 | 显示全部楼层
这就加个判断 匹配出2个bot直接ban
发表于 2021-1-16 21:32:53 | 显示全部楼层
这些公司的爬虫业务都是外包给我这数据中心做的
发表于 2021-1-16 22:45:44 来自手机 | 显示全部楼层
好家伙,我直接好家伙
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2024-4-20 01:19 , Processed in 0.060485 second(s), 8 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表