全球主机交流论坛

 找回密码
 注册

QQ登录

只需一步,快速开始

CeraNetworks网络延迟测速工具IP归属甄别会员请立即修改密码
查看: 1341|回复: 0

请教一下这可是百度的什么行为?关于百度蜘蛛的

[复制链接]
发表于 2018-8-31 12:37:57 | 显示全部楼层 |阅读模式
未标题-1.gif (19.47 KB, 下载次数: 2)

每天都有这种分散在全国的各种ip访问网站
UA都是Firefox 43
来源referer都是http://www.baidu.com/s?wd=xxxx
xxxx=各种随机字符数字串
因为百度已经https了,而且已经没有 s?wd= 这种连接结构了
说以这个referer只能是伪造的

我截取了其中的一部分log,如图。
我为什么怀疑是百度呢?因为ip很多,只能是全国都有机房的大公司行为,其中我拉红的两个ip段与Baiduspider的段相同。

请对百度蜘蛛有研究的看看这是百度的什么行为?
您需要登录后才可以回帖 登录 | 注册

本版积分规则

Archiver|手机版|小黑屋|全球主机交流论坛

GMT+8, 2024-3-29 08:48 , Processed in 0.063064 second(s), 9 queries , Gzip On, MemCache On.

Powered by Discuz! X3.4

© 2001-2023 Discuz! Team.

快速回复 返回顶部 返回列表