真假蜘蛛的ip辨别方法

2016-09-20 17:40 阅读 545 views 次 评论 2 条

有时候需要屏蔽很多无用的蜘蛛,当然包括一假蜘蛛,那么该如何判别哪个是真蜘蛛哪个是假蜘蛛呢?

我们通过dos命令来查看,IP段220.1通过3个
ip117.163.147.0
220.177.255.179
220.181.108.113
来辨别蜘蛛的真假

开始—运行—输入 cmd ,用命令nslookup +ip ,具体的操作以上视频也已经显示出来了。

只要是百度的IP段,代码中会有出现:name:baiduspider,如果没有出现,那就不说明不是真的百度IP段(假蜘蛛),当然其他的蜘蛛也一样可以判别的,比如谷歌  360等等。

百度官方文档这样记录真蜘蛛:
新版移动ua:
Mozilla/5.0 (Linux;u;Android 4.2.2;zh-cn;) AppleWebKit/534.46 (KHTML,like Gecko) Version/5.1 Mobile Safari/10600.6.3 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)
电脑(pc) ua:
Mozilla/5.0 (compatible; Baiduspider/2.0; +http://www.baidu.com/search/spider.html)

版权声明:本文著作权归原作者所有,欢迎分享本文,谢谢支持!
转载请注明:真假蜘蛛的ip辨别方法 | 小发SEO
分类:SEO解疑 标签: