最近网站的百度蜘蛛在暴涨,也不知道蜘蛛是真是假所以从网上找了一些测试的方法,看看就好了!要知道Baiduspider绝对不会以匿名的方式抓取网页,因此Baiduspider的hostname以 *.baidu.com 或 *.baidu.jp 的格式命名,非.baidu.com或.baidu.jp即是冒充。带有baiduspide和crawl.baidu.com是属于百度自己服务器的蜘蛛,除此之外都属于假蜘蛛。
第一种:
在windows平台下,可以用nslookup命令反解ip来判断是否来自Baiduspider的抓取,点击“开始”-“运行”-“cmd”-“输入nslookup IP地址”-“回车”。
第二种:
通过其它平台进行查询。比如:IP138,站长工具,爱站等等。
提供域名被墙检测、DNS污染查询和域名301跳转。发布者:admin,转转请注明出处:https://www.jiupaicom.com/wangzhanyunying/5389.html