加入收藏 | 设为首页 | 会员中心 | 我要投稿 李大同 (https://www.lidatong.com.cn/)- 科技、建站、经验、云计算、5G、大数据,站长网!
当前位置: 首页 > 创业 > C语言 > 正文

如何判断百度蜘蛛(Baiduspider)是否为假冒,真伪判断

发布时间:2020-12-15 02:42:15 所属栏目:C语言 来源:网络整理
导读:我们查看IIS日志的时候会看到百度蜘蛛:Baiduspider+(+http://www.baidu.com/search/spider.htm)来爬行我们的网页,但是我们怎么判断爬行我们网站的是不是真正的百度蜘蛛呢。如果你用的是Windows操作系统那么可以用Windows自带的命令行命令tracert来判断是否

  我们查看IIS日志的时候会看到百度蜘蛛:Baiduspider+(+http://www.baidu.com/search/spider.htm)来爬行我们的网页,但是我们怎么判断爬行我们网站的是不是真正的百度蜘蛛呢。如果你用的是Windows操作系统那么可以用Windows自带的命令行命令tracert来判断是否只真正的百度蜘蛛。

  查看Baiduspider的IP,然后点击开始运行,输入cmd,打开命令行,然后输入tracert 123.125.71.98,这里123.125.71.98代表网站日志里的Baiduspider的IP,那么可以看到如下的内容:

  如果里面有crawl.baidu.com的内容,那么说明就是真正的百度蜘蛛,如假包换。

  上面这个截图里面含有ad,(baiduspider-ad-123-125-71-98.crawl.baidu.com [123.125.71.98]),那么应该是百度联盟的蜘蛛用来抓取页面里的内容以便匹配广告用的。

(编辑:李大同)

【声明】本站内容均来自网络,其相关言论仅代表作者个人观点,不代表本站立场。若无意侵犯到您的权利,请及时与联系站长删除相关内容!

    推荐文章
      热点阅读